<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
<meta name="Generator" content="Microsoft Word 15 (filtered medium)">
<style><!--
/* Font Definitions */
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        margin-bottom:.0001pt;
        font-size:11.0pt;
        font-family:"Calibri",sans-serif;}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:blue;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:purple;
        text-decoration:underline;}
p.msonormal0, li.msonormal0, div.msonormal0
        {mso-style-name:msonormal;
        mso-margin-top-alt:auto;
        margin-right:0in;
        mso-margin-bottom-alt:auto;
        margin-left:0in;
        font-size:11.0pt;
        font-family:"Calibri",sans-serif;}
span.gmailsignatureprefix
        {mso-style-name:gmail_signature_prefix;}
span.EmailStyle19
        {mso-style-type:personal;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
span.EmailStyle20
        {mso-style-type:personal;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
span.EmailStyle21
        {mso-style-type:personal-compose;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-size:10.0pt;}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
</head>
<body lang="EN-US" link="blue" vlink="purple">
<div class="WordSection1">
<p class="MsoNormal">I thought about this over the weekend, and I think the byte[] variant and the Object[] variant target separate problems: byte[] targets I/O patterns and Object[]<o:p></o:p></p>
<p class="MsoNormal">targets Collections.<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">So my current mental model is:<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">public class java.io.VariableLengthByteArray {<o:p></o:p></p>
<p class="MsoNormal">  // whatever views we want to support<o:p></o:p></p>
<p class="MsoNormal">  public ByteArrayOutputStream asOutputStream();<o:p></o:p></p>
<p class="MsoNormal">  public InputStream asInputStream();<o:p></o:p></p>
<p class="MsoNormal">  public SeekableByteChannel asByteChannel;<o:p></o:p></p>
<p class="MsoNormal">  <o:p></o:p></p>
<p class="MsoNormal">  // provides long-indexed methods<o:p></o:p></p>
<p class="MsoNormal">  public byte get(long index);<o:p></o:p></p>
<p class="MsoNormal">  public long get(long index, byte[] buf);<o:p></o:p></p>
<p class="MsoNormal">  public byte set(long index, byte b); // return old value<o:p></o:p></p>
<p class="MsoNormal">  public long size(); // note the long<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">  // optional: inserts/removes by long index<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">  // add to tail<o:p></o:p></p>
<p class="MsoNormal">  public void add(byte b);<o:p></o:p></p>
<p class="MsoNormal">  public void add(byte[] b, int off, int len);<o:p></o:p></p>
<p class="MsoNormal">  public void add(VariableLengthByteArray other);<o:p></o:p></p>
<p class="MsoNormal">  public void add(ByteBuffer buf);<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">  // size-limited methods<o:p></o:p></p>
<p class="MsoNormal">  public int sizeAsInt(); // requires int range<o:p></o:p></p>
<p class="MsoNormal">  public byte[] toArray(); // requires int range<o:p></o:p></p>
<p class="MsoNormal">  public String toString(); // requires int range<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">  // miscellaneous<o:p></o:p></p>
<p class="MsoNormal">  public void clear();<o:p></o:p></p>
<p class="MsoNormal">}<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">public class java.util.HugeCollections {<o:p></o:p></p>
<p class="MsoNormal">  // views are capable and efficient with size > Integer.MAX_VALUE<o:p></o:p></p>
<p class="MsoNormal">  public static <T> List<T> getList(); // this structure<o:p></o:p></p>
<p class="MsoNormal">  public static <T> Set<T> getSet(); // segmented hash table<o:p></o:p></p>
<p class="MsoNormal">  public static <T> Map<T> getMap(); // segmented hash table<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">  // how do we retrieve the long size?<o:p></o:p></p>
<p class="MsoNormal">}<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Unfortunately, I don't see a way to avoid two public types while retaining the capabilities.<o:p></o:p></p>
<p class="MsoNormal">Archie, thank you for all of the questions/suggestions last week, they really sparked some ideas.<o:p></o:p></p>
<p class="MsoNormal">  John<o:p></o:p></p>
</div>
</body>
</html>