对拉里·罗伯茨和里海网络的评论互联网流量增长研究安德鲁·奥德里兹科明尼苏达大学odlyzko@umn.eduhttp://www.dtc.umn.edu/~odlyzko1.简介拉里·罗伯茨及其团队对互联网流量增长的研究里海网络以PowerPoint的形式发布演示,声称美国的主干网络流量正在增长年增长率约为300%。如果正确,这将是极端的对互联网乃至整个高科技的未来都具有重要意义行业。然而,我严重怀疑这种说法是否有效。2.技术拉里·罗伯茨(Larry Roberts)的研究称,互联网流量增长了4倍每年,也就是说如果我们按照他的流量计算当前的流量月,除以一年前相应月份的月,我们得到大约4倍。经历如此明显的事情似乎有点学究味定义,但显然是必要的,正如一则新闻报道所说一项研究确定年增长率为400%,而另一项研究则声称每年增长4%。事实上,年增长4倍相当于增长每年300%。总的来说数不胜数,这往往会导致错误的陈述,有时它们在某种程度上是荒谬的,而在另一些情况下则足够可信他们是在误导。我的论文中引用了许多例子上述新闻报道是另外两个例子。尚未引用另一个例子,表明类似的问题在金融机构中突然出现分析师,CIBC 2001年6月27日题为“切换齿轮”的报告-光子主导下一代网络”,R.Schafer合著,J.Jungjohann、A.Bezoza和K.Gallagher在标题页上说(还有几个地方)“互联网流量仍然每100天翻一番。“每100天流量翻倍年增长率超过12倍。然而,在本报告正文中,第8页的图表4和第16页的图表11都显示了互联网流量年增长速度仅略快于2倍!作为另一个例子,以下引用的关于有线和无线IP增长率的新闻报道流量混淆了位和字节(作为与公司显示),结果是该系统所承载的实际流量ISP被低估了8倍。在计算交通量时,有很多误入歧途的方法。一个问题偶尔会出现的情况是,电信链路是对称的它们在两个方向上的容量相同,人们必须担心测量只覆盖一个或两个方向。(利用率数字为通常会产生误导,因为他们没有考虑到这一因素。)为了获得最大的清晰度,我一直倾向于处理交通问题以离开网络或退出网络的字节为单位测量。(由于数据包丢失等问题,这两者很少相同和多播,但往往很接近。)95%的数字拉里·罗伯茨(Larry Roberts)使用的语言更加含糊不清。原则上,如果我们看看某个链接的一个方向,它可能显示出普通的利用率(字节数除以最大容量)为6%,但95%的交通量可能在1.05%到100%之间,取决于交通状况。实际上,在大型主干链路上,这不是一个问题,因为95%的交通量似乎通常是普通的1.5倍左右,但这是一个问题。使用95%的流量也存在其他问题估计,与测量频率相关的问题,如何两个方向的数据合并为95%因此,我更喜欢使用直字节流量数据,如这些是相对明确的。拉里·罗伯茨处理的数据,然而,这是95%的交通量估计值。3.拉里·罗伯茨和里海网络研究这项研究是基于它所说的19个最大的数据美国的ISP。然而,它并没有命名它们。(此外,如果没有测量,人们怎么知道哪一个是最大的19个对于更大的运营商样本?)据我所知,更严重的是在这19家ISP中,没有一家提出过任何关于他们向拉里·罗伯茨提供的测量结果的质量。(这一点很重要,因为尽管研究在幻灯片#3中声称这是自1996年以来首次真正测量互联网流量,它不是采用统一方法的系统测量,而是未知来源提供的测量值汇编。)因此,它是很难判断人们对最终结果的信任程度。拉里·罗伯茨(Larry Roberts)的研究称,互联网流量增长率2000年4月至10月的半年内,年增长率为3.9倍,并在截至2001年4月的下半年加速至4倍。这一估计与我和克里·科夫曼的估计背道而驰已经完成。我们在1997/8年首次观察到以及互联网的增长率”,发表于1998年10月的“第一个星期一”),互联网流量每年仅增长约2倍(我们明确表示,我们指的是1.7倍至每年2.5倍,因为我们的数据不允许更高的精度)。这是极有争议,因为它与几乎所有国家的做法背道而驰接受“互联网流量每三四个月翻一番”相当于每年8倍至16倍的利率。我们进一步预测这可能是未来的自然增长率。这一预测是基于对众多机构的观察在很长一段时间内表现出这样的增长率,即使在他们有充足的带宽。这种现象表明增长不受可用容量的制约(正如“建设它”的咒语而且他们会来“建议”),而是根据新应用程序。Kerry Coffman和我的后续研究,题为“互联网增长:数据流量是否存在“摩尔定律”?,“已发布2000年夏天,今年早些时候进行了更新。它是关于将与我们的其他论文一起在.它证实了我们的早前预测互联网流量将每年增长约2倍,至少到2000年中期,并产生了更多的证据表明这很可能是未来的增长率。虽然罗伯茨的研究也得出了低得多的增长率与普遍假设的每年8倍或16倍相比,这使得真实增长率是否为2倍存在巨大差异(如Kerry Coffman我估计)或每年4次(正如拉里·罗伯茨所说)。如果4x是正确的增长路径,那么互联网行业很快就会看到巨大的收入增加,这将导致设备销售。然而,如果增长率是每年2倍,那么随着技术进步和过去几年的竞争和过度建设在相当长一段时间内,将收入增长保持在适度水平。特别地,我们的估计中哪一个是正确的,很可能在一两年,从观察运营商收入的变化开始。我对拉里·罗伯茨(Larry Roberts)估计的年增长4倍持怀疑态度。所有的我所看到的数据与2倍的增长率更加一致。(此外,许多主要航空公司最近削减资本支出计划接下来的几年表明,他们不会看到巨大的增长率他们网络上的流量。)我不想谈细节,但我的Kerry Coffman的论文有完整的文档记录,主要基于公开可用的信息,或来源所在的其他信息显式命名。虽然我们没有获得关于正如拉里·罗伯茨(Larry Roberts)所说,我们确实获得了大量ISP样本论文中列出的一些数据(连同来源数据)。此外,所有已经积累的证据因为我们的工作支持了我们对年增长2倍的估计。(例如,最近发布的Genuity流量图,显示该运营商的年增长率非常稳定,为2.2倍过去3.5年。此外,有线和无线的最近增长率主干,发表于2001年6月25日的《标准》,显示了他们的在经历了一段非常低的增长期后,增长率反弹到这个范围,由于他们在接管互联网MCI时遇到的问题。)有人可能会问,这个2倍的估计值如何与AT&T的增长率相匹配官方发言人最近透露的互联网流量每年约为3倍(参见8月发行的《库克报告》互联网”)。我和克里·科夫曼都知道AT&T的增长率(虽然我们没有发布它的权限),但我们也有例如,听说AT&T在对等流量中所占的份额运营商在增长,这证实了我们的观点,即AT&T正在增长速度超过行业平均水平。因此,这一证据也是一致的我们的估计是2倍。为什么拉里·罗伯茨(Larry Roberts)会获得更高的互联网流量估计值增长率?我不知道,因为他的数据不可用检查和分析。因此,很难说它有多仔细组装和加工。可能是他在衡量产能增长超过了交通量的增长(通常情况下正如克里·科夫曼和我所指出的那样,增长速度超过了交通量多次)。这完全取决于在第一名。我们的论文中有一些有趣的(或骇人听闻的,取决于权威人士引用交通数据的例子结果证明这是错误的。我担心数据和分析质量的一个主要原因拉里·罗伯茨所依赖的是,似乎有许多小型他的PowerPoint演示文稿中明显存在的问题。让我引用一个几点。它们可能看起来微不足道,但却很麻烦。(A) 在幻灯片#3中,据称这是第一次彻底的研究自1996年NSFNET统计数据停止以来变得可用。嗯,这是不正确的,因为很容易检查。NSFNET统计数据收集于1995年4月停止,当时逐步淘汰。即使是1994年末和1995年初的NSFNET统计数据也不能被视为互联网增长的代表性观点,如流量1994年底开始脱离NSFNET。因此,我们有自1994年以来,没有对互联网流量进行过彻底的研究。(NSFNET交通统计数据和报告可以在Web上轻松获得,网址为.)(B) 在幻灯片#9中,据称在其他国家,互联网交通量每年增长2.8倍,这是历史性的(2000年前)美国的增长率。这种说法的来源是什么?拉里·罗伯茨从外国航空公司获得数据了吗?(他们的成长利率差异很大,从澳大利亚每年约2倍到中国国际互联网带宽为4倍。)还有,什么有证据表明,美国的年增长率是2.8倍2000年之前?上述NSFNET统计数据显示20世纪90年代初,年增长率为正常的2倍。此外,在论文《超越摩尔定律:互联网增长趋势》,发表于多页《IEEE计算机》2000年1月版(第33卷,第1期)第117-119页,以及在“互联网增长趋势”版本中提供,网址为,拉里·罗伯茨声称(没有提供任何参考资料)互联网1998年,流量开始以每年4倍的速度增长。(增长率为4x从1998年到今天,交通量会高得离谱到目前为止。)(C) 幻灯片#10声称四大ISP具有可比性交通量。这似乎与普遍的看法背道而驰(由一些对等卷数据支持)迄今为止最大的ISP。(美国司法部和欧洲反托拉斯当局确实有2000年初的准确数据,收集于与斯普林特的拟议收购有关MCI WorldCom,但不幸的是,公众无法获得这些数据。)(D) 在第11张幻灯片上,我们有一张显示互联网流量增长的图表,从1970年开始。它似乎表明,一些交通措施(它尚不清楚这是95%还是其他)增长从1970年的约20个基点到1995年的约300 Mbps。嗯,增长了25年内的系数为1500万(300 Mbps除以20 bps)年增长1.94倍。因此,长期增长率接近2倍。这张幻灯片显示了从一个增长率开始的相对平稳的过渡到另一个。然而,凯里·考夫曼和我发现有一段时间1995年和1996年增长异常迅速。通过1994年底,NSFNET主干约为15 TB/月(以直接进入或离开网络的字节)。来自公共NAP的流量统计(最初是公开的(可在他们的网站上找到)表明通过他们的流量在附近1996年中期为每月500 TB,1997年年底为每月1200 TB左右。在合理的假设下,很少的流量会传递更多与单个NAP相比,这为互联网流量提供了一个稳定的下限,确实表明,1995年和1996年出现了一次快速增长。(我们没有有关于这次喷发时间分布的详细数据。也,我们估计美国互联网主干总流量大约为截至1996年底,每月1500 TB,但这一估计不太可靠。)(E) 在第13张幻灯片上,估计价格每张都下降了一半年,而流量增长了4倍,这意味着收入应该每年增长2倍。然而,我们并没有看到收入如此迅速的增长。一般来说,运营商从商业客户那里获得的IP收入似乎以每年30-50%的速度增长。(例如,见2001年5月11日摩根大通和麦肯锡撰写的题为“IP!”的报告。)此外,由于价格通常不会每年下降一半(除了一些主要路线,那里有很多纤维和重型竞争),这种说法似乎很有疑问。(F) 关于主干链路利用率的说法值得怀疑。利用率较低,并且可能在多种情况下保持较低水平原因。例如,可以检查AboveNet网络,该网站在以下网址公开了其详细的流量统计数据:.以上几点使我对拉里的稳健性产生了怀疑罗伯茨的结论。4.最后总结虽然我对拉里·罗伯茨(Larry Roberts)的4倍增长率估计持怀疑态度,但这可能可以想象是正确的。如果是的话,那么一定会有非常有趣的事情发生因为我们知道本地连接的带宽ILEC租用的互联网增长速度不是很快,这将很可能意味着CLEC提供的光纤终于开始以承载大量流量,并且正在部署新的应用程序比以前快多了。4倍增长率之所以可行,是因为互联网并不是一切那么大,与接地。例如,除了极少数例外,所有ISP通常都有仅一条OC48或最多一条OC192链路沿着主要路线。然而,以设施为基础的运营商通常有40至800家每条线路上的光纤,每根光纤通常都能够(当前的DWDM技术),其携带80个OC48或OC192波长。因此,目前只有一小部分光纤容量用于互联网流量。(另一种方法是注意拉里·罗伯茨(Larry Roberts)的PowerPoint幻灯片第6张幻灯片估计只有1200张19个ISP的Gb/s边缘端口总和仅相当于大约120个OC192路由器接口。)尽管我对拉里·罗伯茨(Larry Roberts)的4倍增长率表示怀疑据估计,我在几个重要问题上同意他的看法。一个是在互联网上占主导地位的是商业流量。(太多了对互联网未来的预测似乎基于仅针对住宅客户的行为。)另一个原因是没有迹象表明互联网流量增长速度出现严重放缓。金融分析师最近估计,互联网交通增长正处于快速减速的道路上,甚至有人声称,北电集团负责人表示,这不仅是增长速度,还有互联网交通量本身已经下降。从这个角度来看,电信崩溃是这是因为用户放弃了以前的方式对带宽的需求。拉里·罗伯茨和我都没有看到任何证据其中。我不会像他那样给网络流量打电话“抗衰退”,但也有一些因素(如价格暴跌传输和交换容量),可能刺激流量即使在经济衰退中也能实现增长。2001年9月11日的悲剧只能刺激对冗余路径、数据库重复等的搜索。,这将推动增长。互联网流量增长迅速(甚至是2倍以任何标准衡量,每年的速度都很快),而事故是由现实与不切实际的期望的冲突。商业计划书基于每年增长8倍或16倍的假设,或相关的“互联网时代”神话的基础无法生存在每年增长2倍的环境中。