管理“过度”以提高底线
服务提供商需要更好的工具和洞察力来了解他们的基础设施、服务交付和最终用户服务质量之间的关系。
今天，互联网由内容平台和内容交付网络主导，它们将不断增长的内容量和种类“洗牌”到服务提供商网络中，以使其更接近最终用户，以优化交付和改善体验。由于现在大多数内容都是从服务提供商网络内交付的，因此可能需要重新审视许多问题和术语，例如网络中立性和“over-the-top”。
自 2010 年以来互联网发生了怎样的变化
在过去十年中，互联网——全球网络网络——同时增长和萎缩。这怎么可能？
在流量方面，互联网大幅增长。不同服务提供商网络的年增长率不同，典型增长率在 25-40% 的 CAGR 范围内，每日网络流量通常以 PB 为单位。
那是在 COVID-19 大流行爆发之前。自大流行开始以来，这些网络的流量年增长率在 40-60% 之间。
这种增长的部分原因是我们的在线行为发生了变化，并且随着我们的工作、学习和娱乐转向在线，我们更加依赖宽带连接。
连接到互联网的设备数量呈指数增长也推动了流量增长，其中许多设备具有公共 IP 地址（IPv4 和 IPv6）。许多连接的设备仍在使用私有 IP 地址，隐藏在使用网络地址转换 (NAT) 的家庭路由器“后面”。快速耗尽的 IPv4 地址空间随着 IPv6 地址空间的增加而增加，将允许添加数十亿个新设备和系统，包括无数的物联网 (IoT) 设备。
十年前，每个家庭只有几台联网设备——主要是笔记本电脑、手机和平板电脑。在过去几年中，连接设备的数量显着增长。一些精通数字技术的消费者现在在家中拥有 30 多种联网设备，包括笔记本电脑、智能手机、游戏机、家庭自动化传感器和控制器、智能扬声器、联网电视机和流媒体设备。所有这些设备都可以访问比以往更多的带宽。
那么，互联网如何变得变小 ?
查看流量来源域的数量，我们注意到显着减少。 2009 年，大多数服务提供商网络上的互联网流量有一半来自 150 个源域。到 2019 年，这个数字下降到只有 5 个。到 2019 年，服务提供商网络中 90% 的互联网流量来自不到 150 个来源，所有互联网流量的 50% 来自少数互联网 ASN。
虽然“十大”内容源域的来源因网络和地区而异，但它们通常是超大规模巨头——最大的流媒体视频、在线游戏和云内容提供商。
另见： 是什么让云可观测性变得如此重要和与众不同？
超大规模巨头的崛起
过去十年也见证了这些超大规模公司的惊人增长。在 4G/LTE、云计算和更复杂的终端设备等先进网络技术的帮助下，亚马逊、苹果、Facebook、谷歌、微软和 Netflix 等超大规模巨头找到了将服务扩展到数十亿人的方法。
然而，随着庞大的全球用户群的扩大，超大规模企业开始遇到问题。对视频、应用程序和服务的需求飙升意味着在大型集中式云数据中心托管超大规模内容并通过互联网传输网络交付内容变得非常昂贵。
此外，数据中心和最终用户之间的距离会引入延迟，并经常影响用户的服务质量 (QoS)。
因此，超大规模提供商需要让他们的内容更接近消费者，而解决方案以一种新型提供商的形式出现：内容交付网络 (CDN)。在过去的十年中，CDN 出现了大幅增长，从向 CDN 提供多种不同类型内容的 Cloudflare 和 Akamai 等内容通才到 Netflix 的 Open Connect 或针对特定内容类型优化的 Google GGC 等 CDN。
最初，CDN 通过在主要的国家和地区对等站点（互联网交换或 IXP）附近托管，使流行内容更接近消费者。后来，他们通过将其托管在各个服务提供商的网络中，使其更加接近，这些服务提供商改进了他们的网络架构以合并这些本地（网内）CDN 缓存。
另见： 内容交付网络与边缘计算
超大规模者的网外是服务提供商的网内
热门内容继续更接近订阅者——本地边缘和城域级 CDN 缓存现在已成为常态。这些本地缓存为越来越多的用户提供超高清视频、游戏更新、移动更新和其他服务；促进优质体验。
2009 年，CDN 承载的互联网流量不到 25%。然而，在 2019 年，他们交付了近 90%。互联网有效地成为了一种庞大的内容交付机制，今天由视频、游戏和视频会议流量主导。
ACM SIGCOMM 2021 最佳论文“Hypergiants 离线七年”深入挖掘了部署在服务提供商网络中的数千台超大规模服务器如何改变互联网结构和服务交付方式。该论文显示，从 2013 年到 2021 年，托管超大规模离线网络的网络数量增加了两倍：达到 4,500 个网络。虽然最大的平台公司主导着这些部署，但几乎所有这些服务提供商网络都在自己的网络中托管至少一个（并且越来越多的两个或更多）来自 Google、Netflix、Facebook 或 Akamai 的服务器。
网外 这些超巨人的扩展是在线服务器和缓存 托管在服务提供商网络中。这为不断增长的用户群提供了对互联网内容、服务和应用程序的快速访问。
对服务提供商来说一切都是玫瑰吗？
在许多方面，这种将托管在更靠近最终用户的超大规模内容的扩展是双赢的：消费者获得了对内容的高带宽、低延迟和无处不在的访问；超大规模内容提供商在最大限度地降低运输成本的同时积累了订阅者； CDN 扩展了他们的业务；和通信服务提供商成为关键连接的提供商，因为我们已经变得依赖无所不在的互联网访问。
消费者对种类繁多的内容的需求为服务提供商创造了一个机会来提升他们的游戏水平，在基本连接计划的基础上推出增值内容包，并在为最终用户提供最佳体验质量方面展开竞争。
随着超大规模提供商越来越接近最终客户并更好地控制其内容的执行方式，服务提供商无法获得相同的洞察力。对于服务提供商而言，在线缓存和服务器在很大程度上是其网络中的大型“黑匣子”，为订阅者提供优质内容。但是，许多服务提供商在遇到以下问题时仍然在猜测：如何提高新服务的性能？我可以优化服务交付（甚至更多）吗？我的订阅者的用户体验如何？
随着越来越多的服务从网上第三方服务基础设施交付，服务提供商需要更好的工具和洞察力来了解他们的基础设施、服务交付和最终用户服务质量之间的关系。
对于视频服务而言，这可能比任何其他类型的流量都更真实。
是时候停止称它“过头”了？
来自 Netflix、YouTube、Amazon Prime、Hulu、Facebook 和其他在线视频源的视频流主导着互联网和服务提供商网络。在当今许多网络中，视频占总流量的 50% 以上。
流媒体现在在白天延伸 - 高峰流量持续到晚上，即所谓的“黄金时段”。
然而，视频流量的增长不仅仅是因为花在流媒体上的时间增加。在大流行期间，新的“眼球”显着增加。例如，在 2020 年 3 月至 2020 年 9 月期间，北美新增了超过 30% 的视频端点。
向订阅者提供流媒体视频的主要机制有两种：
- 在线：最流行的内容来自基于网络的内容缓存。
- 网外：其他内容从互联网交付，通常通过与最大的 CDN 和视频服务提供商的私有对等链接。网络规划团队对此流量很感兴趣，因为与对等互连/中转流量相关的成本更高。
如今，在许多网络中，超过三分之二的视频内容是通过网络缓存提供的。
因此，在谈论视频服务时，也许是时候抛弃“over the top”（OTT）这个带有某种贬义的词了。订阅视频点播（或流媒体视频点播），又名 SVOD，是一个更好地描述当今 Netflix、YouTube、Amazon Prime、Disney Plus 和许多其他视频服务世界的术语。
服务提供商需要更好地了解 SVOD 和其他 OTT 服务
对于服务提供商而言，了解他们的on-net 和网外 提供视频（和其他服务）的机制正在执行 - 并为所有执行此操作 在他们的网络上运行的视频服务。
这不是一项可以通过从其网络节点收集数据轻松完成的任务，因为它需要：
- 准确识别来自所有其他流量类型的流式视频流量。
- 识别特定的视频服务（有时会与属于 CDN 的所有其他内容一起出现。）
- 了解视频流（承载视频的 IP 流）如何穿越网络并影响网络基础设施。
- 量化和比较属于不同视频服务的流。
- 量化视频性能和最终用户体验。
幸运的是，技术已经发展到可以从网络中以网络遥测的形式获取大量数据，并通过大数据引擎进行处理，从而为服务提供商提供全新的洞察力。
使用具有详细互联网上下文的大数据网络分析，服务提供商可以全面了解互联网服务交付链，在这种情况下，视频，并获得强大的多维洞察力，可以帮助他们深入到特定的网络视角：视频来自在线缓存与跨对等路由器的离线缓存、每个视频服务的视频流数量和平均流比特率的服务交付洞察。
此外，借助正确的工具，这些洞察力可以扩展到按访问类型或特定用户类别的视频服务消费——从超重用户（每月使用 TB 带宽）到临时用户，并涵盖其他类型的服务 - 不仅仅是视频 - 以更好地了解哪些内容和应用程序使用最多。
更好的洞察力带来新的获利机会
随着服务提供商更深入地了解他们如何从网络和互联网向订阅者提供内容，这些知识创造了一个超越基本连接并专注于服务质量和客户体验的机会，以此来赢得和留住订阅者.
所有这些信息都可以帮助服务提供商增加进一步获利的机会：
- 提供包含“优质”视频质量的特别计划。
- 提供服务包（包括订阅流行的流媒体视频服务。）
- 成为在线视频内容提供商并提供您的视频服务。
- 改善他们与在线视频分销商的业务合作伙伴关系——以改善他们的业务。
结论
与成本优化的内容交付相关的问题是服务提供商最关心的问题，因为他们面临着从位于其网络内外的许多来源交付内容和服务的挑战，而对所有这些流量的可见性通常有限。
新一代大数据网络分析可以提供更好的网络、服务和用户可见性以及详细的实时洞察，帮助服务提供商优化其服务交付、改善客户体验并开辟新的获利机会。
物联网技术