通信行业硅转向：从专用ASIC到软件定义网络的架构演进

1. 项目概述通信行业的硅转向如果你在2016年前后关注过通信设备行业尤其是那些做核心路由器、骨干网交换机的“大厂”你大概能感受到一种山雨欲来的氛围。当时一篇来自EE Times的报道标题是“Silicon Shift Ahead in Comms”精准地捕捉到了这股暗流。文章的核心观点源自ON.Lab的负责人Guru Parulkar他预言了一场将持续三到五年的深刻变革电信运营商的网络将向当今互联网巨头的数据中心架构看齐。这个转变的核心驱动力是对一种新型通信芯片的迫切需求——它们需要足够简单易于编程并且运营商们“昨天”就想要。这听起来像是一个纯粹的技术趋势预测但背后折射出的是整个通信行业价值链条的重塑。过去几十年通信网络的核心是专用集成电路和封闭的软件系统由少数几家设备巨头牢牢把控。而Parulkar所描绘的未来是软件定义网络将扫清这些昂贵、复杂的专有系统取而代之的是基于商用芯片和开源软件的、更灵活、更经济的架构。他当时那句“ASICs will have a role in niche contexts but big switch and router people are going to need to build solutions using merchant silicon — that trend is clear and unstoppable”ASIC将在利基场景中发挥作用但大型交换机和路由器厂商将需要使用商用芯片来构建解决方案——这一趋势清晰且不可阻挡如今看来几乎是一语成谶。这篇文章不仅适合网络工程师、芯片架构师阅读对于任何关心基础设施技术演进、软硬件协同设计乃至商业策略的从业者来说都是一份珍贵的历史切片和思维导图。它讲述的不仅仅是一次技术迭代更是一场关于控制权、创新速度和产业生态的深刻博弈。2. 核心趋势解析从“硬”封闭到“软”开放要理解这场“硅转向”的实质我们必须先拆解传统通信网络的构建模式。在SDN和NFV网络功能虚拟化概念兴起之前运营商的网络是一个典型的“垂直集成”黑盒。思科、Juniper、华为、中兴等设备商提供的是“一体机”解决方案专为特定网络协议如OSPF、BGP、MPLS优化的ASIC芯片搭配深度绑定的私有网络操作系统。这种模式的优点是性能极致、稳定可靠毕竟硬件和软件都是为了单一功能而共同设计的。但它的弊端也极其明显创新周期漫长以年计、设备成本高昂、不同厂商设备间互通性差并且任何功能更新或业务上线都严重依赖设备厂商的排期。Parulkar提出的愿景本质上是将互联网公司的“数据中心哲学”引入电信网络。互联网巨头们是怎么构建其全球数据中心的它们大量采购标准化的、通用的x86服务器和以太网交换机即“商用硬件”或“白牌硬件”然后通过一层统一的软件如各类虚拟化平台、编排系统来定义这些硬件能做什么。计算、存储、网络都变成了可以通过API按需调配的“资源”。这种模式带来了无与伦比的灵活性和敏捷性新业务上线可能只需要编写一些脚本或部署几个容器而不是采购和安装一台新的物理设备。2.1 软件定义网络的核心诉求SDN是实现这一愿景的关键技术路径。其核心思想是将网络的控制平面与数据平面分离。在传统设备中控制平面决定数据包如何转发和数据平面实际转发数据包是紧耦合在同一个设备里的。SDN则引入了一个集中式的控制器这个控制器拥有网络的全局视图并通过一种开放的协议最著名的是OpenFlow来统一指挥底层所有的交换设备即数据平面如何转发流量。这样一来底层交换设备就变得“简单”了。它不需要运行复杂的路由协议栈只需要高效地执行控制器下发的流表规则。这正是Parulkar呼吁芯片制造商关注的焦点生产能够高效匹配和执行大量流表条目、支持灵活可编程管道、且性价比极高的商用交换芯片。博通、英特尔、美满电子等公司的商用交换芯片开始成为这个新生态的基石。它们不再是功能固定的ASIC而是提供了一个可编程的流水线框架允许网络开发者通过P4等高级语言来定义数据包的处理逻辑。注意这里存在一个常见的理解误区即认为SDN/NFV就是完全用软件替代硬件。实际上它更准确地说是“用通用硬件可编程硬件上层软件”来替代“专用硬件绑定软件”。对性能最敏感的数据平面处理仍然需要高度优化的硬件无论是可编程ASIC、FPGA还是智能网卡只是这些硬件变得标准化和可编程了不再与某个特定网络功能永久绑定。2.2 CORD架构变革的具体蓝图文章中提到一个关键项目CORD。这可以说是将数据中心架构应用于电信边缘中心机房的“样板间”工程。CORD的目标是将电信中心机房重新架构为一个微缩的数据中心。想象一下传统的中心机房塞满了各种功能单一的机框BRAS宽带远程接入服务器、OLT光线路终端、E-Core演进的分组核心网等等。每个机框都是独立的“烟囱”。CORD的方案是用一排排标准的服务器和开放交换机运行商用芯片组成的资源池来替代所有这些专有设备。不同的网络功能如BRAS、vCPE、vEPC将以软件的形式通常是虚拟机或容器运行在这些通用的服务器上。而连接这些服务器的交换机则通过SDN控制器进行统一调度为不同的业务链提供所需的网络连接。ATT在文中提到的针对住宅用户的接入服务现场试验就是CORD理念的早期实践。他们试图用运行在通用硬件上的软件来提供原本需要专用硬件才能实现的宽带接入网关功能。这背后的商业逻辑非常直接降低资本支出CAPEX更便宜的硬件、降低运营支出OPEX自动化运维、快速业务部署、以及打破供应商锁定。3. 芯片产业的挑战与机遇从“功能定义”到“平台赋能”当网络设备的需求从“功能固定的黑盒”转向“软件定义的开放平台”这对上游的芯片产业意味着什么这是一次根本性的角色转换。传统的通信ASIC厂商其核心竞争力在于对特定网络协议的深刻理解和硬件级优化。他们销售的是“功能”。而在新的模式下芯片厂商需要提供的是一个“平台”一个能让下游的设备商、运营商甚至第三方开发者在其上快速构建和迭代网络功能的、稳定且强大的硬件基础。3.1 商用交换芯片的关键特性那么一款能够胜任未来软件定义网络核心的商用交换芯片需要具备哪些特质结合当时2016年的技术背景和后续发展我们可以总结出几个关键点高吞吐量与可扩展性这是基本盘。数据中心和骨干网对端口速率和交换容量的需求永无止境。芯片需要支持从10G、25G、40G到100G乃至更高速率的端口密度并提供无阻塞的交换能力。灵活的可编程性这是区别于传统ASIC的核心。芯片的报文处理流水线不应是固定的而应允许通过微码或类似P4的语言进行重新定义。这意味着它不仅能处理已知的协议如IPv4、IPv6、MPLS还能适应未来可能出现的新协议或封装格式。丰富的表项资源SDN依赖流表。芯片需要提供巨大的TCAM三态内容可寻址存储器和SRAM资源以存储由控制器下发的海量流表条目。表项的规模、查找速度和更新效率直接决定了网络的规模和敏捷性。强大的遥测能力网络可视化和智能运维是软件定义网络的重要优势。芯片需要原生支持带内网络遥测等技术能够在不影响性能的前提下收集数据包在转发路径上的详细状态信息如队列延迟、缓存占用等并将这些信息反馈给控制器和分析系统。开放的工具链与生态芯片必须配套提供完善的SDK、编译器如将P4程序编译到该芯片的流水线、仿真器和驱动程序。一个活跃的开发者社区和丰富的软件生态其重要性不亚于芯片本身的硬件指标。以博通的StrataXGS系列为例它在那个时期之所以能成为众多白牌交换机和SDN项目的首选正是因为在提供高性能交换容量的同时逐步增强了其可编程能力如FlexFlow特性和开放接口构建了一个相对完整的软硬件生态。3.2 对传统设备商的冲击与转型这场变革对传统的网络设备巨头而言不亚于一次“创造性破坏”。它们的商业模式建立在专有硬件和软件的溢价之上。当硬件逐渐标准化、软件走向开源其利润空间和护城河必然会受到挤压。文章引述Parulkar的建议——“Engineers should focus on software and writing value-added applications and services rather than focus on ASICs and software related to them”——这直接指向了设备商未来的价值所在。设备商需要从“硬件制造商”转型为“软件与服务提供商”。它们的核心竞争力将不再是设计出比别人快5%的专属转发芯片而是如何利用好商用芯片在其之上开发出更具创新性、更稳定、更易于管理的网络操作系统、控制器平台和增值业务应用。例如它们可以专注于网络操作系统开发一个能在多种白牌交换机硬件上运行的、统一的网络操作系统提供高级别的自动化、可视化和安全功能。云原生网络功能将传统的网络功能防火墙、负载均衡器、WAN优化器等重构成云原生的微服务便于在Kubernetes等平台上编排和管理。端到端解决方案与集成虽然底层硬件标准化了但将服务器、交换机、存储、软件整合成一个稳定、可靠、支持全球服务的整体解决方案依然需要深厚的专业知识和集成能力。全生命周期服务提供从设计、部署到运维、升级的全托管服务帮助运营商平滑过渡到新的架构。4. 实操推演构建一个简化版CORD原型理解了理论我们不妨从工程师视角推演一下在2016年左右如何利用当时已有的开源组件和商用硬件搭建一个极小化的CORD概念验证环境。这能让我们更具体地感受技术落地的细节与挑战。4.1 硬件选型与考量首先需要组建硬件资源池。根据CORD“中心机房即数据中心”的理念我们需要两类硬件计算节点用于运行虚拟化的网络功能。可以选择标准的1U或2U机架式服务器。关键配置考量CPU支持硬件虚拟化Intel VT-x / AMD-V的多核处理器。核数越多能承载的VNF虚拟网络功能实例也越多。考虑到网络功能对性能的敏感度主频不宜过低。网卡这是重中之重。必须选择支持SR-IOV单根I/O虚拟化的网卡。SR-IOV允许将一块物理网卡虚拟化成多个独立的“虚拟功能”直接分配给不同的虚拟机能极大降低网络I/O的延迟和CPU开销。英特尔X520/X540系列或更先进的XXV710是当时常见的选择。内存与存储内存容量需根据计划运行的VNF数量预留。存储方面本地SSD用于系统盘和VNF镜像存储即可因为CORD架构中持久化存储通常由独立的存储资源池或分布式存储解决。网络节点即白牌交换机。这是“硅转向”的实体体现。我们需要一台支持OpenFlow协议和一定可编程能力的交换机。在2016年一个可行的选择是使用基于博通Trident II或Tomahawk芯片的“裸机交换机”例如来自Edgecore、Delta等ODM厂商的型号。这些交换机硬件性能强大但原厂只提供基本固件需要自行安装开源网络操作系统。实操心得硬件采购时务必确认交换机芯片对OpenFlow协议版本的支持程度如1.3或1.5以及其流表容量。同时要检查开源网络操作系统如Open Network Linux, ONL是否提供了对该交换机型号的驱动支持。早期社区支持不完善驱动适配是个大坑。4.2 软件栈部署与集成软件是灵魂。一个最小化的软件栈可能包括以下层次底层操作系统计算节点安装一个主流的Linux发行版如Ubuntu Server LTS并配置好KVM虚拟化环境。网络节点安装Open Network Linux。ONL是一个为裸机交换机定制的Linux发行版它提供了硬件抽象层并允许在其上安装不同的网络操作系统。网络操作系统在白牌交换机上我们需要安装一个支持OpenFlow的网络操作系统。Open vSwitch是一个软件交换机但其硬件加速版本如OVS with DPDK性能有限。对于真正的硬件交换机当时的主流选择是ONOS或OpenDaylight这类SDN控制器项目所驱动的“南向接口适配”模式或者更直接的安装像Stratum这样的开源、与芯片无关的交换机操作系统。Stratum的目标就是为白牌交换机提供一个统一的、支持P4可编程的接口层。但在2016年Stratum尚在早期更常见的做法是使用交换机厂商提供的特定NOS如针对博通芯片的Indigo或OF-DPA软件。SDN控制器这是大脑。ONOS因其对运营商级高可用性和性能的关注成为CORD项目的自然选择。我们需要在独立的服务器或一个高配置的计算节点上部署ONOS集群。控制器通过OpenFlow等南向接口协议与所有交换机通信通过北向REST API向上层应用提供服务。虚拟化与编排层为了管理运行在计算节点上的VNF我们需要一个编排器。OpenStack是当时数据中心虚拟化管理的事实标准其Neutron组件负责网络虚拟化。但OpenStack体系庞大。在CORD的语境下更轻量级的容器化编排如Docker Swarm或早期的Kubernetes也开始被考虑尤其是对于云原生VNF。业务应用层最后我们需要部署具体的VNF。例如一个虚拟化的家庭网关。这可以是一个运行在虚拟机或容器里的软件进程它通过虚拟网卡连接到由SDN控制器定义的虚拟网络中。4.3 关键配置步骤与联调部署过程充满挑战以下是一些关键步骤和注意事项交换机刷机与基础配置将白牌交换机从原厂固件刷写为ONL。这个过程通常需要通过串口线连接交换机的管理口使用TFTP等方式上传镜像。刷机成功后需要配置交换机的管理IP并确保其能与ONOS控制器所在网络互通。ONOS控制器安装与南向驱动配置安装ONOS并激活必要的组件特别是对应白牌交换机芯片的南向驱动例如如果使用博通芯片且搭配OF-DPA则需要加载odpa-driver。需要在ONOS中指定交换机的DPID数据路径ID并配置连接信息。OpenStack与ONOS集成这是最复杂的环节之一。需要配置OpenStack Neutron使用ONOS作为其后端SDN控制器通过ML2插件机制。这意味着Neutron创建的每一个虚拟网络、子网、端口其对应的流表规则都会由Neutron通过北向API下发给ONOS再由ONOS通过OpenFlow下发到物理交换机。任何API版本不匹配或模型映射错误都会导致网络不通。VNF镜像准备与部署将家庭网关等VNF制作成OpenStack可用的镜像如QCOW2格式。在部署时需要特别注意为其分配支持SR-IOV的虚拟网卡并确保该网卡对应的物理网络在ONOS和交换机上已正确配置。踩坑记录在早期集成中一个常见的问题是“东西向流量不通”。即同一台物理交换机上连接的两台不同计算节点内的虚拟机彼此无法通信。排查思路通常是首先在虚拟机上用tcpdump抓包看报文是否发出然后登录ONOS控制器查看针对这两个虚拟机端口是否生成了正确的流表最后登录交换机命令行使用芯片厂商提供的诊断工具如博通的bcmcmd查看硬件流表是否真正安装成功。很多时候问题出在Neutron与ONOS之间的信息同步延迟或者交换机芯片的流表资源不足导致部分流表安装失败。5. 行业演进与现状反思回望2016年的这篇预言我们可以清晰地看到Parulkar所描绘的“硅转向”和“软件定义”趋势在过去几年中已经大规模地成为了现实但其演进路径和最终形态比当初的设想更为复杂和多元。5.1 预测的命中与偏差命中的部分商用芯片的统治地位在数据中心交换机和大部分运营商接入、汇聚层设备中博通、美满电子、英特尔等的商用交换芯片已经成为绝对主流。白牌交换机市场蓬勃发展催生了像Arista这样完全基于商用芯片和自研软件而成功的网络公司。软件价值凸显网络设备商的软件收入占比持续提升。无论是思科的IOS XR、Juniper的Junos OS还是华为的VRP都在向云原生、控制器架构演进。开源SDN控制器如ONOS、ODL在特定场景如数据中心网络、光传输得到了深入应用。运营商转型ATT的Domain 2.0计划、中国运营商的NFV试点和部署都明确走上了网络云化、软件化的道路。CORD的理念衍生出了更多的细分项目如M-CORD移动、R-CORD住宅。偏差与演进的部分ASIC并未退场而是进化专用ASIC并未如预言般只局限于“利基市场”。相反为了应对云数据中心超大规模、超低延迟的需求谷歌、亚马逊、微软等云厂商纷纷开始自研定制化ASIC如谷歌的TPU、亚马逊的Nitro、微软的Catapult。这些ASIC并非用于执行固定网络协议而是用于可编程的、高性能的虚拟交换、安全卸载和智能网卡功能。“可编程ASIC”或“领域专用架构”成为了新的热点。同时在最高性能的核心路由器领域完全基于商用芯片的方案仍面临挑战定制化或半定制化的NPU/FPGA方案依然存在。开源与商业的融合纯粹的、由社区驱动的开源网络操作系统如ONL上的各种NOS在通用性和支持上遇到了挑战。商业公司提供的、基于开源但提供企业级支持和增强功能的发行版如Dell OS10 基于开源但深度定制获得了更多市场青睐。生态和支持体系变得和代码本身一样重要。技术栈的收敛与分化SDN的概念逐渐分化。在数据中心内部基于BGP的EVPN/VXLAN方案因其与现有技术融合度更高在很多场景下比纯粹的OpenFlow方案更受欢迎。而在广域网和传输网SDN控制器更多地用于跨域业务的端到端编排和可视化而非直接控制每一台设备的转发细节。控制与转发的分离思想被广泛接受但实现形式多样化。5.2 对当下工程师的启示站在今天的角度看这篇2016年的文章给我们的启示并未过时反而更加深刻软件能力成为硬通货无论底层硬件如何变化用软件定义和驾驭资源的能力是永恒的。熟练掌握Linux、虚拟化、容器、自动化运维、至少一门编程语言Python/Go以及对网络协议栈的深刻理解构成了现代网络工程师的核心技能矩阵。理解硬件但不必制造硬件对于大多数网络从业者重点不再是设计芯片而是理解不同芯片架构商用交换芯片、智能网卡、FPGA、GPU的特性、优势、局限和编程模型如P4、DPDK、SPDK从而能在系统设计中选择最合适的硬件加速方案。拥抱开源但理解商业逻辑积极参与开源社区是学习前沿技术和建立影响力的绝佳途径。但同时要明白企业级应用需要稳定性、可靠性和兜底支持。能够评估开源项目的成熟度并理解其背后的商业可持续性是一项关键能力。关注垂直整合与水平解耦的平衡完全的“水平解耦”所有软硬件来自不同供应商可能带来集成噩梦和排障困难。而完全的“垂直整合”又回到了老路。未来的主流模式可能是“有管理的开放”即由一家主要集成商提供经过验证的、基于开放标准和商用硬件的整体解决方案包。这场始于十年前的“硅转向”其本质是计算产业“标准化、虚拟化、软件定义”浪潮向网络领域的延伸。它打破了封闭激发了创新也重塑了竞争格局。对于身处其中的工程师而言它意味着技能树的刷新和职业道路的拓宽。不再局限于某个厂商的命令行界面而是需要构建从底层硬件到上层应用、从代码到业务的更全局的视野。这无疑是一个更复杂、但也更充满机会的时代。文章结尾处Parulkar说“We are still talking about 10-15 years total for them to become mainstream”如今时间线已至我们已然身处这个主流之中而演进仍在继续。