自1983年自由软件运动领袖richard stallman提出了gnu计划以来,开源为软件开发带来了创造性的革命和商业成功。sdn如今的快速发展也离不开开源社区的力量,比如nox、floodlight、opencontrail、onos等开源项目极大的推动了sdn产业链的发展。但sdn的开源大多都局限在控制器或软件交换机的领域,数据平面的硬件开源项目始终没有迎来一个百花齐放的春天,同时在网络教学研究领域,也没有形成一个有序、规范、有创造力的生态圈,fast的诞生或许可以提供一个崭新的思路。
他山之石:netfpga的启示
netfpga是斯坦福大学基于linux开发的开放性试验平台,能够支持模块化设计,可以使研究人员方便的在其上搭建gb级的高性能网络系统模型。斯坦福大学刚开始研究openflow项目的时候,就是基于netfpga实现了硬件加速的线速openflow交换机。
自2009年开始,netfpga团队陆续将代码和设计文档在github上公开,为四种规格的netfpga平台分别建立wiki页面和软硬件开发指南,我们注意到开源给netfpga带来了不少“红利”:
(1)加速项目的版本迭代。由于开源能有效的共享资源,所以可以避免不必要的重复劳动,以netfpga 1g为例,18个月间就更新了8个版本,大幅度节约了成本和时间。
(2)使项目设计和开发变得更加规范可靠。netfpga的设计文档在开放平等的基础上供公众审查,200多份的设计文档就有90余人的贡献,足以说明在相互借鉴和比较的基础上,能使硬件单元的设计能够变得有序和规范。
(3)鼓励创新项目的研究。由于源码的开放,越来越多的研究人员开始关注到netfpga,并参与建立了许多基于netfpga的项目,比如开源网络测试仪(osnt),openflow交换机等,可以研究下一代网络提供有益的尝试。
但是由于netfpga硬件平台自身的局限性和对sdn交换机的关注度还不够,所以,我们决定在github上建立fast开源项目,专注于sdn硬件交换机的设计和重构,为sdn数据平面的研究提供真实实验环境和案例,为高校网络研究教学的发展添砖加瓦。
fast的前世今生
fast的基础硬件应用平台是国内自主研发的netmagic[1],与netfpga中板卡与主机紧耦合的方式不同,netmagic采用控制平面与转发平面分离的方式,用户使用自己的电脑,通过网络远程管理配置netmagic硬件,更具便携性和可扩展性。
fast(fpga based sdn swithing)是国防科技大学师生提出的一种基于fpga的可重构交换架构——将报文处理流程拆解成多个独立报文处理阶段,并为每个阶段建立其相应的模块库,开发者根据需要自由地选择功能模块来快速重构报文处理流水线。这种“离线重构”的方式能够满足多样化的网络需求,大幅度降低网络应用服务开发的难度和网络设备的开发周期。
如何增强转发平面的灵活性和可扩展性,关键在于对功能库中模块的自由选择,而按照标准扩建模块库,正是建立开源社区的意义所在。在fast的开源过程中,不仅仅是公开代码和设计文档,而是既能将现有工作进行整合复用,也能给开源数据平面设计提供技术支持,推而广之,fast实际代表了一种规范化的fpga交换机的开发模式。
硬件:将可重构进行到底
硬件部分的源代码需要烧写至fpga上实现报文转发的功能,主要由以下三部分组成:
第一部分是fast流水线模块库的代码,这是实现不同报文处理逻辑的关键,不涉及用什么具体电路元件来实现,是通用且可编程的功能模块,模块使用fast推荐的标准接口与其他模块相连。用户可根据应用环境的改变而重新选择或改良流水线模块的内容,编译出不同的案例,达到可编程网络的需求。
第二部分是与开发平台相关的逻辑代码,比如在对数据通路和控制信息的处理上,netmagic08采用以太网口通过nmac协议来传递控制命令,而netmagicpro和netfpga是通过pcie读写寄存器来获取控制信息。我们希望能广泛支持各类fpga硬件平台。
第三部分是工程配置文件,用于指定所用硬件平台和流水线模块,便于不熟悉硬件开发的研究人员快速编译运行,可以根据实际需求来自行编写配置文件。
软件:转发平面的智囊团
该软件代码实际上是交换机的管理软件,与硬件代码一起作为sdn的转发平面,向上通过南向接口与控制器交互,实现在实验网络状态下的手动、自动配置以及管理维护。分为以下四个部分:
第一部分是与平台相关的适配通信库,用户态代码实现可以用pc通过nmac协议与netmagic08通信,也可以将软件部分放在带有cpu的netmagicpro平台上通过dma方式配置硬件流表,实现快速转发,具有高度的灵活性和适配性。
第二部分是核心管理软件,表管理软件用于ttp定义的流表管理维护,配置信息等,与硬件中的信息保持同步;算法相关软件用于实现硬件查表,验证算法的性能和正确性;统计管理软件主要对硬件转发行为进行统计汇总,可在本地管理界面显示,也可以通过南向接口协议传输到控制器报告实时状态。
第三部分是配置管理软件,直接与sdn控制器交互,传输和展示本地配置流表信息,支持openflow协议,未来也可以扩展其他南向接口协议的开发与验证。
第四部分属于转发平面功能的延伸,是为了解决很多课题实验项目中需要借鉴sdn思想,但缺乏可定制化扩展功能的问题。用户只需要在扩展模块中添加适应于自己的转发表项,而无需关心南向接口与平台适配的问题。
fast的征途:sdn科研创新与高校网络教学
目前,我们在netmagic08上实现了一个sdn交换机sdts(software-defined tunnel switch),以lisp隧道封装和基于端口转发的模式,验证了bv算法对硬件匹配性能效果的提升,配合开源控制器floodlight搭建了一个低成本、可重构、易部署的sdn实验环境,后续能够让研究人员进行sdn相关技术的实践和验证。
fast具有良好的可重构特性,虽然目前采用的开发模式是从功能模块库中筛选与重组的方式,但在下一步的工作中,实现硬件资源的形式化,同时实现软件代码重编译为硬件代码(例如altera open cl,xilinx vivado hls),软件开发者就可以单独完成其底层功能模的设计与更新,能够完美的支持p4的设计与实现。
sdts演示现场
高校网络教学科研的需求是长期存在的,学生们在进行课程实验使需要对网络设备的转发行为、协议的运行原理进行剖析,老师们也要需要进行更精确的数据建模和算法验证。我们基于netmagic08开发了一套教学案例netlabswitch,能够支持协议观测分析、令牌桶和输出调度原理、sdn交换实现的原理等技术的研究,为网络教学实验提供了一个颇具代表性的示范。
fast的目标是为基于fpga实现sdn交换机研究提供一个开源生态圈,在这个软硬件皆可编程的开放架构下,进一步推动 sdn 交换技术的发展,营造和提升中国高校的开源文化氛围。下一步国防科技大学、北京邮电大学、东南大学和湖南新实网络的相关研究人员将共同组织规范的制定和编写,制作典型案例demo,运作开源社区。
参考文献
[1]毛席龙,李韬,孙志刚等. netmagic创新实验平台设计指南[m].湖南长沙:国防科技大学出版社, 2012:1-133.
本文转自d1net(转载)