最近,美国能源部SLAC国家加速器实验室(SLAC)和Zettar公司的研究人员利用ESnet运营的一个5000英里的网络环路,在29小时内传输了1pb,并进行了加密和校验和,比去年的记录快了5个小时,提高了近15%。
该项目旨在实现高数据传输速率,以适应直线加速器相干光源II (LCLS II)产生的数据量,该光源预计将于2020年上线。LCLS是世界上第一个硬x射线自由电子激光器(XFEL),它的频闪式脉冲只有十亿分之一秒的百万分之一长,比以前的x射线源亮十亿倍。LCLS II将提供能力的重大飞跃-从每秒120个脉冲移动到每秒100万个脉冲。科学家们使用LCLS拍摄原子运动的清晰照片,观察化学反应的展开,探测材料的特性,探索生物的基本过程。
随着实验结果从SLAC发送到位于劳伦斯伯克利和橡树岭国家实验室的能源部(DOE)超级计算设施进行分析,增加的能力预计将产生每秒数太比特的数据传输。作为美国能源部用于科学研究的专用网络用户设施,ESnet沿着每秒100千兆位(Gbps)的骨干网在大学和美国能源部的国家实验室以及国家用户设施之间传输数据。
根据斯坦福大学荣誉教授Les Cottrell的说法,目前的高速数据传输演示是SLAC开发和评估工具计划的一部分,以解决未来十年SLAC下一代XFELs的关键数据传输需求。
Zettar是位于帕洛阿尔托的一家由美国国家科学基金会资助的软件公司,该公司与ESnet和美国能源部国家实验室合作,开发具有100+Gbps传输速率的超大规模数据分发软件解决方案。在试验中,该团队使用了ESnet的按需安全电路和提前预订系统(奥斯卡)来为运行预留带宽。
Zettar创始人兼首席执行官Chin Fang表示:“ESnet奥斯卡的创新性和多用途性使我们能够设计一个独特的5000英里100 Gbps环路,我们的ESnet同事在2015年迅速帮助建立了这个环路。”ESnet的设计允许使用单独的专用通道进行测试,而不会对生产流量产生影响或干扰。因此,我们能够将数据存储集群和数据传输节点放在同一个机架中,尽管它们位于循环的两端。它们在物理上相距几英寸,但在数字上却相隔5000英里。此外,集群本身也有一个80gbps的上限。”
方说,由于软件和硬件的改进,数据传输速度提高了5个小时。今年,Zettar显著提高了其软件的并行性,以加速加密和非加密数据的数据传输。英特尔还为该团队提供了更快的处理器和固态存储器产品,以便更快地将数据移入和移出主存储系统。在本例中,该项目使用了具有LCLS数据管理组提供的文件大小分布的模拟数据集。
ESnet主管Inder Monga表示:“ESnet网络灵活的流量工程设计确保了基于tcp的传输协议可以有效地用于高吞吐量数据移动。”“ESnet的指导战略是预测并保持领先地位数据传输我们科学用户的要求。像我们支持的SLAC正在进行的试验对我们来说很重要,因为我们看到了研究团队的方向,我们可以加强我们的支持和基础设施,以便在LCLS II等设施上线时做好准备。”
了下:M2M(机器对机器)
