资讯公告
  • 你的位置:
  • 首页
  • >
  • 资讯公告
  • >
  • 网络
  • >
  • eBay利用运行SONiC的白盒交换机节省成本并提高带宽
eBay利用运行SONiC的白盒交换机节省成本并提高带宽
发布时间:2023-05-22 发布者:FebHost



对于在线拍卖巨头eBay来说,客户服务就是一切。或者,正如网络和数据中心工程副总裁Parantap Lahiri所说:"我们想让网络更像空气或水,这样我们的员工在为用户创造神奇的服务时就不必担心网络资源了。"

对eBay基础设施的要求是惊人的: 18亿个活跃的货源;1.33亿个活跃的买家。它的主要登陆页面每天有2.5亿次访问。与亚马逊这样的静态店面网站不同,随着时间的推移,一场eBay拍卖会可能需要来自世界各地的多个竞标者相互竞争,直到拍卖结束。而且,eBay平台支持卖家和买家之间的直接沟通,报价和还价来回飞。

除了维护能够支持当前流量水平的网络基础设施的责任之外,eBay的开发人员还不断提出新的网站功能,利用人工智能和机器学习等数据密集型技术。

在一项旨在削减成本、增加带宽并为未来几年提供网络容量的大胆举措中,Lahiri为其内部数据中心建立了一个400Gbps的以太网结构,该结构基于运行开源SONiC操作系统的白盒交换机。

数据中心的现代化是需要的


eBay是最初的云公司之一;它在1995年进行了第一次在线拍卖。但在许多方面,eBay与任何即将过30岁生日的公司没有什么不同: 它有建立在需要更新的技术上的传统的内部数据中心。

Lahiri说,在2015年,他开始考虑将传统的第2层数据中心网络替换为基于IP的第3层网络,并将100Gbps以太网升级为400Gpst。他说,传统的第2层域不够稳定,也没有足够的可扩展性来满足eBay不断增长的要求。

当他开始为400Gig技术定价时,包括光学、硅和交换机硬件,他发现这简直太贵了,所以他决定调查开源方案,这与企业文化是完全一致的。

eBay对技术的态度总体上是自己动手、创新,而且明显是开源的。事实上,eBay建立了自己的定制设计的服务器。它建立了自己的对象数据存储,称为NuData。它在很大程度上依靠开源工具,如用于数据库的MongoDB和Hadoop,Apache Kafka流媒体平台,以及用于开发和协调容器化应用的Docker和Kubernetes。

2019年,Lahiri在生产网络中投入了一个SONiC盒子,并对其性能和稳定性进行了一年多的监测,然后全身心投入到白盒/SONiC路线中。截至今天,Lahiri已经退役了他所谓的 "老式 "足迹,并在所有活跃的数据中心的生产中部署了基于SONiC的网络结构。他说,从现在开始,所有新的容量部署都将基于SONiC。

与这种方法相关的一个普遍关注点是IT团队是否有安装、监控、维护和排除网络故障的专业知识和带宽。

Lahiri说,这并不像看起来那么难。"他说:"我确实有一个伟大的网络团队,但它并不庞大。"整体的入口障碍已经下降了很多。我们有一个工作配置,只要把它拍在白盒子上,它就能工作。"

他指出,有一个活跃的、有帮助的SONiC社区,标准都在那里,而且超大规模的企业多年来一直在构建这些类型的第三层BGP网络。"Lahiri说:"我们在架构部分没有什么新的做法。

eBay从更低的维护和成本中获益


随着eBay开发人员转向容器化的应用程序,对网络的要求明显增加,特别是当基于AI的工作负载被添加到混合中时。"我们需要提供一个足够宽的基础设施,这样人们就不必担心他们把工作负载放在哪里,工作负载在那里无条件地相互交谈,"Lahiri说。

此外,他还想建立一个不需要持续关注的网络。在过去,如果一个应用程序移动或需要更多的带宽,他的团队就会在外面手动升级线卡。

"我们的动机之一是建立一大块网络结构,而且我们不想碰它。我们不希望为移动的应用程序定制网络。我们想摆脱这种循环"。有了新的网络,"所有的改变都是自动化的,没有人在做CLI改变"。

而这也转化为商业利益。Lahiri说:"开发人员可以想出一个新的功能,并快速部署,"。通过采取开源/白盒路线,Lahiri已经能够将运营费用削减25%,同时将带宽翻了两番(100Gbps到400Gbps)。

另一个好处是能够减少他的团队过去花费的时间和精力,试图让来自多个商业供应商的网络设备进行互操作,或追踪一个错误的来源,从而释放出员工来承担更高水平的任务。

来自eBay的提示和对未来的展望


他给其他IT领导人的建议是,从一个小的概念验证开始。"你不需要有一支军队来处理它的操作系统部分;你可以很容易地在一个白盒交换机上运行SONiC。"

除此之外,Lahiri说:"你必须知道从协议方面、带宽方面和硅方面要求什么;你必须真正了解你的问题,并看到有哪些创新的机会"。

Lahiri已经盯上了800Gigabit以太网,他说:"当800Gig成为可用的并且价格合理时,我们将支持它。" 同时,他的团队正在研究如何利用密集网状拓扑结构将他的400Gig织物互连起来等问题。"Lahiri说:"工作还在继续。

购物车