tioga Facebook为OCP贡献全新设计，更开放，更灵活

企业服务器市场产业化程度较高，产品形式不同，如塔式服务器、机架式服务器、刀片式服务器等，可以支持多种应用，各种服务器之间有很多差异。

对于超大规模数据中心的运营商来说，他们要求这些产品尽可能统一，价格要足够便宜，管理要足够简单。因此，超大规模数据中心的计算和存储方法更有趣。

谷歌最近采取了行动，微软也是。微软奥林巴斯项目的最新发展涉及基于英特尔至强、ARM和AMD那不勒斯的服务器。六年前创立于OCP的Facebook在开源硬件领域拥有很高的地位，最近还推出了一系列更新。

微软和Facebook都推出了加速机器学习工作量的服务器，场景针对性很强。让我们来看看Facebook为OCP贡献的通用计算系统，看看它对其他人有什么用处。

更新服务器节点-tioga PAAs

去年作者梳理了当时Facebook的产品线。当时的OpenRack服务器主要有6种配置，都是基于双向豹(猎豹)或者单向约塞米蒂(约塞米蒂，美国国家公园，以瀑布闻名，深受美国人喜爱，曾经以苹果的MAC OS命名)。适用的应用场景主要包括:Web前端、数据库、Hadoop大数据存储分析、Haystack对象存储、缓存密集型应用等。，这是Facebook常用的缓存。

一年后，Facebook正式更新了这些服务器和存储盒，包括三个标准机器和两个专门为机器学习设计的盒子。

泰奥加山口

Leopard平台更新后的产品代码是“tioga pass”(tioga pass原指约塞米蒂公园东入口处的一个度假村)，和之前的Leopard一样，更新后提供了更大的内存和I/O带宽，可以更高效的发挥计算能力。

Tioga Paas采用Facebook的第四代主板，基于英特尔至强处理器，如下图所示:

Tioga Pass和之前的Leopard外观没有变化，6.5英寸x20英寸。任何三张豹式和Tioga通行证都可以放入开放式行李架。Tioga Pass主板专为英特尔的“纯”硬件平台功能而设计，包括一款先前的产品和将于今年年中上市的Skylake至强处理器。

Tioga Pass是双向设计，但也支持单向模式，所以Facebook可以针对特定工作负载选择速度更快的Skylake至强。以史为鉴，预计两代至强处理器将同时并存于Tioga Pass机。随着英特尔产品的更新换代，未来的Tioga Pass机可能会共存三代至强处理器，这主要是由于制造工艺的改变，从14nm到10nm。

Tioga Pass主板支持将DDR4内存插入288针内存插槽。Tioga Pass有两个版本，一个是单面焊电路，一个是双面焊电路，俗称双面打印。

双面打印的好处是可以用气流的两面来冷却部件，可以同时冷却两面。双面打印TIOga Pass单通道模式每面支持12个内存插槽，两个PCIe x16插槽通过适配器连接到PCIe x2适配器，支持32通道io路径。(Tioga Pass没有具体说明是PCIe 3.0还是PCIe 4.0，但是从Intel的路线图可以看出，目前Skylake只支持PCIe3.0。)

单面打印Tioga Pass仅支持12个内存插槽的单向，PCIe插槽是可选的，但它是两个PCIe x16插槽、一个PCIe x16插槽或两个PCIe x8插槽。X16插槽主要是为加速器和一些I/O设备(比如闪存)准备的。以前Leopard只支持x24插槽，这意味着适配器不能支持x16选项。

这些额外的插槽增强了Tioga Pass服务器的组合能力，可以用来连接高速全闪存节点和全GPU节点，让服务器为这些节点提供计算能力。Tioga Pass还集成了100Gb/s以太网接口，可用于管理最近推出的闪存存储阵列。

貌似Facebook打算在Skylake处理器的每个内存通道放两个DIMM，内存频率运行在2.13GHz或者2.4GHz，Skylake也支持单个DIMM运行在2.67GHz。

还需要注意的是，Tioga Pass的每一个DDR4都支持NVDIMM存储，mSATA都被m.2取代，话说回来，微软三年前就开始在OpenCloudServer中使用M.2了。

Tioga Pass采用OpenBMC基板管理控制器，2015年首次与优胜美地微服务器——MonoLake (Mono Lake，也在优胜美地公园)一起出现，专门为至强D微处理器设计。

单层微服务器节点

约塞米蒂V2底盘

自从约塞米蒂微服务器两年前出现以来，已经进行了许多调整。新的约塞米蒂V2底盘仍然支持单层单插槽服务器和双湖节点。优胜美地V2机箱配备了新的电源子系统，允许TwinLake服务器热插拔操作——这是一个很大的改进。

此外，优胜美地V2机箱灵活，允许同时放入四个处理器节点，支持两个处理器配两个加速器(如FPGA或GPU)，或者放入闪存卡等。

放闪存卡“冰川点”的载板码，放其他外设的载板——“载板”。根据Facebook的官方文件，每个节点最多可以支持192瓦，每个约塞米蒂V2盒子最多可以支持600瓦，所以这里不支持放250瓦或300瓦的加速器。

左侧是闪光载体板冰川点，右侧是载体平台

冰川点盒中有四个双湖服务器节点，每个服务器节点可以连接到一个共享的50Gb或100Gb多主机网络接口卡。

这是本文中提到的优胜美地V2盒子，双湖节点有一个绿色手柄。

约塞米蒂V2

下图显示了优胜美地V2盒子是如何放入OpenRack vCubby的。如果你数数，你可以把四个盒子平行放在一起。

单层和双湖节点集成了四端口10Gb网络接口。如果不需要50Gb和100Gb的网络端口，可以直接连接到OpenRack的Tor交换机，省时省力。如果需要高速带宽，PCIe 3.0x4可以用来连接约塞米蒂V2的多主机控制器。值得注意的是，Facebook设计的四端口控制器也是x4夹层卡。此外，单层和双湖节点也支持PCIe x16连接到约塞米蒂V2底盘。

有趣的是，Facebook没有说TwinLakes节点在这次更新中使用了什么处理器，但在上一代产品中明确提到了处理器部分。考虑到优胜美地适合多种平台，除了英特尔的至强D和Skylake至强E3之外，非常有可能使用高通的Centriq 2400 ARM处理器或AMD Naples Opteron处理器。

存储阵列-布莱斯峡谷

2013年，Facebook推出了高密度存储阵列——诺克斯。团抱密度非常高。一个托盘上有两层3.5英寸硬盘。2015年更新了《蜜獾》(蜜獾欢，爱蜂蜜、蚂蚁、坚果)。看起来很低调，其实很凶。它爱抓毒蛇，被称为世界上最无所畏惧的动物，另外，“团抱”的微服务器平台是优胜美地微服务器的前身。

霍尼獾是两年前的。这两年Facebook上视频流量激增，视频比很多静态文件大很多，需要一个新的平台，于是就有了布莱斯峡谷(布莱斯峡谷国家公园)。布莱斯峡谷的磁盘比蜜獾多20%，计算能力是蜜獾的4倍。是OpenVault(对于Open Rack也是简单高效的)

之前的蜜獾给人一种山寨的感觉，而布莱斯峡谷看起来更严肃，高很多。布莱斯峡谷外形设计像超微、戴尔、HPE、华为的机器。圆盘之间没有铰链，看起来不错，但是制造和使用都比较麻烦。

布莱斯峡谷

布莱斯峡谷最多可以容纳72个3.5英寸硬盘，可以把整个当成一个阵列，也可以把每36个硬盘分成一个阵列。在计算部分，使用了基于至强D的Mono Lake微服务器计算卡，可以根据负载需求选择一个或两个计算卡。

Fcaebook的一位硬件工程师解释说:“我们发现，采用单通道架构时，运行Web和存储负载的整体效率和单位功耗性能更好。我们已经将网络层负载迁移到该架构，并在布莱斯峡谷采用了单层”。

布莱斯峡谷网络功能丰富，存储控制器支持6Gb和12GB SATA，一个IO模块可以以OCP网络夹层卡为前端，可以同时支持25Gb和50Gb以太网卡。IOM有两个不同的后端，包括PCIe 3.0 x 4 m.2端口或12Gb SAS控制器。

布莱斯峡谷配备了各种计算和I/O选项，可以灵活配置，以对应不同的应用场景，如JBOD、Hadoop、云存储等场景。此外，布莱斯峡谷还使用OpenBMC作为管理方。

“因为模块化设计，未来可以采用新一代CPU。如果需要其他IO接口，新的IO模块可以满足需求。因为IOM采用16通道PCIe设计，所以有足够的带宽来满足所有的可能性。”

系统设计的原则与协议无关。如果需要NVMe，存储控制器可以切换到支持基于PCIe交换机的解决方案。如果选择高分配，布莱斯峡谷将被两个单层计算模块分成两个存储阵列。这里使用的输入输出模块支持两个PCIe m.2插槽，使用四通道PCIe 3.0。作为OCP夹层板网卡的补充，m2可以用作缓存或小文件写合并。(编:DOIT朱鹏波)

关于DOIT

DOIT是中国领先的新技术媒体，始于2003年，专注于技术和数据经济，深入了解IT走向DT的趋势。