简介:OCP NIC 3.0 Design Specification Version 1.5.0 发布版是一份面向服务器硬件设计、网卡研发及测试合规人员的英文技术规范,由 OCP 服务器工作组下属网卡子组于 2024 年 9 月发布。文档聚焦 3.0 版 OCP 网卡的卡侧机械设计与接口约束,可用于理解外形规格、安装适配和结构设计边界,也适合作为选型评审、方案自查与供应商沟通的参考依据。资源包仅含 1 个 PDF 文件,大小约 20.73MB,正文编排完整,便于按章节检索和打印查阅。内容从概述、许可证与致谢、非网卡使用场景、术语约定、参考文献及缩略语展开,并重点列出机械要求,涵盖 SFF、TSFF、DSFF、TDSFF 等形态、卡片尺寸与禁布区等条目,读者可据此核对结构细节、梳理规范脉络并快速定位关键约束。目前已有 425 人学习下载,适合需要补充 OCP 网卡 3.0 机械规范依据、开展设计审查的硬件工程师和测试人员查阅。
1. OCP NIC 3.0 是一份把网卡做成标准件的工程契约
机房里最常见的返工,往往不是芯片选错,而是网卡装不进机箱——挡板高 0.5 mm、连接器压不到位、12V 峰值把背板压降拉到报警线。OCP NIC 3.0 Design Specification Version 1.5.0 这份文档处理的正是这类问题:它把一块网卡的机械外形、连接器定义、供电轨、边带信号、散热分档和管理接口全部固定下来,让不同厂商的卡能插进同一套机箱、被同一个 BMC 认出来。如果你正在做整机结构、背板供电、散热风道,或者要给网卡写带外管理适配,这份规范是绕不开的施工图;只想买张卡插上跑业务的人,读它是浪费时间。
2. 机械与连接器:SFF、LFF 怎么选,卡凭什么能插到底
先把最容易返工的部分定死。OCP NIC 3.0 的机械章节不是画个尺寸图就完事,它把「卡能不能插进去、插进去能不能压紧、压紧后能不能散热」三件事绑成了一个约束集。选型阶段定错外形,后面电气和散热全部重做,这是我在项目里见过代价最高的一次翻车。
2.1 三种外形的边界与选型判断
规范把网卡收敛成几个固定形态,最常用的是小尺寸和大尺寸两种,外加一种去掉前面板的变体。它们的差别不只是长短,而是直接决定了你机箱后窗怎么开、能挂多少 lane、能压多少瓦。
| 形态 | 外形量级 | 连接器键位 | 典型 lane 数 | 散热能力 | 适合什么节点 |
|---|---|---|---|---|---|
| 小尺寸 SFF | 约 76 mm 见方 | 4C | x16 | 单槽,75 W 级 | 1U/2U 通用计算节点,密度优先 |
| 大尺寸 LFF | 长约 150 mm 级别 | 4C / 8C | x16 或 x32 | 可扩到双槽,200 W 以上 | GPU 节点、存储节点,带宽与功耗优先 |
| 无挡板变体 | 与小尺寸同 | 4C | x16 | 完全依赖系统风道 | 托盘式、背板直插的整机方案 |
选型可以问自己三个问题:后窗可用宽度够不够一个大尺寸卡的挡板、单个节点的网络带宽要不要超过 x16、以及最热那款卡的 TDP 落在哪个档。三个问题里只要有一个答案是否,就只能选小尺寸。别想着「先按大尺寸设计,将来降级」,卡槽和风道是硬约束,降不回去。
提示:规范里的机械图带版本号,1.5.0 的图和早期版本在挡板细节上有差异,结构件开模前一定要拿对应版本的图纸核对,不要拿供应商口头给的 PDF。
2.2 连接器引脚分区与插拔顺序
OCP NIC 3.0 采用的是行业通用的高速卡边缘连接器体系(SFF-TA-1002 系列),按键位分 4C 和 8C 两种。4C 提供 16 条高速差分对加一组边带,8C 在此基础上翻倍。理解它的关键不是数针,而是理解分区——同一排针脚里,高速、电源、边带是分段的,插拔过程中各段的接触顺序并不相同。
| 分区 | 内容 | 设计要点 |
|---|---|---|
| 高速差分区 | PCIe TX/RX 对、参考时钟 | 走线阻抗与连接器阻抗连续,避免在针脚处出现 stub |
| 主电区 | 12V 与地,多针并联 | 每针载流有限,靠并联分流,针数不足直接烧针 |
| 待机与管理区 | 3.3V 待机、SMBus、NC-SI、复位与在位信号 | 先接触、后断开,保证管理链路早于主电建立 |
| 在位检测 | 短针/长针结构 | 用于系统判断卡是否完全插到位,禁止用软件超时替代 |
规范的意图很清楚:让待机和边带先于主电接触,让在位信号最后接通。你自制的背板或转接卡如果打乱了针长,上电瞬间就会出现「BMC 看到卡但 PCIe 枚举不到」这种玄学现象。
装配顺序按这个走,别跳步:
- 卡先落到导轨上,确认尾部连接器与背板插座同轴,不允许斜插。
- 匀速推到底,听到或感到锁扣到位,不要靠拧螺丝把卡「拉」进去。
- 拧紧固定螺钉,力矩按结构件规格,过力会把连接器壳体压变形。
- 上电前用塞尺或目视确认挡板与机箱开孔四周间隙均匀,无单边挤压。
- 首次上电后立即读在位信号与 PCIe 枚举结果,两者必须同时为真。
2.3 机械公差的实测核对清单
图纸上的公差是给加工用的,装配现场要拿实物量。下面这张表是我每次样机装配都会走一遍的核对项,漏一项就可能在小批量时集中爆发。
| 检查项 | 工具 | 判定参考 |
|---|---|---|
| 挡板与开孔的四周间隙 | 塞尺 | 均匀,无单边贴死,弹片不被压平 |
| 卡插入深度 | 深度尺 / 划线 | 连接器完全啮合,无可见针脚外露 |
| 插拔力 | 推拉力计 | 在规范给出的区间内,偏大偏小都要查 |
| 连接器同轴度 | 目视 + 塞规 | 无斜插痕迹,壳体无划伤 |
| 锁扣保持力 | 手动 + 拉力计 | 轻拉不脱出,解锁机构能单手操作 |
血泪经验是插拔力这一项:偏大往往不是连接器本身的问题,而是导轨与卡边配合过紧,或者挡板弹片在插到位之前就开始受力,操作者以为插到底了,其实高速段还差零点几毫米,表现出来就是链路时好时坏。这种问题用软件日志永远查不出来,只能拿推拉力计在样机上量。
3. 供电与边带信号:12V 主电、3.3V 待机与 NC-SI 的时序账
机械定完之后,第二个容易出问题的是电。OCP NIC 3.0 把供电拆成两条轨:12V 主电负责高速 SerDes 和主芯片,3.3V 待机负责管理链路,让卡在主电关断时依然能被 BMC 访问。两条轨的独立性是这份规范里最容易被低估的设计。
3.1 供电轨分档与电流预算怎么留余量
规范不会替你算电流,它给的是每一档 TDP 对应的供电能力边界。实际设计要反过来推:先定卡的最大功耗,除以 12V 得到主电电流,再留 15% 到 20% 的余量给峰值和老化,最后折算成连接器上需要并联几根电源针。
| 轨 | 电压范围 | 用途 | 预算方法 |
|---|---|---|---|
| 12V 主电 | 按规范容差窗口 | 主芯片、SerDes、风扇(若有) | TDP ÷ 12 × 1.2,再按每针载流能力折算针数 |
| 3.3V 待机 | 按规范容差窗口 | BMC 访问、SMBus、NC-SI、唤醒 | 按待机态实测电流 × 1.5,通常不到 1 A 量级 |
举例:一张 75 W 档的卡,12V 主电稳态约 6.25 A,按 1.2 倍余量做到 7.5 A 的设计上限,再按单针安全载流分摊,就不会出现某一根针发烫发黑。真正的坑在浪涌——卡上电容多、上电快,热插拔瞬间的冲击电流能到稳态的好几倍,规范要求做缓启动,背板侧也要有对应的限流或热插拔控制,两边都不做,电源就会被反复触发保护。
另一个容易被忽略的是压降。12V 从电源到背板再到连接器,路径上任何一段铜箔偏薄、线束偏长,满载时卡端电压就会掉出容差窗口,表现出来是满载跑流时偶发链路重训练。这条路径必须在样机阶段实测,不能靠仿真签字。
3.2 边带信号清单与上电时序
边带是 BMC 管理网卡的唯一通道,也是整份规范里信号最多、时序最严的一段。按用途可以分成四组:复位与时钟请求、唤醒、管理总线、边带网口。
| 信号 | 方向 | 作用 | 时序与设计要点 |
|---|---|---|---|
| PERST# | 系统 → 卡 | PCIe 复位 | 主电稳定后延迟释放,卡侧不得提前拉低 |
| CLKREQ# | 双向 | 参考时钟请求 | 低功耗状态握手,上拉电阻位置要统一 |
| WAKE# | 卡 → 系统 | 唤醒 | 依赖 3.3V 待机,待机轨断了就失效 |
| PRSNT# | 卡 → 系统 | 在位检测 | 决定是否允许上电,必须硬件实现 |
| SMB_CLK / SMB_DATA | 双向 | 管理总线 | 开漏上拉,多卡挂在同一 mux 后要算容性负载 |
| SMB_ALERT# | 卡 → 系统 | 中断上报 | 开漏,BMC 侧要能区分是哪张卡拉的 |
| NC-SI 组 | 双向 | 边带网口 | 需要独立参考时钟,时钟没起来链路就静默 |
时序上有一条铁律:3.3V 待机先于 12V 主电建立,PERST# 最后释放。原因不复杂——BMC 要在主电上电之前就通过 SMBus 读到卡的 FRU 和在位状态,如果顺序反了,BMC 会先看到一个「没有卡的槽位」,等主电上来再重新扫描,中间那段窗口里任何依赖卡信息的风扇策略、告警策略都会走错误分支。有些整机厂把这个顺序做反了,靠 BMC 侧反复轮询掩盖,短期看不出问题,一旦并发扫描多个槽位就会丢卡。
3.3 在 BMC 侧把边带链路打通:三条命令
规范只定义信号,验证要在真实系统上做。我一般按从物理到协议的顺序排三层,哪一层断了一眼就能看出来。
# 第一层:确认管理总线上能看到器件(7 位地址 0x50 是常见 FRU EEPROM 地址) i2cdetect -y -r 3 # 输出里出现 50 说明 SMBus 物理链路通了;全 -- 就回头查上拉和 mux 通道 # 第二层:确认 BMC 已经解析出这张卡的资产信息 ipmitool fru print | grep -A 12 "NIC" # 有字段输出说明 FRU 可读;字段全空或乱码,问题在 EEPROM 内容而不是链路 # 第三层:确认边带网络通道(NC-SI)被正确绑定 ipmitool raw 0x30 0x92 2>/dev/null || echo "该平台无此 OEM 命令,改用厂商工具查 NC-SI 状态" # 通道未绑定表现为 BMC 侧看不到这张卡的业务网口第一层失败是最常见的,八成是 mux 通道选错——多卡背板通常挂在一颗 I2C mux 后面,BMC 默认只扫主通道。第二层失败要区分是「读得到但内容错」还是「读不到」,前者是 EEPROM 烧录问题,后者回到第一层。第三层失败往往是 NC-SI 参考时钟没使能,属于硬件配置,软件侧无法补救。
4. 散热与 TDP 分档:风量、阻抗和传感器布点怎么定
散热是这份规范里最容易被当成「参考建议」的一段,实际上它的约束力很强:TDP 档位一旦选定,机箱能给多少风量、卡的进出风温差允许多大、挡板开孔率下限是多少,就都被锁死了。
4.1 TDP 档位与风量的对应关系
风量需求可以用一个很朴素的能量平衡式估算:带走 P 瓦热量,需要多少体积流量。这个式子不精确,但足够在方案阶段判断「这台机箱的风道到底够不够」。
# 按进风温差估算所需风量,用于方案阶段快速判断 # P: 网卡功耗 W;dT: 允许的进出风温差 K;rho: 空气密度 kg/m3;cp: 比热 J/(kg·K) def required_cfm(P, dT, rho=1.16, cp=1005.0): q_m3s = P / (rho * cp * dT) # 体积流量 m3/s return q_m3s * 2118.88 # 换算成 CFM for tdp in (75, 150, 200, 300): # 温差按 15 K 估,属于机箱内比较紧的取值 print(f"TDP {tdp:>3} W -> 约 {required_cfm(tdp, 15):.1f} CFM")跑出来的量级是:75 W 档大约 25 CFM 出头,150 W 档接近 50 CFM,300 W 档要上百 CFM。把它和机箱厂商给的单槽风量曲线对一下,就知道该不该往上一档 TDP 走。dT 取 15 K 是偏保守的,实际机箱若进风温度高、前后串扰大,这个值还要往下压。
| 档位量级 | 典型场景 | 对风道的要求 |
|---|---|---|
| 75 W 级 | 通用计算节点 | 单槽风道即可,注意旁路泄漏 |
| 150 W 级 | 高密度网络节点 | 需要独立导风罩,前后压差要够 |
| 200 W 级以上 | GPU/存储节点 | 必须双槽或专用风道,串扰控制优先 |
4.2 风道阻抗与前后挡板开孔
规范对前面板开孔给了下限,原因是开孔率不足会让卡自己变成一堵墙:风进不来,芯片温度上去了,风扇转速拉满,整机噪声和功耗一起恶化。反过来开孔过大又会让旁路风增多,真正穿过散热器的风反而变少。
工程上的做法是把「开孔率」和「阻抗曲线」放在一起看。前面板开孔率一般按不低于 60% 来设计,同时用一块多孔板样件实测压差—流量曲线,与风扇曲线求交点,交点必须落在风扇高效区。我见过一个方案开孔率做到 70%,但因为孔是圆孔密集排布,实际阻力仍然偏大,换了长圆孔之后温度掉了五六度——开孔率是面积比例,不是有效通流面积。
散热器选型上还有一条隐性约束:卡的高度是定死的,散热器能长多高由相邻槽位决定。强行加高散热器会顶到上方卡的底面,短期看不出来,整机做振动测试时才会发现两颗卡互相顶。
4.3 温度传感器布点与降频策略
规范要求网卡通过管理接口暴露温度与降频状态,这是 BMC 做整机热策略的输入。常见的布点有三处:主芯片结温、光模块或接口附近、卡的进风侧。
| 布点 | 上报内容 | 门限用途 |
|---|---|---|
| 主芯片 | 结温或封装温 | 触发降频、关断保护 |
| 接口/光模块区 | 局部环境温 | 高温告警,指导运维更换位置 |
| 进风侧 | 卡前环境温 | 与结温做差,得到实际温升 |
第三处最容易被省掉,但它恰恰是最有价值的一个:只有拿到进风温度,BMC 才能区分「卡自己热」还是「整机环境热」。没有这个数据,风扇策略只能按结温一刀切,夏天机房里会出现风扇长期高转速、噪声超标,而卡其实并不热。降频策略同理,规范给的是分档思路,具体门限要结合你的风道实测标定,直接抄别家的数值大概率翻车。
5. 避坑与排查:五条从现场带回来的记录
规范读得再熟,第一批样机还是会出问题。下面这五条按「现象 → 原因 → 解决」整理,都是我实际碰到并定位过的,顺序按发生概率从高到低排。
5.1 机械与装配类:卡插不进去和插进去认不到
现象一:卡已经推到底、螺钉也拧了,系统里lspci完全看不到设备。
原因通常是机械到位但电气没到位。最常见的是挡板弹片在卡完全啮合之前就先顶住了机箱前窗,操作者手感上「到底了」,实际连接器还差零点几毫米;第二种是自制背板的插座沉板深度不对,针尖只接触到一半。这类问题用软件日志永远查不到。
解决方式是回到物理层测量:用塞尺确认挡板四周间隙均匀、用深度尺量插入深度、拔下来看针脚上有无单侧划痕。确认机械到位后,再单独量在位信号是否被拉低。把「机械到位」和「电气在位」当成两个独立判据,别指望一个信号说明全部。
现象二:卡能认到,但插拔几次之后开始偶发链路重训练。
原因是连接器在斜插过程中被划伤,或者卡边与导轨配合过紧导致每次插入都有微量形变。高速差分对对这种形变非常敏感,接触电阻变化几十毫欧就可能让眼图闭合。
解决办法是停线,把所有样机的插拔力测一遍,超上限的批次退回结构件供应商;同时检查导轨材质和卡边倒角,倒角不足是斜插划伤的常见源头。这一条属于典型的「后悔药」,必须在量产前做,量产后只能靠加严来料检验。
5.2 电气与边带类:满载掉链路和待机看不见卡
现象三:空载一切正常,跑满带宽一段时间后偶发 link down,重启能恢复。
原因基本都是 12V 压降。满载时主电电流达到峰值,路径上某一段铜箔偏薄或线束偏长,卡端电压掉出容差窗口,SerDes 供电不稳导致重训练。空载时电流小,压降不明显,所以测试阶段完全看不出来。
解决方式是在满载工况下直接量连接器端电压,而不是量电源输出端。这两者之间的差值就是压降,超过容差的一半就要改路径:加粗铜箔、缩短线束、增加并联针。改完之后做一次长时间满载跑流,确认不再重训练再收工。
现象四:主电关断、系统待机时,BMC 里这张卡消失了,开机后又回来。
原因是 3.3V 待机轨没接或接错。待机轨是 BMC 访问网卡的唯一电力来源,这条轨断了,SMBus 上什么都读不到。还有一种更隐蔽的情况:待机轨接了,但 NC-SI 的参考时钟没有常供,导致待机态下管理链路静默。
解决办法是先量连接器上的待机电压,再量参考时钟有没有起振,两者都正常才轮到查协议层。设计阶段就要把待机轨画成独立网络,别和主电共用一路使能。
现象五:BMC 通过 SMBus 读 FRU,读出来全是 0xFF,或者校验和报错。
多条卡挂在同一颗 I2C mux 后面时,地址冲突是第一嫌疑:所有卡的 EEPROM 都用同一个固定地址,如果 mux 通道没有正确切换,BMC 会同时访问到多颗器件,总线上出现数据打架。第二嫌疑是 EEPROM 烧录后没有重算校验和,头几个字节对得上,后面整片是旧数据。
解决方式是逐通道扫描,确认每个槽位单独可读;再用工具把读回的内容与烧录文件逐字节比对,校验和字段必须单独校验一次。FRU 这块的黑匣子属性很强——内容错了不会报错,只会让资产系统里出现一堆空字段,等到盘点时才发现,那时候卡已经装在客户机房里了。
6. 把规范变成一张验收表:从样机点亮到小批量的四步闭环
规范读完不算完,要把它压缩成一张能交给测试同事执行的表。我现在的习惯是分四步走,每一步都有明确的通过标准和对应的测量手段,任何一步不通过就不往下走。
| 阶段 | 检查重点 | 通过标准 | 手段 |
|---|---|---|---|
| 一、机械装配 | 插入深度、插拔力、挡板间隙 | 全部落在规范区间内,无划伤 | 塞尺、推拉力计、目视 |
| 二、电气与时序 | 两条供电轨、压降、边带上电顺序 | 满载压降在容差内,时序符合规范 | 示波器、万用表、时序抓取 |
| 三、热与功耗 | 各 TDP 档满载温度、风扇响应 | 结温不超门限,降频不误触发 | 满载压测 + 温度轮询 |
| 四、管理与互操作 | FRU 可读、NC-SI 可用、带外可管 | BMC 全量识别,资产字段完整 | 管理总线扫描 + 带外操作 |
这四个阶段有个次序不能颠倒:机械不过关就不要做电气测试,因为斜插状态下的电气数据全部无效;电气不过关不要做热测试,因为供电不稳导致的降频会被误判成散热不足。我吃过一次亏,跳过第二阶段直接做热测试,结果所有温度数据偏高,花了两周才发现是 12V 压降引起的降频,跟散热器一点关系都没有。
一个具体技巧:把第四阶段的通过标准写成「BMC 冷启动后 30 秒内完成全部槽位识别」,而不是「能识别」。加时间窗是为了暴露时序问题——很多边带毛病在慢慢扫描时看不出来,一旦并发扫描就丢卡。这个数字要按你的槽位数量调整,槽越多窗口越要留够。
另一个技巧是留一份「黄金样机」。整机做完一致性之后,保留一台各项指标都合格的配置,后面每一批样机都跟它做对照测试,包括插拔力、满载压降、满载温度三组数据。人眼看不出的漂移,和黄金样机一比就出来了。这份数据比任何仿真报告都可靠,因为它来自同一套机箱、同一批线束、同一个测试环境。
最后说一句实在话:这份规范的价值不在读懂,而在把它变成一张别人能照着执行、不依赖你个人经验的表。我第一次做这类项目时,所有参数都记在自己脑子里,换个人接手就全乱,返工了整整一轮。后来养成习惯,每确认一个参数就往表里填一行,填完这张表,项目基本就稳了。希望帮到你。
本文还有配套的精品资源,点击获取