Linux 上看光口偶发 CRC:先把 ethtool -S 里的 pre-FEC 和 FCS 拆开

LinuxBSPLab 发表于 2026-11-14 02:17 · 23 次浏览 · 3 条回复
L
在嵌入式 Linux 的光线路板或网卡上排查“偶发 CRC”,很多人第一眼只看 ifconfig/ip -s 里的 RX errors。这个计数太粗了:它可能来自 FCS 失败,也可能来自超长帧、对齐错误,甚至驱动把不可纠 FEC 一并加了进去。不先把 ethtool -S 和 netdev 统计拆开,后面改光功率、换模块或调环缓冲,方向都可能是错的。

我现在的习惯是先冻结同一时间窗口的三组数。一组是 ip -s link 的 RX errors、dropped、overrun、frame;一组是 ethtool -S 里和 FEC 相关的 corrected / uncorrected、以及 PCS 符号错误;一组是驱动私有的 dma_error、rx_length_error、rx_fifo_error。如果 corrected 在缓慢增加、uncorrected 为 0、FCS 也不涨,说明链路有误码但还在 FEC 能力内,不该先当业务 CRC 故障去拆光纤。如果 uncorrected 和 FCS 同步上台阶,才是光层或通道已经越出纠错门限。如果 FEC 计数全静、只有 RX overrun 和 dropped 在涨,问题在主机侧收包,和光模块关系不大。

采集时要注意两个陷阱。一是有的驱动把 ethtool 统计做成“自上次读取后的增量”,有的做成“上电累计”,脚本里一定要先读两次确认口径,否则会把一次读取当成突发故障。二是统计更新周期可能是 1 秒一次,短于这个窗口的毛刺会被合并。对偶发问题,我更愿意开网卡的硬件时间戳或把统计读到 trace 点上,和 dmesg 里的 link down、phylink 状态变化对齐。

内核侧还可以看 /sys/class/net/<if>/statistics/ 和 PHY/PCS 的 debugfs。有的网卡把 pre-FEC BER 暴露成一条曲线或一组窗口计数,比单次抓包更适合看“是一直在恶化,还是某时刻打了个包”。如果确认是主机侧 overrun,再去调 napi_weight、中断亲和性和环形缓冲区,而不是先清洁法兰。

现场如果只有网管上的“CRC 计数加一”,我会要求同时导出上述三组原始计数和对应时间窗,而不是只看二次加工后的告警。口径对齐之后,很多“光模块不良”会重新归类成 FEC 余量不足或主机侧 overrun。

一句话:Linux 上的 CRC 不是一个单一故障码。先把 pre-FEC、不可纠、FCS 和主机丢包拆开,再决定是动光路还是动协议栈,排障会干净很多。
广告位 A8广告位招商帖子页首楼下方通栏 · 728×90 · 查看报价 · 联系 ads@oeforum.com
论 论坛助手
【论坛助手】LinuxBSPLab 把「偶发 CRC」先拆成 pre-FEC、不可纠 FEC 和 FCS,这个分流应该成为光口排障的第一页。

编辑部再补:
1)同一时间窗口对齐三组数:ip 的 RX errors/dropped/overrun,ethtool 的 FEC corrected/uncorrected 和 PCS 错误,以及驱动私有的 dma/fifo 错误;
2)corrected 缓增、uncorrected 和 FCS 都不涨,说明还在 FEC 能力内,不要先拆光纤;FEC 全静、只有 overrun/dropped 在涨,先查主机收包;
3)先确认 ethtool 统计是累计还是增量,避免一次读取被当成突发故障。

追问:你们线上脚本现在按哪一组计数升级为「光层故障」?有没有把主机 overrun 误写成光模块不良的工单?
光
顶,干货贴。收藏了,回头项目里试试这个方法。
论 论坛助手
【论坛助手】光放大器_小崔要在项目里试「把 ethtool -S 的 pre-FEC / 不可纠 FEC 和 FCS 拆开」这条顺序,建议第一次就先把计数器的时间窗口对齐,再下结论。

可执行的最小对照:
1)同一时间窗里并排记下:ip 的 RX errors/dropped/overrun、ethtool 的 FEC corrected/uncorrected 和 PCS/FCS,以及驱动私有的 DMA/ring drop。只看其中一列,很容易把主机丢包写成光层 CRC;
2)先看哪一项先动。pre-FEC 先爬、FCS 几乎不动,多半还在光层/均衡余量里;FCS 或 overrun 先动,要先查主机和驱动,再去动光模块;
3)换模块、换线、改 FEC 开关时,一次只改一类,并在改之前清一次计数、记下时间,避免把历史累计当成这次的增量。

追问:你们准备先在哪一块网卡/光口上试?如果试下来,是 pre-FEC 先动,还是 FCS/主机丢包先动?欢迎把脱敏后的三列计数贴回来。
登录 后参与回复,还没有账号?立即注册
行业企业展示华工正源(HGGenuine)光模块与光电器件厂商,华工科技旗下访问官网 →行业企业展示,基于公开资料,如需撤下请联系 ads@oeforum.com