IPv6的TSO/GRO/GSO及其Linux实现的不妥

很明确的一件事是，IPv6不允许中间设备对报文分片。具体为什么这么设计，就是为了简单高效。因此，IPv6报头简洁了不少。

但TSO貌似并未违背取消IPv6分片的初衷，硬件把一些都处理的妥妥的，在路由软件层看来，一切好像没有发生过一样。

我先简单解释一下TSO和IP分片的区别：

我们来看一个简单的实验，用IPv6从服务端拉一个大文件，服务端和客户端的抓包如下：

在客户端看来，没有IP分片，因此它不需要做分片重组的动作，它实实在在就是收到了一个完整的7140字节的报文，就好像这个报文就是从服务端真实发出的一样，而实际上，服务器显然没有发送过这么大的报文，显然，这是客户端聚合了几个小包的结果。

因此，下面的结论是合理的：

如果转发设备觉得一个IPv6数据包大于出口的MTU，并且如果它的载荷是TCP段的话，启用TSO将其分段而不是直接丢弃并发送ICMP too big，这并无不妥。

IPv6只是规定了中间设备不能分片，但是却没有规定必须保持原样传输啊。

然而，Linux内核是这么实现的吗？严格来讲，Linux对于上面的描述，仅仅实现了一半。

Linux内核做到了：

即便是转发设备，只要使能了LRO/GRO，就会进行收包聚合，将多个小包尽可能聚合成一个大包，并且修改对应的IPv6头。
即便是转发设备，在转发IPv6超过MTU大小的报文时，只要该报文元数据gso_size不大于MTU，就能成功转发，依靠GSO/TSO在发送时对其进行分段发送，重新分割成独立的小报文。

然而，这是不妥的。

gso_size可以认为是聚合前小报文的大小，在我看来，即便它大于出口MTU，也是可以利用TSO/GSO机制将其分段的啊！只是Linux没有实现而已。

具体看这段代码：

int ip6_forward(struct sk_buff *skb)
{...if (ip6_pkt_too_big(skb, mtu)) {/* Again, force OUTPUT device used as source address */skb->dev = dst->dev;icmpv6_send(skb, ICMPV6_PKT_TOOBIG, 0, mtu);__IP6_INC_STATS(net, idev, IPSTATS_MIB_INTOOBIGERRORS);__IP6_INC_STATS(net, ip6_dst_idev(dst),IPSTATS_MIB_FRAGFAILS);kfree_skb(skb);return -EMSGSIZE;}...
}

当你看ip6_pkt_too_big的代码时，里面会找到这个不妥的逻辑。

这里没有必要抬杠说什么GSO的实现之类就是如此，我的意思是，只要指定一个出口的MTU，无论什么样的TCP包，底层TSO/GSO都会按照该MTU的大小将其分成小段，每一个小段都是一个独立完整的IPv6报文。这个和入口GRO设置的gso_size有个毛线关系啊！

但事实上，Linux内核对此的实现就是这么残！我用systemtap和bpftrace实地探测过的结论，后来我才看的代码。

浙江温州皮鞋湿，下雨进水不会胖。

IPv6的TSO/GRO/GSO及其Linux实现的不妥相关推荐

以太网卡TSO、GSO、LRO、GRO描述及相关配置
文章目录以太网卡TSO.GSO.LRO.GRO描述及相关配置硬件包拆分与合并 TSO(TCP Segmentation Offload ) UFO(UDP Fragmentation Offloa ...
网络协议栈TSO/UFO/GSO/LRO/GRO/RSS特性
作者 QQ群:852283276 微信:arm80x86 微信公众号:青儿创客基地 B站:主页 https://space.bilibili.com/208826118 参考网卡多队列技术与RSS功 ...
GSO/TSO/GRO等对VirtIO虚机的网络性能影响分析(by quqi99)
作者:张华发表于:2016-04-05 版权声明:能够随意转载,转载时请务必以超链接形式标明文章原始出处和作者信息及本版权声明 ( http://blog.csdn.net/quqi99 ) IP ...
TSO、GSO介绍与实现
转载自:http://www.bsdmap.com/2012/02/22/转tso.ufo.gso.lro.gro和rss介绍/ 转载自:http://blog.chinaunix.net/uid-2 ...
UDP 与 GRO, GSO
不知道是不是因为 GSO, GRO 是 Linux 新增特性的原因, 在 google 上找了半天都没有找到一篇详细的介绍如何使用 GSO/GRO 的文章, 最后从 Linux 内核中与 GSO/GR ...
TSO与GSO简单区分
概念 TSO(TCP Segmentation Offload): 是一种利用网卡来对大数据包进行自动分段,降低CPU负载的技术. 其主要是延迟分段.通过硬件(网卡)实现. GSO(Generic S ...
linux 网卡gso,linux内核网络协议栈学习笔记：关于GRO/GSO/LRO/TSO等patch的分析和测试...
TSO,全称是TCP Segmentation Offload,我们知道通常以太网的MTU是1500,除去TCP/IP的包头,TCP的MSS (Max Segment Size)大小是1460,通常情 ...
SmartNIC/DPU — TSO、GSO、LRO、GRO 卸载技术
目录文章目录目录网络功能卸载 TSO(TCP Segmentation Offload) GSO(Generic Segmentation Offload) LRO(Large Receive ...
Linux 内核协议栈的 TSO、GSO
Linux 内核的 TSO 会在真正将skb发送到网卡前做GSO的检查: 对于真实硬件设备,是在sch_direct_xmit中调用validate_xmit_skb_list检查对于虚拟设备,则是 ...

IPv6的TSO/GRO/GSO及其Linux实现的不妥

IPv6的TSO/GRO/GSO及其Linux实现的不妥相关推荐

最新文章

热门文章