对于 XDP-eBPF 上的 ipv6-Srv6 数据包，rx_queue_index 始终返回值 1

编程问答 2022-05-26

问题描述

我正在尝试使用简单的 XDP-eBPF 程序跟踪 Ipv6-Srv6 数据包。我一如既往地获得 NIC 队列 1。

以下是环境细节

  1. 操作系统：来宾操作系统，Ubuntu 19.10，5.3.0-64-generic
  2. 网卡：x710：10Gbps，驱动程序=i40e，驱动程序版本=2.8.20-k，固件=7.20
  3. XDP-eBPF：我的自定义示例程序
#include <bpf.h>
#include <bpf/bpf_helpers.h>

#include <linux/if_ether.h>
#include <linux/ipv6.h>

#include <stdint.h>

#ifndef lock_xadd
#define lock_xadd(ptr,val)     ((void) __sync_fetch_and_add(ptr,val))
#endif

struct bpf_map_def SEC("maps") queue_rx_pkts = {
        .type        = BPF_MAP_TYPE_ARRAY,.key_size    = sizeof(__u32),.value_size  = sizeof(__u64),.max_entries = 256,};

SEC("prog")
int xdp_select(struct xdp_md *ctx)
{
        //__u32 input_port = ctx->ingress_ifindex;
        __u32 input_queue = ctx->rx_queue_index;

        void *data_end = (void *)(long)ctx->data_end;
        void *data = (void *)(long)ctx->data;
        struct ethhdr *eth_ptr = (struct ethhdr *)data;
        struct ipv6hdr *ipv6_ptr = (struct ipv6hdr *)(data + sizeof(struct ethhdr));
        unsigned int *pkt_count = bpf_map_lookup_elem(&queue_rx_pkts,&input_queue);

        if (!pkt_count)
                return XDP_ABORTED;

        if ((data + sizeof(*eth_ptr)) > data_end)
                return XDP_DROP;


        if (eth_ptr->h_proto == 0xdd86) {
                if ((void *)(ipv6_ptr + 1) > data_end)
                        return XDP_DROP;
                *pkt_count += 1;
                return XDP_PASS;
        }

        return XDP_DROP;
}
  • 数据包生成器：主机 NIC X710 使用带有 packETHcli -i ens261f2 -m 2- d 0 -n 0 -f /tmp/test.pcap 的 packEth cli 实用程序运行
  • 预期结果：入口数据包将分布在多个 RX 队列上。
  • 观察结果：RX 队列 1 仅接收数据包。

enter image description here

我使用 ethtool -S [interface name] 和 bpftool map dump id 12 验证了结果。两种情况 RX-Queue-1 都只是在更新。

enter image description here

[EDIT-1] 根据评论的建议更新 RSS 哈希状态

$ ethtool --show-rxfh-indir ens10                                                                                                                                                                                                      [4/1785]
RX flow hash indirection table for ens10 with 8 RX ring(s):
    0:      0     1     2     3     4     5     6     7
    8:      0     1     2     3     4     5     6     7
<snipped>
  504:      0     1     2     3     4     5     6     7
RSS hash key:
9b:d2:e1:c0:f7:aa:1f:69:49:7c:55:76:48:7e:2c:fc:d5:91:47:39:df:50:52:8f:88:07:c8:63:62:27:93:17:35:75:dc:f6:85:e8:ff:c2:72:1d:de:92:d4:2b:1e:d9:f2:53:df:38
RSS hash function:
    toeplitz: on
    xor: off
    crc32: off

解决方法

暂无找到可以解决该程序问题的有效方法，小编努力寻找整理中！

如果你已经找到好的解决方法，欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@）

nicxdp-bpf