news 2026/5/16 6:02:09

dpdk-testpmd在超过128核双numa场景启动失败问题

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
dpdk-testpmd在超过128核双numa场景启动失败问题

问题描述:

dpdk-testpmd在超过128核双numa场景中,启动失败问题,问题日志如下,扫描内存的时候,无法使用numa1的内存。

...EAL:Detected lcore0as core0on socket0EAL:Detected lcore127as core215on socket0EAL:Skipped lcore128as core0on socket1EAL:Maximum logical cores by configuration:128EAL:Detected CPU lcores:128EAL:Detected NUMA nodes:1EAL:huge_pre_init setted2......EAL:Hugepage/dev/hugepages//rtemap_1 is on socket 1EAL:Hugepage/dev/hugepages//rtemap_0 is on socket 0EAL:num of reserve hugepage on socket0:1EAL:num of reserve hugepage on socket1:1EAL:num of reserve hugepage on socket2:0......EAL:Allocating1pages of size1024M on socket0EAL:Trying to obtain current memory policy.EAL:Setting policy MPOL_PREFERREDforsocket0EAL:Restoring previous memory policy:0EAL:Allocating1pages of size1024M on socket1EAL:Trying to obtain current memory policy.EAL:Setting policy MPOL_PREFERREDforsocket1EAL:eal_memalloc_alloc_seg_bulk():couldn't find suitable memseg_list EAL:Restoring previous memory policy:0EAL:FATAL:Cannot init memory EAL:Cannot init memory EAL:Error-exiting with code:1Cause:::invalid EAL arguments

原因分析:

一开始只是关注了error的log,以为是大页分配失败了,没有关注到前面的日志信息。

EAL: Setting policy MPOL_PREFERREDforsocket1EAL: eal_memalloc_alloc_seg_bulk(): couldn'tfindsuitable memseg_list

其实刚开始的日志也非常的重要,这里其实早早的就暴露了问题,dpdk-testpmd启动的时候,只探测了0-127核,跳过了128以及之后的核,最终只扫了numa0,故只能用numa0的内存。

EAL: Detected lcore0as core0on socket0EAL: Detected lcore127as core215on socket0EAL: Skipped lcore128as core0on socket1EAL: Maximum logical cores by configuration:128EAL: Detected CPU lcores:128EAL: Detected NUMA nodes:1EAL: huge_pre_init setted2

分析代码,可以看到cpu count的上限是由 RTE_MAX_LCORE决定的。而它是由config/x86/meson.build 中的 dpdk_conf.set('RTE_MAX_LCORE', 128)这个决定。

./lib/eal/common/eal_common_lcore.c

继续分析config/x86/meson.build代码,如下,可以看到通过修改编译,增加-Dmax_lcores来修改cpu数量来解决。

config/x86/meson.build

commit8ef09fdc506b76d505d90e064d1f73533388b640 Author:Juraj Linkeš<juraj.linkes@pantheon.tech>Date:Tue Aug1712:45:562021+0200build:add optional NUMA and CPU counts detection Add an option to automatically discover the host's NUMA and CPU counts and use those valuesfora non cross-build.Give users the option to override the per-archdefaultvalues or values from cross files by specifying them on the command line with-Dmax_lcores and-Dmax_numa_nodes.Signed-off-by:Juraj Linkeš<juraj.linkes@pantheon.tech>Reviewed-by:Honnappa Nagarahalli<honnappa.nagarahalli@arm.com>Reviewed-by:David Christensen<drc@linux.vnet.ibm.com>Acked-by:Bruce Richardson<bruce.richardson@intel.com>diff--git a/config/x86/meson.build b/config/x86/meson.build index704ba3db56..29f3dea181100644---a/config/x86/meson.build+++b/config/x86/meson.build @@-70,3+70,5@@elseendif dpdk_conf.set('RTE_CACHE_LINE_SIZE',64)+dpdk_conf.set('RTE_MAX_LCORE',128)+dpdk_conf.set('RTE_MAX_NUMA_NODES',32)

解决方案:

编译dpdk-testpmd的时候,增加参数-Dmax_lcores=256,如下解决。
meson build -Dmax_lcores=256

小结:

dpdk在使用的时候,还是和机型绑定在一起的,对于核数和numa数量的增加,都会影响dpdk的使用,需要进行适配。比较好的是,dpdk在开发之初,考虑到了这个问题,通过调整编译参数就可以解决。

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/5/9 15:12:57

pdb设置内存参数

查看pdb设置的参数 set linesize 120 column pdb_name format a10 column name format a30 column value$ format a30select ps.db_uniq_name,ps.pdb_uid,p.name as pdb_name,ps.name,ps.value$ from pdb_spfile$ psjoin v$pdbs p on ps.pdb_uid p.con_uid order by 1, 2, …

作者头像 李华
网站建设 2026/5/15 23:45:32

索引的原理

一、索引的核心思想&#xff1a;空间换时间代价&#xff1a;索引需要占用额外的存储空间&#xff0c;并且会在数据增删改时引入额外的维护开销。收益&#xff1a;通过预先建立并维护一个更小的、针对性更强的数据结构&#xff0c;使得查询时能以远快于遍历全表的速度定位到目标…

作者头像 李华
网站建设 2026/5/9 17:02:49

基于大数据对B站热门视频的数据分析与数据研究系统(程序+文档+讲解)

课题介绍在 B 站内容生态精细化运营、创作者赋能需求下&#xff0c;传统热门视频分析存在 “维度单一、实时性差、规律挖掘不足” 的痛点&#xff0c;基于大数据技术构建的 B 站热门视频数据分析与研究系统&#xff0c;适配平台运营人员、UP 主、数据分析师等角色&#xff0c;整…

作者头像 李华
网站建设 2026/5/10 5:14:29

学长亲荐10个AI论文软件,助你轻松搞定本科毕业论文!

学长亲荐10个AI论文软件&#xff0c;助你轻松搞定本科毕业论文&#xff01; 论文写作的“隐形助手”&#xff0c;你真的了解吗&#xff1f; 在当今这个信息爆炸的时代&#xff0c;AI 工具已经成为许多本科生撰写毕业论文时不可或缺的帮手。无论是内容创作、逻辑梳理&#xff0c…

作者头像 李华
网站建设 2026/5/12 11:34:19

佳明自动驾驶系统成功实现小型飞机无人干预自动着陆

美国联邦航空管理局证实&#xff0c;佳明公司的自动着陆产品在首次实际紧急情况应用中取得成功&#xff0c;一架小型飞机在科罗拉多州落基山都市机场完全依靠自动化系统安全紧急降落。佳明紧急自动着陆系统的设计目标是在"飞行员无法驾驶的紧急情况下自动接管飞行的完全控…

作者头像 李华
网站建设 2026/5/14 22:49:34

运营述职 PPT 工具横评:效率与呈现谁更优

每到季度末&#xff0c;做运营述职 PPT 就成了运营人的噩梦。好不容易搞定了基础的数据整理&#xff0c;又要担心写不出吸引人的内容&#xff0c;熬夜熬到两眼发黑&#xff0c;内容框架还是一团乱麻。好不容易把内容凑齐了&#xff0c;又得在排版设计上绞尽脑汁&#xff0c;颜色…

作者头像 李华