本篇文章介绍DPDK-RSS相关的功能，RSS是网卡提供的分流机制，简单讲就是一个HASH值，如果使用DPDK收包，开启RSS后，会根据配置项将数据包分流到不同的收包队列，用来是实现负载均衡。通过DPDK-L3FWD样例，添加打印参数进行详细说明，大致分为以下流程：1、DPDK如何开启RSS（开启和关闭位置，以及开启关闭影响参数）；2、如何查看网卡所支持的RSS选项；3、DPDK如何配置不同的RS
RTMP拉流排查过程过程较长先写结论作为流媒体转发的nginx服务器(CentOS7)的网卡配置为e1000，切换为VMXNET3(半虚拟化)后，推拉流正常，具体原因参考网页测试网络过程# 安装需要的命令
# yum install -y dstat lftp mtr git
# 压测rtmp所需工具
# 参考文档
# git clone https://github.com/winlinvip
DPDK以两种方式对外提供内存管理方法，一个是rte_mempool，主要用于网卡数据包的收发；一个是rte_malloc，主要为应用程
序提供内存使用接口。本文讨论rte_mempool。rte_mempool由函数rte_mempool_create()负责创建，从
rte_config.mem_config->free_memseg[]中取出合适大小的内存，放到
rte_config.
转载
精选
2015-07-17 22:26:27
2563阅读
这个事情，还真不是一句话就能回答的，因为涉及到Linux和编译器的版本关于线程的概念不多说了，内核级和用户级线程的定义网上也有，简单的说：内核级就是操作系统内核支持，用户级就是函数库实现（也就是说，不管你操作系统是不是支持线程的，我都可以在你上面用多线程编程）。好了，那么，我们首先明白一件事：不管Linux还是什么OS，都可以多线程编程的，怎么多线程编程呢？程序员要创建一个线程，当然需要使用xxx
转载
2024-03-01 12:37:15
22阅读
无论对于DPDK做怎样的增量开发，了解DPDK的内存管理模式有利于在满足自己产品功能同时最大化的提高性能；一：Mempool的基本单元概念Mempool是固定大小的对象分配器。 在DPDK中，它由名称唯一标识，并且使用mempool操作来存储空闲对象。Mempool的组织是通过三个部分实现的：mempool对象节点：mempool的对象挂接在 static structmempool实际
转载
2024-02-20 21:17:43
193阅读
在传统的 x86 网络协议栈中，网络报文通过网卡硬件接收/发送，都需要发送中断到 CPU，一次中断需要保存/恢复处理器状态，并运行中断服务程序，整个过程至少需要 300 个处理器时钟周期。对于需要处理大规模数据的高性能网络报文处理框架，频繁的中断降低了网络应用的处理速度，成为了性能瓶颈。为了减少中断开销，DPDK 抛弃了传统的内核中断，采用轮询模式驱动( poll mode driver，PMD)
dpdk可以通过两种方式来管理内存， 一种是调用rte_malloc， 在大页内存上申请空间； 另一种是使用内存池，也是通过在大页内存上申请空间方式。 两种有什么区别呢？虽然两者最终都是在大页内存上获取空间，但内存池这种方式直接在大页内存上获取，绕开了rte_malloc调用。rte_malloc一般用于申请小的内存空间。通常在需要非常大的缓
初始化之前的内存layout
dpdk得到的原始内存是通过mmap大页获得的，而这样的原始内存分布可以用下图表示（NUMA架构）。关于页表相关的知识，可以参加我的另外一篇文章（虚拟存储器）。
其中页a、a+1类似的表示连续的物理页。 初始化之后的内存layout 为了高效的使用内存，需要重新组织内存，并对其进行管理。组织的方式：把物理地址连续的页映射到进程中时，对应的虚拟地址也连续
dpdk 的内存管理层次结构物理巨页的管理虚拟地址空间的管理heap管理（变长buffer）mempool管理（定长buffer）物理巨页的管理dpdk中通过 数组 hugepg_tbl[LEN] 组织所有的巨页。巨页管理的主要需求是：在用户空间 获取物理巨页规则化 虚拟地址 与 物理巨页的映射 关系。
约束1：保证 连续的va对应连续的pa约束2：不连续的va则pa不连续。约束1 可以方便
dpdk 数组、rte_ring、mempool、lpm、acl
原创
2023-05-14 00:40:47
184阅读
1 前置知识学习1.1 MTUMTU是最大传输单元（ Maximum Transmission Unit）的缩写，指一个接口无需分片所能发送的数据包的最大字节数。 MTU范围在46 ~ 1500字节，默认一般都是1500。1）MTU为1500时计算总长度7字节前导码＋1字节帧开始定界符＋6字节的目的MAC＋6字节的源MAC＋2字节的帧类型＋1500字节IP头及数据＋4字节的 FCS =
转载
2024-05-05 13:08:26
219阅读
C语言creat()函数：创建文件函数头文件：#include #include #include 定义函数：int creat(const char * pathname,mode_tmode);函数说明：1、参数 pathname 指向欲建立的文件路径字符串。2、Creat()相当于使用下列的调用方式调用open()open(const char * pathname,(O_CREAT|O_W
（一）一些概念：分页：将物理内存分成固定大小的块，按照页来进行分配和释放；一般带下为4K(2^12)个字节；大页：比如大小为2M(2^20)和2G(2^32)字节大小的页；虚拟地址：软件编码通过虚拟地址来访问内存；由处理器将虚拟地址转换成物理地址；（虚拟地址对应虚拟内存，虚拟内存对应了numa系统的node节点）页表：形成页目录表、页表、内容页的层级结构（为什么要三层结构？）用于虚拟地址到物理地址
概念：librte_malloc库提供了一套用于管理内存空间的API接口，它管理的内存是hugepages上创建出来的memzone，而不是系统的堆空间。通过这套接口，可以提高系统访问内存的命中率，防止了在使用Linux用户空间环境的4K页内存管理时容易出现TLB miss。 这是基于老版本（INTELDPDK.L.1.2.3_3版本）所写的，后来又看了下16.11版本的，已经有了极大的变化。 如
struct rte_mempool *
rte_pktmbuf_pool_create(const char *name, unsigned n,
unsigned cache_size, uint16_t priv_size, uint16_t data_room_size,
int socket_id)name是内存池名字。为了获得更好的性
转载
2024-03-13 11:53:18
219阅读
RateLimiter是Guava包提供的限流器，采用了令牌桶算法，特点是均匀地向桶中添加令牌，每次消费时也必须持有令牌，否则就需要等待。应用场景之一是限制消息消费的速度，避免消息消费过快而对下游的数据库造成较大的压力。本文主要介绍RateLimiter的源码，包括基本限流器SmoothBursty，以及带预热效果的SmoothWarmingUp。RateLimiter作为限流器的顶层类，只有两个
转载
2024-04-30 23:43:08
80阅读
PCM采样一次大小为：采样位深/8*通道数 Bytes以8000采样率6bit采样深度单通道为例：每秒的大小为：8000*8/8*1=8000bytes
原创
2021-07-14 15:13:12
1301阅读
目录 文章目录目录DPDK 的日志系统RTE_LOG 宏rte_log 和 rte_vlog 函数日志模块初始化第一阶段初始化第二阶段初始化注册新的日志类型复用现有日志类型参考文档 DPDK 的日志系统...
转载
2020-06-13 21:38:00
1660阅读
目录文章目录目录DPDK 的日志系统RTE_LOG 宏rte_log 和 rte_vlog 函数日志模
原创
2022-04-07 11:23:05
2677阅读
目录参考参考
原创
2022-12-13 16:11:05
637阅读
