DPDK多核多线程机制简析

DPDK通过在多核设备上，创建多个线程，每个线程绑定到单独的核上，减少线程调度的开销，以提高性能。

DPDK的线程分为控制线程和数据线程，控制线程一般绑定到MASTER核上，主要是接受用户配置，并传递配置参数给数据线程等；数据线程主要是处理数据包。

一、初始化

1、rte_eal_cpu_init() 函数中，通过读取 /sys/devices/system/cpu/cpuX/ 下的相关信息，确定当前系统有哪些CPU核，已经每个核属于哪个 CPU Socket。

2、eal_parse_args() 函数，解析-c参数，确认哪些 CPU 核是可以使用的，以及设置第一个核为 MASTER。

3、为每一个 SLAVE 核创建线程，并调用 eal_thread_set_affinity() 绑定cpu。线程的执行体是 eal_thread_loop()。 eal_thread_loop() 的主体是一个 while 死循环，调用不同模块注册到 lcore_config[lcore_id].f 的回调函数。

 

RTE_LCORE_FOREACH_SLAVE(i)  {

   /*

    * create communication pipes between master thread

    * and children

    */

   if (pipe(lcore_config[i].pipe_master2slave) < 0)

       rte_panic("Cannot create pipe\n");

   if (pipe(lcore_config[i].pipe_slave2master) < 0)

       rte_panic("Cannot create pipe\n");

   lcore_config[i].state = WAIT;

 

   /* create a thread for each lcore */

   ret = pthread_create(&lcore_config[i].thread_id, NULL, eal_thread_loop, NULL);

   if (ret != 0)

       rte_panic("Cannot create thread\n");

}

二、注册

不同的模块需要调用 rte_eal_mp_remote_launch()，将自己的回调处理函数注册到 lcore_config[].f 中。以 l2fwd 为例，注册的回调处理函数是 l2fwd_launch_on_lcore()。

 

rte_eal_mp_remote_launch(l2fwd_launch_one_lcore, NULL, CALL_MASTER);

DPDK每个核上的线程最终会调用eal_thread_loop() ---> l2fwd_launch_on_lcore()，调用到自己实现的处理函数。

文章来源

http://www.cnblogs.com/MerlinJ/p/4103790.html