DPDK（16）：DPDK多核多线程机制简析

在看FSTACK的代码时发现FSTACK将一些查询配置的处理放到了转发线程上，显然这种方式会导致转发处理每个包都要多处理，建议是控制和转发分离，不过具体有多大影响还是需要测试，毕竟协议栈的处理流程很长，在流程中增加一个判断并没有那么大影响。

在转发流程中处理了消息，不建议这么使用：

        }

        process_msg_ring(qconf->proc_id);

        if (likely(lr->loop != NULL)) {
            lr->loop(lr->arg);
        }
    }
}

转自：http://www.cnblogs.com/MerlinJ/p/4103790.html

DPDK通过在多核设备上，创建多个线程，每个线程绑定到单独的核上，减少线程调度的开销，以提高性能。

DPDK的线程分为控制线程和数据线程，控制线程一般绑定到MASTER核上，主要是接受用户配置，并传递配置参数给数据线程等；数据线程主要是处理数据包。

一、初始化

1、rte_eal_cpu_init()函数中，通过读取/sys/devices/system/cpu/cpuX/下的相关信息，确定当前系统有哪些CPU核，已经每个核属于哪个CPU Socket。

2、eal_parse_args()函数，解析-c参数，确认哪些CPU核是可以使用的，以及设置第一个核为MASTER。

3、为每一个SLAVE核创建线程，并调用eal_thread_set_affinity()绑定cpu。线程的执行体是eal_thread_loop()。eal_thread_loop()的主体是一个while死循环，调用不同模块注册到lcore_config[lcore_id].f的回调函数。

 1 RTE_LCORE_FOREACH_SLAVE(i) {
 2 
 3     /*
 4      * create communication pipes between master thread
 5      * and children
 6      */
 7     if (pipe(lcore_config[i].pipe_master2slave) < 0)
 8         rte_panic("Cannot create pipe\n");
 9     if (pipe(lcore_config[i].pipe_slave2master) < 0)
10         rte_panic("Cannot create pipe\n");
11 
12     lcore_config[i].state = WAIT;
13 
14     /* create a thread for each lcore */
15     ret = pthread_create(&lcore_config[i].thread_id, NULL,
16                  eal_thread_loop, NULL);
17     if (ret != 0)
18         rte_panic("Cannot create thread\n");
19 }

 

二、注册

不同的模块需要调用rte_eal_mp_remote_launch()，将自己的回调处理函数注册到lcore_config[].f中。以l2fwd为例，注册的回调处理函数是l2fwd_launch_on_lcore()。

1 rte_eal_mp_remote_launch(l2fwd_launch_one_lcore, NULL, CALL_MASTER);

 DPDK每个核上的线程最终会调用eal_thread_loop()--->l2fwd_launch_on_lcore()，调用到自己实现的处理函数。

 

错误之处，欢迎指出。 

转载请标明转自http://www.cnblogs.com/MerlinJ/p/4103790.html