多任务处理数据的一些方法,一些工作流的处理原理

 

问题:比如需要从一个表里抽数据进行处理，假如这个表数据量很多，需要进行多任务来同时处理该表抽出的数据.

 

方法:

1:

一般可以将任务队列放入一张表，并从0....9编号做主键，当从源表里取数据的时候，用源表的主键ID(一般是sequence数字)%10得到的数肯定是0...9之间的一个数字，刚好可以对应到任务队列中的一条记录，就用对应的那个任务来处理这条数据，这样就刚好平均分配处理了

 

2:

以上是一种分配方式，还有一种是建立一个循环的sequence,值从0...9,每次取数据分配给任务的时候取一下sequence,这样也可以将数据分配给不同的任务队列做处理，不过这中是不是有线程问题，没有具体深入研究

 

这俩都是自己在工作中的常用方式,有些工作流就是采用第一种方式来处理流程的.