分拣:从交换机下导数据。
asininfo的作法是用文件来保存文件。
longshine的做法是用数据库来采集数据。
asininfo实现:
用数组来读取文件文件。
用配置来控制记录每一个字段的意义。
用配置来控制文件格式。
分通道来均衡负载。
对每个字段按字段的意义保存后,后面有一个配置数字,用来激发程序的处理。
难点:内存控制、文件操作能力。
去重:
分拣:从交换机下导数据。
asininfo的作法是用文件来保存文件。
longshine的做法是用数据库来采集数据。
asininfo实现:
用数组来读取文件文件。
用配置来控制记录每一个字段的意义。
用配置来控制文件格式。
分通道来均衡负载。
对每个字段按字段的意义保存后,后面有一个配置数字,用来激发程序的处理。
难点:内存控制、文件操作能力。
去重: