Peacock数据统计优化

Peacock数据统计优化：

1. 原始数据经过一系列的逻辑处理，转化为统计数据，存储到Redis， 最后写到MySQL。

优化的办法是，分两个后台任务，一个处理原始数据写Redis， 另一个将Redis中的统计数据读出写到MySQL。这样做的好处是不会因为写MySQL阻塞原始数据的处理，从而尽可能快的处理完客户端post上来的原始数据。

2.  一些不是特别重要的数据，如日志等先存到一个Redis队列中， 然后用单独的后台任务定时从队列中取出，写到MySQL。

3. 利用Redis的bitmaps相关的操作进行广告PV,， UV,  DAU, DNU,WAU,MAU,TU的统计。通过将一个用户的identifer对应value上的一位，通过对活跃用户对应的位进行置位，就能够用一个value记录所有活跃用户的信息。使用bitmap统计可以省去判断用户是否以访问过等步骤，减少统计时间。（更多信息可参考http://blog.nosqlfan.com/html/3501.html）