成天天的博客

原创 海量数据处理

1、常见海量数据处理方法hash、bit-map（位图法）、bllomfilter、数据库优化、倒排索引、外排序、Trie树、堆、双层桶、mapReduce法、分治2、hash法在海量数据处理中，Hash法一般可以快速存取、统计某些数据，将大量数据进行分类，例如，提取某日网站次数最多的IP地址3、bit-map位图法又叫位图法，基本原理是使用位数组来表示某些元素是否存在，它适用于海量数据的快速查找...