大数据算法

大数据算法难度?

1.访问全部数据时间过长(时间亚线性算法)

读取部分数据

2.数据难于放入内存计算(外存算法)

将数据存储到磁盘上

仅基于少量数据进行计算

3.单个计算机难以保存全部数据,计算需要整体数据(并行算法)

并行处理

4.计算机计算能力不足或知识不足(众包算法)

人来帮忙

大数据算法设计技术

1.精确算法设计方法

2.并行算法

3.近似算法

4.随机算法

5.在线算法/数据流算法

6.外存算法