大数据的大,数据量大。如何解决大的问题呢??
解决思路?无论什么面对海量的数据,无论什么样的CPU,数据传输处理总归而言是串行处理的,受磁盘IO影响巨大。
大数据的解决办法实际上是一种并行的解决思路,无论是并行计算或者移动程序,本质上都是对同时读取量的限制和解决。
数据的处理瓶颈,在于出来的量,当量达到一定程度,一定会带来串行问题。所以大数据的解决思路,是并行处理。分块计算就是解决的思路。
大数据的大,数据量大。如何解决大的问题呢??
解决思路?无论什么面对海量的数据,无论什么样的CPU,数据传输处理总归而言是串行处理的,受磁盘IO影响巨大。
大数据的解决办法实际上是一种并行的解决思路,无论是并行计算或者移动程序,本质上都是对同时读取量的限制和解决。
数据的处理瓶颈,在于出来的量,当量达到一定程度,一定会带来串行问题。所以大数据的解决思路,是并行处理。分块计算就是解决的思路。