- 博客(2)
- 收藏
- 关注
原创 Hadoop基础知识
大数据时代我们生活在大数据时代,数据量远远超过硬盘可存储数量。个人产生的数据正在快速的增长,个人档案有很大的技术发展和商业前景。数据的存储与分析问题:硬盘存储容量多年来不断提升的同时,访问速度(硬盘的读取速度)没有与时俱进。解决思路:多线程并行同时操作数据。还有问题:1、硬件故障2、不同硬盘中的数据需要结合使用。Hadoop这样解决1、HDFS分布式存储/存储文件副本2、M...
2018-11-25 19:28:23 172
原创 数据小白之入坑之作
#数据小白之入坑之作在确定研究生方向之前,我就对数据工程师的工作充满了好奇,虽然现在及将来,研究生课内学习的方向与数据分析处理工作无关,但还是挡不住我强烈的好奇心,想要一探数据海洋的究竟。于是我到图书馆借了一打相关书籍,其中包括宏观分析数据市场及未来发展的、Hadoop、Spark权威指南,拟在近几个月的日子里数理结合,以博客为平台总结整理并起监督作用,开辟一片数据的蓝天。...
2018-11-24 11:13:49 85
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人