![](https://img-blog.csdnimg.cn/direct/2d8f07235f5f4127bd5d4f3480e82f54.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
大数据从入门到精通
文章平均质量分 62
带你入门大数据
w_l666
这个作者很懒,什么都没留下…
展开
-
大数据入门(三)
HDFS的api相关操作:至此,hdfs的常用api操作,基本完成。点点赞点点关注呀,持续分享有用的知识........................原创 2024-04-18 16:30:00 · 133 阅读 · 1 评论 -
大数据入门(二)
HDFS(),它是一个文件系统,用于存储文件,通过目录树来定位文件;其次,它是分布式的,由很多服务器联合起来实现其功能,集群中的服务器有各自的角色。HDFS的使用场景:适合一次写入,多次读出的场景。一个文件经过创建、写入和关闭之后就不需要改变。原创 2024-04-17 16:45:00 · 527 阅读 · 0 评论 -
大数据入门(一)
1)Sqoop:Sqoop是一款开源的工具,主要用于在Hadoop、Hive与传统的数据库(MySQL)间进行数据的传递,可以将一个关系型数据库(例如 :MySQL,Oracle 等)中的数据导进到Hadoop的HDFS中,也可以将HDFS的数据导进到关系型数据库中。2)Flume:Flume是一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;用于实时计算的场景较多。3、高效性:hadoop是并行工作的,以加快任务的处理速度。原创 2024-03-26 11:37:45 · 488 阅读 · 1 评论