![](https://img-blog.csdnimg.cn/20201014180756780.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
文章平均质量分 66
夏天i(Joker)
这个作者很懒,什么都没留下…
展开
-
FastApi 快速上手使用
验证是否安装成功启动服务get请求,浏览器访问如果你此时访问。你将会看到自动生成的API交互文档。swagger文档。转载 2023-03-07 16:21:39 · 1544 阅读 · 1 评论 -
Hadoop集群配置
1.配置核心文件HDFS1.配置:core-site.xml 192.168.200.16<!-- 指定HDFS 中的 NameNode的地址 --><property><name>fs.defaultFS</name><value>hdfs://hadoop2:9000</value></property><!-- 指定Ha......原创 2022-04-15 17:31:52 · 2841 阅读 · 0 评论 -
scp安全拷贝 rsync 远程同步
1.scp安全拷贝定义:实现服务器之间数据拷贝scp -r $pdir/$fname $user@hadoop$host:$pdir/$fname命令 递归 要拷贝的文件路径/名称 目的地用户@主机:目的路径/名称2.rsync 远程同步工具安装:yum install -y rsync1.rsync主要用于备份和镜像、具有速度快、避免复制相同的内容和支持符号链接的特点、2.rsync与scp区别:rsy...原创 2022-04-15 17:19:00 · 191 阅读 · 0 评论 -
大数据概论(Hadoop)
大数据(Big Data) 指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察力、和流程优化能力的海量、高增长率和多样化的信息资产。主要解决,海量数据的存储、与海量数据的分析计算问题特点:1.大量 2.高速 3.多样 4.低价值密度优势1.高可靠Hadoop底层维护多个数据副本,所以即使Hadoop某个计算单元出现故障,也不会丢失数据2.高扩展性在集群中分配任务数据,可方便扩展数以千计的......原创 2022-04-15 17:10:19 · 151 阅读 · 0 评论