- 博客(4)
- 收藏
- 关注
RSS订阅原创 Hive 组件安装配置
将/usr/local/src/hive/conf 文件夹下 hive-default.xml.template 文件，更名为 hive-site.xml。（1）使用 root 用户，将 Hive 安装包 /opt/software/apache-hive-2.0.0-bin.tar.gz 路解压到/usr/local/src 路径下。（2）本地安装 MySQL 数据库（账号 root，密码 Password123$）， 软件包在/opt/software/mysql-5.7.18 路径下。
2024-04-10 20:58:22
662
原创 Linux中关于IP配置与yum仓库配置的基础小知识
baseurl=file:///media #本地地址使用file://后面接镜像挂载的地址，远程使用ftp://至此，在网络服务重启后，对于IP的永久配置就做完了。网卡文件存放路径：/etc/sysconfig/network-scripts。命令：vi local.repo (文件以 .repo 结尾，文件名随意)用这两种方法配置的IP是临时IP，设置后立即生效，重启后失效。/media ： 镜像挂载的路径，可以根据自己需求更改。命令：mount /dev/cdrom /media。
2024-03-20 17:15:52
605
原创 关于Hadoop不得不看的小知识
数字表示 用 3 个数字表示文件或目录的权限，第 1 个数字表示所有者的权限，第 2个 数字表示与所有者同组用户的权限，第 3 个数字表示其他用户的权限。Spark的中心数据存放于内存中，有更高的迭代运算效率，而Hadoop MapReduce每次迭代的中间数据存放在HDFS中，涉及硬盘的读写，运算效率相对较低。功能：将文件或目录的拥有者改为指定的用户或组，用户可以是用户名或者 用户 ID，组可以是组名或者组 ID，文件是以空格分开的要改变权限的文件 列表支持通配符。功能：用于显示和设置系统的主机名称。
2024-03-13 17:51:57
1032
原创 Hadoop
（6）如果第一批block都读完了，DFSInputStream就会去namenode拿下一批blocks的location，然后继续读，如果所有的block块都读完，这时就会关闭掉所有的流程。如何通过强大的机器学习和高级分析更迅速地完成数据的价值“提纯”，挖掘出大数据的潜在价值，这是目前大数据应用背景下苛待解决的难题。大数据所处理的计算机数据类型早已不是单一的文本形式或者结构化数据库中的表，它包括订单、日志、BLOG、微博、音频、视频等各种复杂结构的数据。速度是大数据区分于传统数据的重要特征。
2024-03-07 13:01:39
582
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人