bigdata
文章平均质量分 71
大数据使用
夜深人静学 算法
小小白
展开
-
linux学习(用户,密码,ip,时间,磁盘,进程)
【代码】linux学习(用户,密码,ip,时间)原创 2024-03-15 18:59:03 · 127 阅读 · 1 评论 -
spark配置安装
配置spark配置文件 - 进入到spark安装目录下的conf目录中。node2 和 node3 中也需要安装annaconda。配置spark-defaults.conf文件。配置spark-defuldes.sh文件。-> 输入annaconda存储的路劲。配置spark-env.sh文件。浏览器中可以查看两个master。-> 输入yes初始化。原创 2024-03-26 17:03:19 · 603 阅读 · 0 评论 -
linux - mysql安装-hive安装
根据获取的mysql的root用户的密码登录。原创 2024-03-17 16:38:01 · 595 阅读 · 0 评论 -
spark常用api
【代码】spark常用api。原创 2024-03-28 16:09:47 · 144 阅读 · 0 评论 -
HBase的基本命令操作
create – 创建表x_table,cf1列,cf2列alter – 修改表->删除f1列alter_status – 查看表修改状态clone_table_schema – 克隆表结构describe – 显示表信息disable – 禁用表disable_all – 禁用所有以x开头的表drop – 删除表drop_all – 删除所有以x开头的表enable – 启用被禁用的表enable_all – 启用所有以x开头的表exists – 检查表是否存在get_table – 获取表描述信息。原创 2024-03-29 08:39:15 · 1085 阅读 · 1 评论 -
hadoop-mapreduce-yarn-配置-yarn高可用配置(HA)(学习)
mapreduce(分布式计算)yarn(分布式调度)原创 2024-03-17 14:35:51 · 336 阅读 · 0 评论 -
hadoop-hdfs配置 + HA(高可用)配置(学习)
需要编写hadoop目录下的配置文件配置文件在hadoop安装目录下面的etc/hadoop/下。成功会出现namenode,datanode,secondarynamenode。在浏览器中打开namenode所在id: 192.168.72.88:9870。core-site.xml hadoop的核心配置文件。hadoop-env.sh 配置hadoop的相关环境。hdfs-site.xml hdfs的核心配置文件。原创 2024-03-16 16:19:40 · 560 阅读 · 0 评论