大数据
文章平均质量分 57
lunhuicn
这个作者很懒,什么都没留下…
展开
-
there is no HDFS_NAMENODE_USER defined
将start-dfs.sh,stop-dfs.sh两个文件顶部添加以下参数。start-yarn.sh,stop-yarn.sh顶部也需添加以下。原创 2022-12-09 14:07:09 · 148 阅读 · 0 评论 -
hadoop、spark、zookeeper、hbase、hive集群安装
在master节点,使用命令"hbase-daemon.sh stop master",等待一会发现slave1成为master,当HBase的master节点故障后,ZooKeeper会从备份中自动推选一个作为master.安装在hadoop的namenode上(也就是主节点上:node4上),上传安装文件到(可以根据自己的环境,目录可以自定义)/opt/software/apache-hive-2.1.0-bin.tar.gz。并执行命令"source /etc/profile"使配置的环境变量生效。原创 2022-10-20 14:47:25 · 582 阅读 · 0 评论 -
CAP理论
数据一致性( C:Consistency )、服务可用性( A:Availability )、分区容错性( P:Partition-tolerance )一致性( C )CAP 理论中的一致性是指强一致性( Strong Consistency ),又叫线性一致性( Linearizable Consistency ),它要求多节点组成的分布式系统,能像单节点一样运作,如果一个写操作返回成功,那么之后的读请求都必须读到这个新数据;如果返回失败,那么所有的读操作都不能读到这个数据。原创 2022-10-09 09:56:27 · 379 阅读 · 0 评论