- 博客(15)
- 收藏
- 关注
RSS订阅原创 hadoop格式化失败-拒绝连接
以上就是今天要讲的内容，本文仅仅简单介绍了格式化失败-拒绝连接的原因及解决办法，本文搭建的是hadoop的高可用集群经常会遇到的问题。Hadoop的高可用性：Hadoop的NameNode包括active和standby两种状态，通过故障转移机制（即当active NameNode意外终止时，快速启动stantby NameNode）可保证HDFS的高可用性。
2024-05-05 19:12:30
1386
4
原创 C语言基础
计算机的本质是“程序的机器”，程序和指令的思想是计算机系统中最基本的概念。程序设计是软件开发人员的基本功。进行程序设计，必须用一种计算机语言作为工具，否则只是纸上谈兵。可供选择的语言很多，各有特点和应用领域。
2023-09-14 18:48:39
221
1
原创 spark的安装与部署
为了避免MapReduce框架中多次读写磁盘带来的消耗，以及更充分地利用内存，加州大学伯克利分校的AMP Lab提出了一种新的、开源的、类Hadoop MapReduce的内存编程模型Spark。一、spark是什么？Spark是一个基于内存的大数据并行处理框架，其最初由加州大学伯克利分校的AMP Lab研发，现已成为Apache软件基金会的顶级项目之一。Spark不仅提供了可扩展、高容错、高性能的分布式数据处理，还提供了内存级的数据处理。
2023-06-28 21:12:29
11527
3
原创 spark编写WordCount
1.在hdfs的/user/spark/in/目录下建一个in.txt文件。2.在spark-shell中编写WordCount代码和运行。3>文件创建成功之后，将本地的in.txt文件上传至hdfs中。(2).在根目录创建in.txt文件并将其传到hdfs中。(1).我们需要现在hdfs中创建文件所需目录。4> 在hdfs中查看是否已经存在。2>通过pwd查看本地文件所在路径。在hdfs创建in.txt文件。2>也可通过命令创建多级目录。3>通过命令查看是否创建成功。1>首先创建txt文件。
2023-05-12 10:13:48
629
原创 hbase实战
完全分布式HBase 的完全分布式模式需要部署在多个节点 (即集群)上，且必须运行在一个合适的、可工作的 Hadoop 环境中完全分布式模式建立在 Hadoop 集群的基础上，而且依赖于 ZooKeeper 进行协作因此在安装 HBase 完全分布式模式之前,需要将 Hadoop 集群和 ZooKeeper 集群搭建好。
2023-04-01 14:19:12
640
原创 cenos7安装MySQL配置hive（上）
今天要讲的内容，本文仅仅简单介绍了mysql的安装与配置，下篇分析hive与MySQL的相关配置。
2023-03-27 17:31:08
264
2
原创 hive启动不成功原因
简单介绍了hive启动不成功原因，而Hive是一个基于Hadoop的数据仓库框架，它使用SQL语句读、写和管理大型分布式数据集。Hive可以将SQL语句转化为MapReduce (或Spark、 Tez) 任务执行，大大降低了Hadoop的使用门槛，减少了开发MapReduce程序的时间成本。
2023-03-10 17:53:21
9594
1
图书管理系统（图书录入和管理，借阅管理，图书管理）
2024-08-13
Java scripts
2023-01-07
用Python编程实现学生成绩管理，能按学期、按班级对学生成绩进行录入、修改、统计、查询和输出
2023-01-06
Hadoop大数据处理实战
2023-01-06
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人