11
文章平均质量分 91
Argonaut_
Never Settle
展开
-
Linux基本搭建和操作
root用户生成密钥路径为/root/.ssh下面会有id_rsa.pub公钥和id_rsa私钥,.ssh是一个隐藏目录。☀️利用FinalShell创建三个SSH连接:ied01、ied02和ied03。ied01免密登录ied01、ied02和ied03生成秘钥对。创建名为test.sh的shell文件到home目录下。将lzy目录打包压缩成gz格式,要求显示压缩详情。使用openstack创建这三台实例虚拟机。将enforcing改为disabled。将打包文件解压到当前目录查看。原创 2022-12-19 17:01:06 · 855 阅读 · 0 评论 -
初探MapReduce
提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档文章目录MapReduce核心思想MapReduce编程模型MapReduce编程实例——词频统计思路1、Map阶段(映射阶段)2、Reduce阶段(归并阶段)MapReduce编程实例——词频统计实现(1)在虚拟机上创建文本文件(2)上传文件到HDFS指定目录创建Maven项目添加相关依赖创建日志属性文件创建词频统计映射器类Java数据类型与Hadoop数据类型对应关系创建词频统计驱动器类运行词频统计驱动器类,查看结果修改词频统计映射器原创 2022-12-18 20:08:53 · 1236 阅读 · 0 评论 -
HBase API
3.1 环境准备3.2 创建连接3.2.1 单线程创建连接3.2.2 多线程创建连接3.3 DDL3.3.1 创建命名空间3.3.2 判断表格是否存在3.3.3 创建表3.3.4 修改表3.3.5 删除表3.4 DML3.4.1 插入数据3.4.2 读取数据3.4.3 扫描数据3.4.4 带过滤扫描3.4.5 删除数据原创 2022-12-18 17:16:45 · 357 阅读 · 0 评论 -
一篇文章带你了解HBase、Zookeeper的安装部署
2.1 HBase 安装部署2.1.1 Zookeeper 正常部署2.1.2 Hadoop 正常部署2.1.3 HBase 的解压2.1.4 HBase 的配置文件2.1.5 HBase 远程发送到其他集群2.1.6 HBase 服务的启动2.1.7 查看 HBase 页面2.1.8 高可用(可选)2.2 HBase Shell 操作2.2.1 基本操作2.2.2 namespace2.2.3 DDL2.2.4 DML原创 2022-12-18 14:32:58 · 811 阅读 · 0 评论 -
HBase的定义、模型、结构解析
HBase 的设计理念依据 Google 的 BigTable 论文,论文中对于数据模型的首句介绍。Bigtable 是一个稀疏的、分布式的、持久的多维排序 map。之后对于映射的解释如下:该映射由行键、列键和时间戳索引;映射中的每个值都是一个未解释的字节数组。最终 HBase 关于数据模型和 BigTable 的对应关系如下:HBase 使用与 Bigtable 非常相似的数据模型。用户将数据行存储在带标签的表中。数据行具有可排序的键和任意数量的列。该表存储稀疏,因此如果用户喜欢,同一表中的行原创 2022-12-18 09:01:26 · 154 阅读 · 0 评论 -
使用Java API操作HDFS
由于Hadoop是使用Java语言编写的,因此可以使用Java API操作Hadoop文件系统。HDFS Shell本质上就是对Java API的应用,通过编程的形式操作HDFS,其核心是使用HDFS提供的Java API构造一个访问客户端对象,然后通过客户端对象对HDFS上的文件进行操作(增、删、改、查)原创 2022-12-14 17:19:28 · 482 阅读 · 0 评论 -
HDFS的Shell操作
Shell在计算机科学中俗称“壳”,是提供给使用者使用界面的进行与系统交互的软件,通过接收用户输入的命令执行相应的操作,Shell分为图形界面Shell和命令行式Shell。文件系统(FS)Shell包含了各种的类Shell的命令,可以直接与Hadoop分布式文件系统以及其他文件系统进行交互原创 2022-12-14 11:58:36 · 799 阅读 · 0 评论 -
大数据:Hadoop集群测试
针对通过UI界面查看Hadoop集群运行状态和Hadoop集群初体验进行详细讲解原创 2022-12-14 10:57:08 · 277 阅读 · 0 评论 -
Hadoop集群配置
针对Hadoop集群的配置、文件系统的格式化以及Hadoop集群的启动和关闭进行详细讲解原创 2022-12-14 09:25:28 · 2387 阅读 · 0 评论 -
服务器的基本概念与初识Ajax
☀️Ajax 的全称是 Asynchronous Javascript And XML(异步 JavaScript 和 XML)。通俗的理解:在网页中利用 XMLHttpRequest 对象和服务器进行数据交互的方式,就是Ajax。原创 2022-11-15 09:21:30 · 871 阅读 · 0 评论