hadoop
文章平均质量分 64
LHH201016
这个作者很懒,什么都没留下…
展开
-
HDFS文件系统与普通分布式文件系统的差别
原创 2021-09-13 13:50:22 · 1264 阅读 · 0 评论 -
hdfs复习
hdfs 分布式文件系统 mapreduce 大数据离线数据处理框架 yarn 统一资源管理和调度平台 hive 数据分析 sqoop 数据导入导出 hbase 大数据存储 非关系型数据库 flume 日志采集系统 spark 实时流式数据处理框架 hdfs 架构原理 配置 使用 1.分布式文件系统和普通文件系统 2.hdfs中的几个组件,都有什么作用 namenode:存储文件的元数据,接收来自客户端的读写请求 datanode:存储文件数据 secondarynameno...原创 2021-08-08 11:40:14 · 154 阅读 · 0 评论 -
hbase shell操作
创建表和列族 Create ‘user’,’base_info’,’extal_info’ 列出所有表 List 显示表的详细信息 Describe ‘user’ 修改表,禁用表,启用表 添加列族 alter ‘user’,‘info1’ Alter ‘user’,{NAME=>’extal_info’,method=>’delete’} Alter ‘user’,‘info3‘ ...原创 2021-07-15 08:46:23 · 180 阅读 · 0 评论 -
Hadoop的配置
1. 配置主机名 /etc/sysconfig/network hostname=master master是主节点的意思 需要重启虚拟机才能生效 2. 配置主机名和ip地址的映射 先确保静态ip配置好了,在主机可以ping虚拟机,在虚拟机可以ping通主机 eth0 的网卡设置为 仅主机模式 /etc/hosts 192.168.56.2 master 3.ssh 先确保自己电脑上安装了ssh rpm -qa | grep ssh 安装过ssh 可以直接启动服务 s...原创 2021-07-10 08:05:16 · 197 阅读 · 0 评论