- 博客(123)
- 资源 (7)
- 收藏
- 关注
RSS订阅原创 Sqoop “hcatalog does not exist!” 提示信息消除方法
1）进文件夹2）编辑文件3）按一次电脑的esc键，输/HCAT_HOME搜出对应位置4）搜出来后，这一部分全部注释掉5）在每一行的最前面打一个井号6）按一次电脑的esc键，输/HCAT_HOME再继续搜一次7）在每一行的最前面打一个井号。
2024-03-07 12:28:20
750
原创 Sqoop1.4.7 Hadoop3 连接Mysql报错 : java.lang.NoClassDefFoundError: org/apache/commons/lang/StringUtils
Sqoop连Mysql报错：Exception in thread “main” java.lang.NoClassDefFoundError:org/apache/commons/lang/StringUtils找不到类，sqoop版本是1.4.7 而commons-lang3-3.4.jar版本是3.x解决版本问题即可，commons-lang版本改为2.xcommons-lang-2.6.jar
2024-03-07 12:02:27
397
原创 CentOS7 Sqoop 1.4.7 安装 (Hadoop 3.3.0)
找不到类，sqoop版本是1.4.7 而commons-lang3-3.4.jar版本是3.x。5）加入mysql的jdbc驱动包到sqoop的lib文件夹。解决版本问题即可，commons-lang版本改为2.x。2）按esc按钮后 :wq 保存并退出文件。4）看清楚自己的路径是啥，把以下加进去并更改。3）更改文件sqoop-env.sh。1）sqoop版本号查询。2）sqoop帮助查询。1）进去配置文件路径。
2024-03-07 11:55:36
1029
2
原创 Hive使用sql命令报错 FAILED: SemanticException org.apache.hadoop.hive.ql.metadata.HiveException
进mysql删除元数据数据库重新创建一下退出mysql
2024-02-29 10:40:36
2449
原创 CentOS7 Hive2.3.8安装
删空后加入以下内容，注意复制进去的时候不要少了>符号之类的小错误，此文件涉及到之前设置的密码Root123!,如果你不一样，记得改。复制备份hive-default.xml.template并命名为hive-site.xml。在文件最底下加，注意hadoop版本和java版本以及路径是否和我一样，不一样记得换。复制备份hive-env.sh.template并命名为hive-env.sh。然后会弹出下面这个内容在：后面手敲密码就好，输密码的时候看不见。加好了，查看一下，就有% hiveuser 的用户了。
2024-02-27 12:22:35
1946
原创 CentOS7 yum安装报错：“Could not resolve host: mirrorlist.centos.org； Unknown error“
CentOS7 yum安装出错
2023-09-14 13:45:20
2204
原创 安java的时候/usr/local/java/jdk1.8.0_144/bin/java: 无法执行二进制文件: 可执行文件
然后找jdk的对应版本。查看linux的版本。
2023-09-11 15:55:07
960
原创 Hive基础命令
红标为常用的数据类型；对于Hive的String类型相当于数据库的varchar类型，该类型是一个可变的字符串，不过它不能声明其中最多能存储多少个字符。文件/data/employee.txt代码加载数据至hive外转内内转外‘EXTERNAL’=‘TURE’和’EXTERNAL’='FALSE’只能大写文件/data/dept.txt创建表格加载数据
2023-02-27 16:34:16
438
原创 MySQL 数据库基础命令
充当公司需要维护的所有数据的容器。语法：实例：如果不存在db1数据库创建一个数据库名为db1运行之后刷新就可以看到数据库创建成功了语法：实例：使用刚创建的db1数据库USE db1;可以看到选择之后数据库名字那里变成了加粗字体。
2023-02-23 13:38:50
1935
3
原创 CentOS7 Hive2.3.9 安装部署（mysql 8.0)
mysql8.x密码必须符合它指定的规则：包含大写字母，小写字母，数字，特殊符号，密码太简单会报错。回车后会有 ,在后面输入查出来的临时密码即可,输密码的时候看不见。假如临时密码为wdert5yhfgncbxdfzser。#配置HADOOP_HOME路径，路径根据自己的修改。#执行创建metastore数据库的命令。#配置HIVE_CONF_DIR路径。#配置JAVA_HOME。#执行下边命令输入密码。
2023-02-20 13:43:10
836
原创 CentOS7 ifconfig命令不显示IP地址或者只显示127.0.0.1
编辑ifcfg-ens33 或者叫 eno16777736,自己 ls 查一下看看是啥。进入/etc/sysconfig/network-scripts/修改文件中的ONBOOT=no 将no改为yes,保存退出。
2022-09-21 14:22:24
1762
原创 Hbase使用shell命令报错大集锦： | Master is initializing | Server is not running yet | NoNode for /hbase/master
1、PleaseHoldException: Master is initializing 解决办法2、Server is not running yet3、ERROR: KeeperErrorCode = NoNode for /hbase/master4、NameError: uninitialized constant VERSION
2022-09-20 15:37:06
5022
原创 Hbase三大组件 -- Region Server、HMaster、Zookeeper 介绍
1）实时查询，可以认为是从内存中查询，一般响应时间在1秒内。HBase的机制是数据先写入到内存中，当数据量达到一定的量（如128M），再写入磁盘中， 在内存中，是不进行数据的更新或合并操作的，只增加数据，这使得用户的写操作只要进入内存中就可以立即返回，保证了HBase I/O的高性能。1） 在HBase中Hmaster负责监控RegionServer的生命周期，均衡RegionServer的负载，如果Hmaster挂掉了，那么整个HBase集群将陷入不健康的状态，并且此时的工作状态并不会维持太久。
2022-09-15 20:02:06
5524
5
原创 Hbase命令行语句
语法：desc ‘表格名’语法：create ‘表格名’，‘列族名1’，‘列族名2’，‘列族名n’语法：disable ‘表格名’语法：enable ‘表格名’语法：scan ‘表格名’语法：id_disabled ‘表格名’语法：disable_all ‘条件’语法：enable_all ‘条件’语法：put ‘表格名’，‘行键’，‘列族名：列名’，‘值’语法：get ‘表格名’，‘条件1’，‘条件2’
2022-09-15 17:28:02
5913
原创 Hbase简介
1、HBase是建立在Hadoop文件系统之上的面向列的分布式数据库。2、这是一个开源项目。3、它是水平可伸缩的。4、HBase是一种数据模型，类似于Google的大表，旨在提供对大量结构化数据的快速随机访问。5、这是非关系型的数据库。无事务，无外键，等关系型数据库的功能6、它是分布式数据库。7、稀疏矩阵。8、约束少1、行：每个HBase表都由若干行组成，每个行由行键（row key）来标识。2、行键：可使Hbase自动排列。
2022-09-06 15:29:09
883
原创 大数据、Hadoop、Hbase介绍
数据（data）是事实或观察的结果，是对客观事物的逻辑归纳，是用于表示客观事物的未经加工的的原始素材。可以是符号、文字、数字、语音、图像、视频等Hadoop的框架最核心的设计就是:HDFS和MapReduce。HDFS为海量的数据提供了存储，则MapReduce为海量的数据提供了计算。HDFS：分布式文件系统，用于存储数据MapReduce：用于处理数据Yarn：用于资源管理•HBase是建立在Hadoop文件系统之上的面向列的分布式数据库。•这是一个开源项目。•它是水平可伸缩的。
2022-09-06 15:20:50
2452
7
Java第三期天猫电影售票系统Springboot
2022-06-28
Java第二期轻语音乐系统 Springboot
2022-06-28
Java第一期毕业设计--Springboot化妆品商城
2022-06-28
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人