自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(23)
  • 收藏
  • 关注

原创 dbeaver或者本地其他工具连接mysql8.0报错Connection refused: no further information

然后设置登录的账号为任意ip地址都可登录mysql。首先查看防火墙是否打开,如果打开关闭防火墙。修改/etc/my.cnf文件。

2024-07-21 11:23:28 107

原创 shell脚本里“select desc from table_a”如何避免无法识别字段desc,加飘号``报错

直接用\` 代替`

2024-05-21 17:12:01 409

原创 hive中文乱码

- jdbc连接的URL -->

2024-04-19 11:23:24 334

原创 服务器SSH经常过一会就断开连接解决办法

/客户端多少秒没有响应,服务器自动断掉连接。//客户端每隔多少秒向服务发送一个心跳数据。

2024-03-20 11:09:05 653

原创 mysql重启总是失败,或者安装时候总报错依赖检测失败: mysql-community-common(x86-64) >= 5.7.9 被 mysql-community-libs-5.7.28-

例如rpm -e -- nodeps mysqlxxx.xxxxxxxx。//卸载冲突的包,加一个--nodeps系统就会强转卸载。//卸载冲突的包,加一个--nodeps系统就会强转卸载。rpm -e --nodeps 接搜出来的包名。//首先查询一下mariadb是哪一个包。//首先查询一下mariadb是哪一个包。安装报错要卸载之前的mysql相关的包。

2023-12-21 16:22:47 496

原创 HBase的Hregioner总是启动后就挂掉

1)修改1(授权192.168.10.0-192.168.10.255网段上的所有机器可以从这台机器上查询和同步时间)为restrict 192.168.10.0 mask 255.255.255.0 nomodify notrap。3)添加3(当该节点丢失网络连接,依然可以采用本地时间作为时间服务器为集群中的其他节点提供时间同步)2)修改2(集群在局域网中,不使用其他互联网上的时间)增加内容如下(让硬件时间与系统时间一起同步)解决方案:查看集群时间是否同步。

2023-11-22 17:07:18 229

原创 hbase报错master is initializing

初始化以下zookeeper下的hbase节点就可以。然后重启hbase就可以。

2023-10-10 14:02:05 225

原创 sqoop导出数据到mysql报错: Application application_1687334079275_0015 submitted by user root to unknown queu

如果application指定了超时时间,则提交到该队列的application能够指定的最大超时时间不能超过该值。如果application没指定超时时间,则用default-application-lifetime作为默认值。哪些用户有权操作队列,管理员权限(查看/杀死)降低default队列资源最大容量为。用户最多可以使用队列多少资源,1表示。指定hive队列的资源额定容量。指定hive队列的资源最大容量。指定多队列,增加hive队列。(2)为新加队列添加必要属性。刷新队列,就可以看到两条队列。

2023-06-26 17:59:37 430

原创 hbase shell启动后输入list出现ERROR: KeeperErrorCode = NoNode for /hbase/master

重启zk和hbase就可以了。

2023-06-13 15:58:31 345

原创 HUE安装及集成mysql,hive,zookeeper,hbase

大数据可视化工具hue的安装及集成过程

2023-06-06 16:34:23 483

原创 hive shell中出现执行日志如何处理

需要在hive的安装目录下:/opt/module/hive-3.1.2/conf/ 创建log4j.properties日志的配置文件,然后写入以下信息就可以了:

2023-05-24 16:11:27 90

原创 hive on spark配置过程中报错

spark纯净版本和带hadoop依赖的jar包这里都必须是3.0.0。去hive-stie.xml中添加如下配置。去hive的lib目录下查看。还有原因可能是版本不匹配。

2023-05-23 11:53:14 634

原创 Linux的mysql忘记root用户密码方法

立即生效 Query OK, 0 rows affected (0.00 sec) mysql> quit Bye n>mysql -u ******* -p #以该用户登录成功. Enter password: ********1、用命令编辑/etc/my.cnf配置文件,即:vim /etc/my.cnf 或者 vi /etc/my.cnf 或者 nano /etc/my.cnf。1、重启以后,执行mysql命令进入mysql命令行。2、修改root用户密码。

2023-04-25 15:27:40 157

原创 spark yarn 模式提交和sqoop从mysql导入到hdfs,hive均报错exitCode:-1000

但千万注意格式化之前要清空data和logs文件下内容。最后试了一下重新格式化Namenode。然后去yarn界面查看历史。首先看下统一的报错内容。rm -rf 文件夹\。

2023-04-24 13:37:49 206

原创 azkaban端口号网页无法打开

并且输入ip地址,而不是主机名。将http换成https。类似以上形式即可访问。

2023-04-23 14:58:12 337

原创 hive安装完成无法启动,bin/hive报错Exception in thread “main“ java.lang.RuntimeException: java.net.ConnectExcept

报错完整内容:Exception in thread "main" java.lang.RuntimeException: java.net.ConnectException: Call From hadoop102/192.168.10.102 to hadoop102:8020 failed on connection exception: java.net.ConnectException: 拒绝连接;Caused by: java.net.ConnectException: 拒绝连接。

2023-04-23 10:23:39 1866

原创 ERROR: Attempting to operate on hdfs namenode as root ERROR: but there is no HDFS_NAMENODE_USER

然后向里面加入如下的内容。输入如下命令使改动生效。

2023-04-23 10:15:42 139

原创 错误:依赖检测失败:mysql-community-common(x86-64) = 5.7.28-1.el7 被 mysql-community-server-5.7.28-1.el7.x86_

然后再 sudo rpm -ivh mysql-community-server-5.7.28-1.el7.x86_64.rpm。hive安装过程中安装mysql时候,会出现依赖问题。如果报错如标题所示,只需要升级一下。

2023-04-21 18:14:32 831

原创 xsync编写完成后无法执行命令,或该命令不存在

需要将自己编写的/bin文件拷贝到系统目录的bin下。原因:开始是root用户下创建的目录和命令。

2023-04-20 17:32:47 1106

原创 hive无法插入数据,报Yarn资源不足

前面已经对yarn-site.xml文件进行修改参数,还是报错。

2023-04-19 17:46:24 203 1

原创 hue无法连接hive

需要检查bin目录下hiveserver2是否开启。

2023-04-19 14:53:56 274 1

原创 数仓之flume的时间拦截器为什么不和ETL拦截器合并

flume的拦截器在离线数仓和实时数仓的使用

2022-10-15 23:02:11 701

原创 Flink CEP编程

是一种基于动态环境中事件流的分析技术,事件在这里通常是有意义的状态变化,通过分析事件间的关系,利用过滤、关联、聚合等技术,根据事件间的时序关系和聚合关系制定检测规则,持续地从事件流中查询出符合要求的事件序列,最终分析得到更复杂的复合事件。

2022-09-12 23:42:06 600

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除