- 博客(14)
- 收藏
- 关注
原创 在使用jupyter notebook进行编辑时终端出现Bad file descriptor的问题
版权协议,转载请附上原文出处链接和本声明。版权声明:本文为博主原创文章,遵循。
2024-09-12 11:24:38 162
原创 使用IDEA编写HTML页面,更改js或css后页面无变化
当我们在使用IDEA进行前端页面开发时,经常会遇到需要修改前端页面的情况,但是在修改了与页面绑定的js或css文件后,刷新页面发现页面并没有变化。
2024-07-04 01:49:42 564
原创 解决datax-web任务执行时脏数据的问题
在使用DataX或者DataX-Web进行数据同步时,经常会遇到传输过程中日志显示传输遇到脏数据,脏数据限制为0条的问题。
2024-07-04 01:42:30 782
原创 DataX-Web连接Hive数据库不成功
问题1:使用DataX-Web时点击数据源管理功能时一直加载并报错,等待很长时间也无法加载完毕。问题2:连接Hive数据库时连接不成功。
2024-07-04 01:36:11 339 1
原创 使用Spark将表从HDFS中读取后上传到Hive后,在Hive中查询表后报错
从HDFS中读取的表的属性名中包含空格,这在Hive中是非法的,所以需要将字段名中空格替换为其他合法字符。
2024-07-04 01:16:27 148
原创 Hadoop HA部署过程中出现主备namenode或datanode挂掉的问题
在部署Hadoop HA的过程时,当进行到hdfs namenode -format格式化这一步骤时显示查阅多篇文章分析可知其原因是节点之间无法通信,所以无法建立连接。
2024-01-03 23:23:14 1907 1
原创 使用Sqoop进行数据迁移时报错:Export job failed!
报错格式:对比命令再对比我上传至hdfs中的文件data.txt中的内容,发现其中的逗号为中文状态下,改为英文状态再重新进行数据迁移即可。
2024-01-03 22:50:19 654 1
原创 Hive查看表结构时发现中文注释变为乱码
在使用comment语法创建中文注释后,使用desc查看表结构时,发现中文的注释竟然变成了乱码。查阅多篇文章后得知是因为hive的元数据存放在MySQL中,切换到MySQL中分别输入。
2024-01-03 22:36:44 402
原创 创建Hive表时无法使用comment语法输入中文
在刚开始使用comment语法后,我习惯先把单引号 '' 打全之后再输入中文注释,然而在输入时却发现输入的内容要么变成 ... 要么就是输入的内容将单引号替代掉,最后发现必须要先打出一个单引号,再输入中文注释,再把最后一个引号补全才能输入。
2024-01-03 22:32:25 396
原创 创建Hive表时发生NoViableAltException(309@[])错误
在进行Hive表操作过程中要避免使用关键字如。查找原因发现是表名使用了关键字。
2024-01-03 22:05:12 920
原创 使用MapReduce进行数据准备时发生数据缺失解决方法
使用IDEA编写Mapreduce代码将HDFS中的数据读取并处理再上传至HDFS。
2024-01-03 21:56:39 914 1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人