- 博客(4)
- 收藏
- 关注
RSS订阅原创 hive on spark hql 插入数据报错 Failed to create Spark client for Spark session
本文记录了Hive on Spark模式下SQL插入数据失败问题的排查过程。遇到Failed to create Spark client;错误后，作者先后尝试了修改YARN配置、切换MR引擎、调整调度算法、修复主机名解析等措施。最终发现问题的根源在于环境变量未被Hive继承，通过在Hive启动脚本中添加Hadoop和YARN配置路径解决。整个过程涉及多个组件配置调整，展示了分布式环境问题排查的复杂性。文章详细记录了每个排查步骤和解决方案，为遇到类似问题的开发者提供了参考路径。
2025-11-09 22:05:00
2036
原创 数据采集环境搭建
本文详细记录了Hadoop集群环境搭建的全过程，包括以下核心内容： 基础环境配置 主机名修改与SSH免密登录配置 自定义分发脚本xsync实现多节点文件同步 JDK环境安装与配置 核心组件部署 Hadoop集群搭建与配置（HDFS/YARN） Zookeeper集群安装与问题排查（含JAVA_HOME设置问题解决方案） Kafka集群部署与启动脚本开发 日志采集系统 模拟日志生成工具配置 Flume日志采集服务搭建 Kafka与Flume集成测试 关键问题解决 多节点用户名不一致的兼容处理方案 SSH远程执
2025-10-21 17:24:37
850
原创 Linux系统内docker部署的nginx,转发ruoyi前端时500报错，系统接口404异常解决
文章的最后一句去试了一下，把我打包好的前端文件复制了一份到nginx/html文件里，这是改正后的location部分代码（正确版）（本人就是忘记开端口了）然后再把nginx.conf文件里的location改成我前面说的正确版就不会报500的错误了！现在访问不会报500了，但是...出现了系统接口404异常？然后去修改对应的nginx.conf文件，location部分内容是这样的（错误示范）然后就是死活找不到我的html文件，一直显示500的报错。为了防止像我一样的小白看不懂，下面是我移动文件的详解。
2025-04-26 21:04:10
853
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人