- 博客(4)
- 收藏
- 关注
RSS订阅原创 hadoop平台建设的一个大坑
千万不要往主机名里加特殊符号！千万不要往主机名里加特殊符号！千万不要往主机名里加特殊符号！我就往主机名里添加了一个下划线，结果namenode起不来，spark-sql报错，各种奇奇怪怪的问题。包括但不限于：1.报错：Invalid Spark URL: spark://HeartbeatReceiver2.报错：Stopping a MetricsSystem that is not running3.报错：Error initializing SparkContext4.
2022-05-18 11:21:03
357
原创 linux集群ssh免密传输配置
ssh免密配置的理解，在不知道开机密码的情况下配置免密，以及报错ssh_exchange_identification:read:Connectionresetbypeer的解决。
2022-05-13 15:37:49
909
原创 解决sqoop从mysql库导入到hadoop个别数据错位的问题（非分隔符原因导致）
解决了个别数据并非分隔符引起的错位问题，简单介绍了sqoop的三种用法。
2022-05-11 16:23:33
1283
原创 解决虚拟机cenos7更换ip后无法联网问题
在搭建hadoop时因为一些原因对三个虚拟机进行了备份并重新加载，结果出现了各节点ip改变的情况，如果重新修改hadoop的配置文件非常麻烦，而且即便修改完配置文件也还要重新设置ssh免验证登录，并且非常有可能出现数据块丢失等意想不到的错误，因此修改节点ip是最为方便安全的方式。 之前搜索了很多教程，受益良多，这里补充一些细节，希望能帮助和我一样没能解决问题的小白。1.修改路径cd /etc/sysconfig/network-scripts下的文件ifcfg-ens33...
2022-05-09 13:59:12
2513
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人