自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(5)
  • 收藏
  • 关注

原创 keepalived监控脚本执行失败的问题

解决keepalived监控脚本没有正常执行

2022-11-21 17:09:15 2883

原创 Spark 处理中文字符乱码问题

今天使用Spark将处理文本数据并写入mysql中时出现了中文字符是乱码的问题。刚开始,所有的中文字符都是**??**,查了很多的文档之后,将mysql的默认字符集修改为utf-8,但是中文仍然是乱码。插入mysql时,连非中文字段也收到了影响:最后的解决方法是:在提交spark任务时,添加命令行参数:–conf spark.executor.extraJavaOptions="-Dfile.encoding=UTF-8 -Dsun.jnu.encoding=UTF-8"数据库显示正常:

2020-06-10 01:06:33 3356

原创 hadoop2.7.7集群配置

hadoop版本:2.7.7配置进入hadoop-2.7.7/etc/hadoop文件夹修改hadoop-env.sh文件、core-site.xml文件、hdfs-site.xml文件、mapred-site.xml文件(原本是一个临时文件需要复制一份)、yarn-site.xml文件// hadoop-env.sh//修改jdk的位置和pid文件的位置export JAVA_HOME...

2020-03-19 01:45:02 881

原创 kafka2.4.0集群配置

kafka版本:2.4.0 scala版本:2.12配置​ 添加环境变量,每台服务器都需修改# vi /etc/profile​ 修改配置文件,每台服务器都需修改# vi /usr/local/kafka_2.12-2.4.0/config/server.properties// 修改下方配置// 1 节点值broker.id=1 // 不同机器取值不同,cluster1是...

2020-03-09 23:50:36 690 1

原创 zookeeper3.5.7集群安装

Zookeeper配置zookeeper版本:3.5.7注意下载后缀名带有bin的版本配置zookeeper的环境# vi /etc/profile​ 添加环境变量,每台服务器都需要​ 在apache-zookeeper-3.5.7/conf中新建zoo.cfg文件,输入一下有效配置内容。​ 创建zookeeper的数据存储目录和日志存储目录,并修改文件夹的权限,每台机器都需要...

2020-03-09 21:40:08 892

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除