- 博客(23)
- 收藏
- 关注
RSS订阅原创 MySQL安装
D:\mysql\mysql-8.0.23-winx64添加my.ini文件：[mysql]# 设置mysql客户端默认字符集default-character-set=utf8mb4[mysqld]#设置3306端口port = 3306# 设置mysql的安装目录basedir="D:\mysql\mysql-8.0.23-winx64"# 设置mysql数据库的数据的存放目录datadir="D:\mysql\mysql-8.0.23-winx64\data"# 允许最大连接数
2021-07-19 14:55:03
76
原创 spark 配置
cd confcp spark-env.sh.template spark-env.shcp slaves.template slavesspark-env.shexport JAVA_HOME=/usr/local/javaexport SCALA_HOME=/data1/soft/scala-2.11.8export HADOOP_HOME=/data1/soft/hadoop-3...
2019-06-14 17:40:40
119
原创 process information unavailable
[root@datanode2 tmp]# cd hsperfdata_hadoop/[root@datanode2 hsperfdata_hadoop]# jps63252 -- process information unavailable62245 -- process information unavailable62838 -- process information unava...
2019-06-14 11:48:48
527
原创 spark任务提交 报错
Exception in thread "main" java.lang.IllegalArgumentException: Required executor memory (8192+819 MB) is above the max threshold (8192 MB) of this cluster! Please check the values of 'yarn.scheduler.m...
2019-05-20 15:52:14
2099
原创 spark 连接 kafka 遇到的问题
java.lang.NoClassDefFoundError: kafka/api/TopicMetadataRequest at org.apache.spark.streaming.kafka.KafkaCluster.getPartitionMetadata(KafkaCluster.scala:130) at org.apache.spark.streami...
2019-05-10 16:44:59
874
原创 mysql问题解决
[root@datanode6 mysql]# cd /var/run/[root@datanode6 mysql]# mkdir mysql[root@datanode6 mysql]# chmod 777 mysql/[root@datanode6 run]# /etc/init.d/mysqld start[root@datanode6 run]# mysql -u root -p ...
2019-05-07 19:03:14
121
原创 ssh root登陆问题
[root@datanode6 .ssh]# ssh datanode6Permission denied (publickey).[root@datanode6 ssh]# lltotal 612-rw-r–r-- 1 root root 581843 Apr 11 2018 moduli-rw-r–r-- 1 root root 0 Apr 17 16:3...
2019-04-24 17:01:18
393
原创 jps命令Command not found
[root@centos bin]# pwd/usr/binrm -rf javaln -s /usr/java/jdk1.8.0_201/bin/java /usr/bin/javasource /etc/profile
2019-04-22 18:11:21
208
原创 linux hadoop完全分布式集群安装
下载地址：http://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/hadoop-2.8.5/hadoop-2.8.5.tar.gz快速清理残留进程rm -rf /tmp/hsperfdata_*
2019-03-04 16:41:33
151
原创 linux scala 安装
下载地址：https://www.scala-lang.org/download/2.10.4.html放到想放的文件夹下tar -zxvf scala-2.10.4.gzvi /etc/profileexport SCALAHOME=/opt/soft/scala−2.10.4exportPATH=SCALA_HOME=/opt/soft/scala-2.10.4export PAT...
2019-02-28 12:13:57
611
原创 Linux anaconda 安装
下载anaconda linux 版本bash Anaconda3-2018.12-Linux-x86_64.sh然后一路 enter 和 yes修改 .bashrcexport PATH=/home/anaconda3/bin:$PATHsource .bashrcpython --version
2019-02-25 18:43:46
252
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人