- 博客(6)
- 收藏
- 关注
原创 2021-10-15
ERROR spark.SparkContext: Error initializing SparkContextjava.net.BindException: Cannot assign requested address: Service 'sparkDriver' failed after 16 retries (on a random free port)! Consider explicitly setting the appropriate binding address for the s
2021-10-15 15:01:25 445
原创 [ERROR] [MY-011300] [Server] Plugin mysqlx reported: ‘Setup of socket: ‘/var/lib/mysql/mysqlx.sock‘
(1)查看/etc/my.cnf,显示sock配置路径socket=/usr/share/mysql/sock/mysql.sock(2)ls -l /usr/share/mysql/sock/mysqlx.sock能查看到mysqlx.sockls -l /var/lib/mysql/mysqlx.sock不能查看到mysqlx.sock解决办法第一步 创建链接sudo ln -s/usr/share/mysql/sock/mysql.sock/var/lib/mysql/my..
2021-09-14 13:04:34 2494
翻译 并行分布计算中的异构性
异构性是当今并行和分布式计算系统中最深刻和最具挑战性的特点之一。从宏观层面,在网络的分布式计算机,由不同的节点架构,与潜在的异构网络的互连,到微观层面,在更深的层次存储结构,异构多核,和各种加速器架构越来越普遍,非均匀性对所有计算任务的影响迅速增加。本文主要介绍了HCW2012特刊中关于并行分布式计算的论文摘要。
2017-08-05 16:21:30 2230
原创 Spark2.1集群环境搭建小结(2)
4 Standalone模式部署(1)在主机的$SPARK_HOME/conf目录下创建一下名为salves的文件。该文件需要包含所有将要启动Spark Workers机器的hostname,每行一个hostname:vim slavesnode01node02node03...(2)配置主机及Spark Workers机器的/etc/hostname,修改主机名;
2017-04-05 19:40:39 433
原创 Spark2.1集群环境搭建小结(1)
操作系统Ubuntu 用户root1 打开Terminal,使用 java -version检查是否安装,若未安装,使用sudo apt-get install default-jre 安装OpenJDK;或使用sudo apt-getinstall oracle-java8-installersudo apt-getinstall oracle-java8-set-def
2017-03-31 08:26:53 383
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人