spark向mysql中写数据,报错不能连接mysql 将$SPARK_HOME/jars/目录下mysql-connector-java-5.1.27.jar删除,经检查,mysql数据库是8.0.12版本,而项目使用的驱动包是5.1.27版本。修改pom文件中mysql驱动版本。猜想可能是驱动包版本不兼容所致。打包执行,仍报之前的错误。
spark yarn模式安装教程 1)Spark查看当前Spark-shell运行任务情况端口号:40402)Spark Master内部通信服务端口号:7077 (类比于Hadoop的8020(9000)端口)3)Spark Standalone模式Master Web端口号:8080(类比于Hadoop YARN任务运行情况查看端口号:8088)4)Spark历史服务器端口号:18080 (类比于Hadoop历史服务器端口号:19888)