- 博客(2)
- 收藏
- 关注
原创 Spark读取Mysql数据 JdbcRDD方式
咱们先来看下他的源码 主要看下它的参数:下面是对参数的解释:sc: SparkContext, // 这个是上下文的环境对象getConnection: () => Connection, //这里是个无参函数 返回Connectionsql: String, // 这个是自己写的sqllowerBound: Long, // 指的是数据的范围 数据上限upperBound: ...
2020-02-25 15:10:42
489
原创 **hive 执行job mr程序 没反应解决**
hive 执行job mr程序 没反应解决不执行mr 的 都很正常但是 执行job时一直卡在那地方等了好久出现了异常看了好久原来是yarn 配置的问题yarn-site.xml 忘记配置resourcemanager的节点 yarn.resourcemanager.hostname master加进去好了![在这里插入图片描述](https://img-b...
2019-07-13 20:31:40
658
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人