sparkStreaming(scala链接mysql分析)
例子是我初尝 spark 的sparkStreaming官方小例子修改的。我的思路是使用jdbc 链接数据库,然后查询数据库,将查询结果生成一个RDD ,放入RDD queue,然后每次取出rdd 进行计算和过滤处理。1.sparkStreamingDemo2.scala 链接mysql 数据库sparkStreamingDemo由于这个demo需要spark 和jdbc 的依赖包。在pom.xm...
转载
2018-02-09 14:25:45 ·
493 阅读 ·
0 评论