GeoSpark处理SHP文件并转存到MYSQL

最新推荐文章于 2024-08-15 09:14:21 发布

深夜奶爸

最新推荐文章于 2024-08-15 09:14:21 发布

阅读量771

点赞数

分类专栏： GeoMesa

本文链接：https://blog.csdn.net/u012453032/article/details/100521806

版权

GeoMesa 专栏收录该内容

25 篇文章 74 订阅 ¥9.90 ¥99.00

订阅专栏

超级会员免费看

本文介绍了在处理GIS数据时，如何利用GeoSpark对SHP文件进行操作，并将结果存储到MYSQL数据库中。在实际操作中，遇到了jar包不匹配和找不到特定函数的问题，通过查阅官方Maven依赖解决了问题。

摘要由CSDN通过智能技术生成

最近看关于ELT相关的东西，因为我们前面已经设计了数仓，是面向Gis的数仓设计，所有需要对一些Gis行业相关的数据提供一定的Spark处理能力，小数据量就基于docker进行处理，大数据量docker的处理规模和效率就满足不了,所有就先用GeoSpark处理了下数据
刚开始代码的坑主要在jar包不匹配，找不见某些函数
最后查了下官网的maven依赖关系，
pom.xml 内容

 <dependency>
      <groupId>org.datasyslab</groupId>
      <artifactId>geospark</artifactId>
      <version>1.2.0</version>
    </dependency>

    <dependency>
      <groupId>org.datasyslab</groupId>
      <artifactId>geospark-viz_2.3</artifactId>
      <version>1.2.0</version>
    </dependency>
    <dependency>
      <groupId>mysql</groupId>
      <artifactId>mysql-connector-java</artifactId>

了解本专栏