![](https://img-blog.csdnimg.cn/20190918135101160.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
自定义数据迁移工具类
本专栏主要发布一些数据迁移的代码的Demo
绝域时空
这个作者很懒,什么都没留下…
展开
-
Python操作MongoDB
最近,我在做算法标签系统,打算用MongoDB进行数据数据存储。首先,用进行MongoDB的安装包安装。原创 2022-11-07 23:11:55 · 616 阅读 · 1 评论 -
Java连接ClickHouse实现数据库基本增删查
引言ClickHose作为一个新的列式数据库,其在实时数仓中作为结果存储的数据库。对于Java程序员来说,我们需要对于ClickHouse进行数据的增删查改,进而支持后续的处理业务。我使用面向对象的思想,实现Java操作ClickHouse的增删改,希望对于学习和使用ClickHouse的你有些帮助。一、依赖导入<dependency> <groupId>ru.yandex.clickhouse</groupId> <artifactId>click原创 2022-05-01 17:14:15 · 14012 阅读 · 9 评论 -
java操作Elastic Search实现数据的处理
一、依赖导入在操作Elastic Search首先需要导入依赖<dependencies> <dependency> <groupId>org.elasticsearch</groupId> <artifactId>elasticsearch</artifactId> <version>7.8.0</version> </dependenc原创 2022-04-20 22:41:06 · 1329 阅读 · 0 评论 -
java连接kafka实现生产者消费者功能
一、功能描述利用Java连接Kafka,通过API实现生产者和消费者,对于Kafka生产或者消费数据。将日志信息进行输出。二、依赖导入首先,创建一个简单的maven的工程并将依赖导入<dependency> <groupId>org.apache.kafka</groupId> <artifactId>kafka-clients</artifactId> <version>${kafka.version}</vers原创 2022-03-27 23:11:17 · 3377 阅读 · 0 评论 -
Java实现kudu的增删查改
文章目录1、依赖导入2、创建kudu表3、删除kudu表4、插入数据到kudu5、查询kudu数据6、修改kudu表数据7、删除kudu中指定行的数据1、依赖导入<dependency> <groupId>org.apache.kudu</groupId> <artifactId>kudu-client</artifactId> <version>1.6.0</version></dependency原创 2022-03-02 16:52:32 · 418 阅读 · 1 评论 -
利用Java的API实现HBase数据库的增删查改
文章目录一、功能描述二、依赖导入三、配置信息3.1log4j的配置3.2连接配置四、Configuration五、Common六、Java操作HBase集群一、功能描述本功能组件主要通过Java的API实现HBase的操作。利用log4j进行数据迁移过程的记录,采取批处理的方式实现数据迁移的过程。技术实现利用Java的API连接HBase数据库利用log4j将执行信息进行输出,并捕获异常二、依赖导入首先,在Maven工程中的pom.xml的<dependencies></原创 2022-02-27 14:33:23 · 1257 阅读 · 0 评论 -
利用Java实现HDFS文件上传下载
文章目录利用Java实现HDFS文件上传下载1、pom.xml配置2、创建与删除3、文件上传4、文件下载利用Java实现HDFS文件上传下载1、pom.xml配置<!--配置--><properties> <project.build.sourceEncoding>UTF-8</project.build.sourceEncoding> <maven.compiler.source>1.8</maven.compiler.sour原创 2022-02-05 11:03:26 · 3074 阅读 · 0 评论 -
利用Java API实现Kafka的生产者消费者
一、功能描述利用Java连接Kafka,通过API实现生产者和消费者,对于Kafka生产或者消费数据。将日志信息进行输出。二、依赖导入首先,创建一个简单的maven的工程并将依赖导入<dependency> <groupId>org.apache.kafka</groupId> <artifactId>kafka-clients</artifactId> <version>${kafka.version}</vers原创 2022-02-23 12:25:36 · 1428 阅读 · 1 评论 -
自定义工具类之自制MySQL数据库连接工具(一)
一、插件实现功能情况本工具类已经实现MySQL数据的连接和数据库的关闭,并通过线程池进行数据限制。二、文件组织结构下图为本工具类的文件预览图三、maven配置文件pom.xml下面是本工程文件的依赖库文件 <dependencies> <!-- https://mvnrepository.com/artifact/com.alibaba/fastjson --> <dependency> <groupId>com.a原创 2021-12-05 15:21:06 · 818 阅读 · 0 评论