Java
java
神芷迦蓝寺
神芷迦蓝寺,江楼月美人
展开
-
canal实战(三)|canal数据消费到kafka
## 本文章改编于阿里开源工具Canal,原版网址https://github.com/alibaba/canalcanal第一辑canal的配置安装与服务启动 canal第二辑canal java客户端canal的原理我们在第一辑里已经介绍,现在我们需要把canal采集到的日志数据消费到kafka,并通过kafka把数据进行进一步入库,上云等消费操作。首先我们把Kafka进行安装配置,涉及到的有zookeeper,kafka,有的服务器还要装java环境等,kafka的安装我之前有讲...原创 2020-11-20 18:40:07 · 2118 阅读 · 0 评论 -
canal实战(二)|canal java客户端
## 本文章改编于阿里开源工具Canal,原版网址https://github.com/alibaba/canal在前面canal搭建并启动后(传送站),我们就可以开始进行第二步canal java客户端建立maven工程,maven工程创建如有不会的童鞋可参考传送站pom.xml依赖添加<dependency> <groupId>com.alibaba.otter</groupId> <artifactId>canal....原创 2020-11-20 17:18:21 · 2052 阅读 · 0 评论 -
DataX运行时报错:jdbc4.MySQLNonTransientConnectionException:Could not create database server
出现这个问题我是一脸懵逼的,因为datax作为一个牛逼的ETL工具使用了好几年,第一次碰见这样的问题,简单讲一下我的处理过程第一感觉是源MySQL数据库的问题,因为之前也遇到过这个问题,是too many connections连接数过多拒绝连接,解决办法是调大数据库连接数或者关闭其他连接或者直接重启就可以,于是下意识的也重启了MySQL,结果还是不行沉静下来冷静分析应该是java的问题,...原创 2020-05-05 15:41:47 · 1397 阅读 · 1 评论 -
Java实现kakfa数据消费并把数据导入到数据库
fighting for dream原创 2020-04-23 17:27:38 · 5255 阅读 · 7 评论 -
java移位符运算的讲解
我们都看过这样一个图片,讲码农,黑客和2B程序员的区别所以为什么1L<<32和2的32次方是相等的呢,在探讨之前我们先记住一个结论,等探讨完之后,我们会对结论更加的深刻理解num << n 等于 num * (2 ^ n)num >>n 等于 num /(2 ^ ...原创 2018-12-03 15:48:54 · 979 阅读 · 0 评论 -
Maven常用的一些日常笔记
Maven是什么?Maven译为"专家"、"内行",是 Apache 下的一个纯 Java 开发的开源项目管理工具,可以对 Java 项目进行构建、依赖管理。简而言之,我们使用了Maven,不仅仅可以对工程项目进行管理,打包等,还可以免下载安装类,举个例子,你需要import kafka,只需要在pom.xml配置即可,他会自动为你下载,无需你再离线安装配置Maven下载安装配置见我之前写的...原创 2020-03-31 12:02:40 · 276 阅读 · 0 评论 -
Java IDE基于阿里云maven建工程项目
我们在java开发时有时需要导入很多包,比如hive,spark,kafka等,这些虽然可以通过离线包来下载import,但始终不方便,而通过maven来import就很方便,它可以自动帮你下载所需包。不过初始的maven来源于国外,下载速度和质量不能保证,我们可以使用阿里云maven并进行相关工程项目开发配置阿里云maven下载maven:https://maven.apache.org...原创 2020-03-19 17:02:37 · 780 阅读 · 0 评论 -
java IO读写文件详细介绍
java IO读写是常用的操作,需要每个java操作者做到熟知,掌握//这些调用是可以统一用java.io.*,为了方便查看用了哪些类,故全部列出,哎我真是一个暖男import java.io.BufferedReader;import java.io.BufferedWriter;import java.io.File;import java.io.FileInputStream;...原创 2018-01-30 11:48:42 · 364 阅读 · 0 评论