Flink同时读取mysql与pgsql程序会卡住且没有日志

8 篇文章 0 订阅
3 篇文章 0 订阅

一. 问题

如题,flink程序会一直卡在initialize阶段,且不会有任何日志

二. 解决

程序中读取mysql与pgsql时使用的方式是:

DriverManager.getConnection(URL, USERNAME, PASSWORD);

测试,如果只请求mysql,或者只请求pgsql就正常有数据,此时我就怀疑是否这个方法有问题
把mysql请求换成使用德鲁伊获取连接

dataSource = new DruidDataSource();
dataSource.setDriverClassName(MysqlConfig.DriverName);
dataSource.setUrl(MysqlConfig.MYSQL_URL);
dataSource.setUsername(MysqlConfig.USERNAME);
dataSource.setPassword(MysqlConfig.PASSWORD);
dataSource.getConnection();

重启程序,发现就可以正常同时请求两个数据库了

三. 疑问

不知道是否是这个方法有这个限制还是flink内部导致的,希望知道的大佬可以指教指教

DriverManager.getConnection(URL, USERNAME, PASSWORD);
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
要使用Flink CDC读取MySQL,您需要按照以下步骤进行操作: 1. 首先,您需要从Flink CDC的GitHub发布页面下载最新的jar包flink-sql-connector-mysql-cdc-2.0.2.jar。 2. 接下来,进入Flink的bin目录,并执行./start-cluster.sh命令启动Flink测试环境。 3. 在Flink SQL读取MySQL数据,您需要执行以下步骤: - 进入Flink的bin目录,并执行./sql-client.sh命令启动Flink SQL。 - 在Flink SQL中创建一个表,例如,可以使用以下命令创建名为mysql_binlog的表: CREATE TABLE mysql_binlog ( id INT NOT NULL, name STRING, description STRING, weight DECIMAL(10,3), PRIMARY KEY(id) NOT ENFORCED ) WITH ( 'connector' = 'mysql-cdc', 'hostname' = '192.168.0.200', 'port' = '3306', 'username' = 'root', 'password' = 'passwd', 'database-name' = 'demo', 'table-name' = 'products' ); 这将使用Flink CDC连接器创建一个名为mysql_binlog的表,其中包含了与MySQL数据库中的demo.products表相对应的列和设置。您可以根据实际情况修改连接器的配置参数。 以上是使用Flink CDC读取MySQL的步骤。通过执行这些步骤,您可以在Flink中使用CDC功能来读取MySQL数据。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *2* *3* [Flink CDC读取MySQL的例子](https://blog.csdn.net/chrisy521/article/details/121377441)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 100%"] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值