MaxWelll常用命令

1.启动maxwell:
1.1、控制台为输出:
bin/maxwell --user='maxwell' --password='123456' --host='10.199.140.143' --producer=stdout --daemon 
1.2、kafka为输出:
bin/maxwell --user='maxwell' --password='123456' --host='10.199.140.143' \
--producer=kafka --kafka.bootstrap.servers=10.199.151.15:9092 --kafka_topic=wsk_maxwell_test
1.3、配置指定某些表输出:
bin/maxwell --user='maxwell' --password='123456' --host='10.199.140.143' --client_id=test --daemon \
--producer=kafka --kafka.bootstrap.servers=10.199.151.15:9092 --kafka_topic=wsk_maxwell_test \
--filter='exclude: *.*, include: bdps_dcs_test.dcs_script, include: bdps_dcs_test.dcs_task_table' 
1.4、配置输出到kafka,分区规则为表的主键:
bin/maxwell --user='maxwell' --password='123456' --host='10.199.140.143' --client_id=test \
--producer=kafka --kafka.bootstrap.servers=10.199.151.15:9092 --kafka_topic=wsk_maxwell_test \
--producer_partition_by=column --producer_partition_columns='id' --producer_partition_by_fallback=primary_key \
--filter='exclude: *.*, include: bdps_dcs_test.dcs_script, include: bdps_dcs_test.dcs_task_table' 
1.5、配置文件启动MaxWell
bin/maxwell  --config=/home/wsk/app/maxwell-1.24.1/wsk_properties/10_199_139_12.properties  --daemon 
2.抽取某张表的历史数据:

maxwell引导某张表全量数据时会多发三条消息,首两条是引导的配置信息、引导开始信息,结尾一条是引导结束信息

2.1、直接全量抽取历史数据
命令行:
bin/maxwell-bootstrap --user='maxwell' --password='123456' --host='10.199.140.143' --client_id=test \
--database bdps_dcs_test --table dcs_task_table
SQL:
insert into maxwell.bootstrap (database_name, table_name,client_id ) values ('bdps_dcs_test', 'dcs_task_table','test');
2.2、继续监控某张表bootstrap
bin/maxwell-bootstrap --user='maxwell' --password='123456' --host='10.199.140.143' \
--abort 3
2.3、停止某张表的bootstrap
bin/maxwell-bootstrap --user='maxwell' --password='123456' --host='10.199.140.143' \
--monitor 3
2.4、添加where条件启动:

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值