OBServer停止时间过长导致无法启动问题解决

最新推荐文章于 2024-07-19 07:01:13 发布
最新推荐文章于 2024-07-19 07:01:13 发布
阅读量265 收藏
点赞数 3
文章标签： 数据库 oceanbase
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lglovegq/article/details/135884980
版权

问题现象

由于某种原因将3副本集群的其中一台OBServer停止，差不多过了四天才准备起动该OBServer，此时发现无法启动。

排查过程

启动过程中的OCP报错

2024-01-27 10:44:17.594 ERROR 1213 --- [pool-manual-subtask-executor7,fabc5c389ceb456f,90944f18012e] com.alipay.ocp.core.util.ExceptionUtils  : Checked Exception: com.alipay.ocp.core.exception.UnexpectedException occurred with code error.ob.server.start.failed, and args [9000001]

2024-01-27 10:44:17.614  INFO 1213 --- [pool-manual-subtask-executor7,fabc5c389ceb456f,90944f18012e] c.a.o.c.m.t.model.SubtaskInstanceEntity  : Set state for subtask: 19024880, current state: RUNNING, new state: FAILED

2024-01-27 10:44:17.637  WARN 1213 --- [pool-manual-subtask-executor7,fabc5c389ceb456f,90944f18012e] c.a.o.c.t.engine.runner.RunnerFactory    : Execute task failed, subtask=SubtaskInstanceEntity{id=19024880, name=Start observer process, state=FAILED, operation=RETRY, className=com.alipay.ocp.service.task.business.server.StartObServerProcessTask, seriesId=1, startTime=2024-01-27T10:34:08.819+08:00, endTime=2024-01-27T10:44:17.633+08:00}, failedMessage=Failed to start OBServer 9,000,001.

com.alipay.ocp.core.exception.UnexpectedException: [OCP UnexpectedException]: status=500 INTERNAL_SERVER_ERROR, errorCode=OB_SERVER_START_FAILED, args=9000001
	at sun.reflect.NativeConstructorAccessorImpl.newInstance0(Native Method) ~[na:1.8.0_312]
	at sun.reflect.NativeConstructorAccessorImpl.newInstance(NativeConstructorAccessorImpl.java:62) ~[na:1.8.0_312]
	at sun.reflect.DelegatingConstructorAccessorImpl.newInstance(DelegatingConstructorAccessorImpl.java:45) ~[na:1.8.0_312]
	at java.lang.reflect.Constructor.newInstance(Constructor.java:423) ~[na:1.8.0_312]
	at com.alipay.ocp.core.util.ExceptionUtils.newException(ExceptionUtils.java:96) ~[ocp-core-3.3.3-20220905.jar!/:3.3.3-20220905]
	at com.alipay.ocp.core.util.ExceptionUtils.throwException(ExceptionUtils.java:90) ~[ocp-core-3.3.3-20220905.jar!/:3.3.3-20220905]
	at com.alipay.ocp.core.util.ExceptionUtils.unExpected(ExceptionUtils.java:77) ~[ocp-core-3.3.3-20220905.jar!/:3.3.3-20220905]
	at com.alipay.ocp.service.task.business.server.StartObServerProcessTask.run(StartObServerProcessTask.java:67) ~[ocp-service-3.3.3-20220905.jar!/:3.3.3-20220905]
	at com.alipay.ocp.core.task.runtime.Subtask.retry(Subtask.java:49) ~[ocp-core-3.3.3-20220905.jar!/:3.3.3-20220905]
	at com.alipay.ocp.core.metadb.task.model.SubtaskInstanceEntity.retry(SubtaskInstanceEntity.java:237) ~[ocp-core-3.3.3-20220905.jar!/:3.3.3-20220905]
	at com.alipay.ocp.core.task.engine.runner.JavaTaskRunner.doExecute(JavaTaskRunner.java:30) ~[ocp-core-3.3.3-20220905.jar!/:3.3.3-20220905]
	at com.alipay.ocp.core.task.engin
e.runner.JavaTaskRunner.run(JavaTaskRunner.java:20) ~[ocp-core-3.3.3-20220905.jar!/:3.3.3-20220905]
	at com.alipay.ocp.core.task.engine.runner.RunnerFactory.doRun(RunnerFactory.java:118) ~[ocp-core-3.3.3-20220905.jar!/:3.3.3-20220905]
	at com.alipay.ocp.core.task.engine.runner.RunnerFactory.redirectOutputIfNotSysSchedule(RunnerFactory.java:190) ~[ocp-core-3.3.3-20220905.jar!/:3.3.3-20220905]
	at com.alipay.ocp.core.task.engine.runner.RunnerFactory.run(RunnerFactory.java:107) ~[ocp-core-3.3.3-20220905.jar!/:3.3.3-20220905]
	at com.alipay.ocp.core.task.engine.coordinator.worker.subtask.ReadySubtaskWorker.lambda$submitTask$3(ReadySubtaskWorker.java:122) ~[ocp-core-3.3.3-20220905.jar!/:3.3.3-20220905]
	at java.util.concurrent.FutureTask.run(FutureTask.java:266) ~[na:1.8.0_312]
	at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1149) ~[na:1.8.0_312]
	at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:624) ~[na:1.8.0_312]
	at java.lang.Thread.run(Thread.java:748) ~[na:1.8.0_312]

启动过程中的observer.log.wf，由于日志太多，以下只粘贴了日志最后的有用信息。

[2024-01-27 10:34:28.039001] WARN  [SQL.RESV] resolve_table_relation_recursively (ob_dml_resolver.cpp:8208) [13947][0][YB42C0A80236-00060FE440669DCE-0-0] [lt=52] [dc=0] synonym not exist(tenant_id=1, database_id=1099511627777, table_name=__all_clog_history_info_v2, ret=-5019)
[2024-01-27 10:34:28.039163] WARN  [SQL] generate_physical_plan (ob_sql.cpp:2069) [13947][0][YB42C0A80236-00060FE440669DCE-0-0] [lt=91] [dc=0] Failed to generate stmt(ret=-5019, result.get_exec_context().need_disconnect()=false)
[2024-01-27 10:34:28.039335] WARN  [SERVER] execute_write (ob_inner_sql_connection.cpp:1408) [13947][0][Y0-0000000000000000-0-0] [lt=46] [dc=0] execute_write failed(ret=-5019, tenant_id=1, sql="REPLACE INTO oceanbase.__all_clog_history_info_v2 (table_id, partition_idx, partition_cnt, start_log_id, start_log_timestamp, svr_ip, svr_port, svr_seq, end_log_id, end_log_timestamp) VALUES(1099511627930, 5, 0, 2284, 1706031238122756, '192.168.2.54', 2882, 0, 18446744073709551615, -1) ")
[2024-01-27 10:34:28.039834] WARN  [SERVER] execute_write (ob_inner_sql_connection.cpp:1408) [13945][0][Y0-0000000000000000-0-0] [lt=11] [dc=0] execute_write failed(ret=-5019, tenant_id=1, sql="REPLACE INTO oceanbase.__all_clog_history_info_v2 (table_id, partition_idx, partition_cnt, start_log_id, start_log_timestamp, svr_ip, svr_port, svr_seq, end_log_id, end_log_timestamp) VALUES(1099511627945, 2, 0, 1041, 1706030095082177, '192.168.2.54', 2882, 0, 18446744073709551615, -1) ")
[2024-01-27 10:34:28.040280] WARN  [CLOG] exec_partition_task_ (ob_clog_history_reporter.cpp:1102) [13945][0][Y0-0000000000000000-0-0] [lt=50] [dc=0] exec sql task failed(ret=-4023, ret="OB_EAGAIN", pkey={tid:1099511627945, partition_id:2, part_cnt:0}, op_type=1, addr="192.168.2.54:2882", start_log_id=1041, start_log_timestamp=1706030095082177, end_log_id=18446744073709551615, end_log_timestamp=-1)
[2024-01-27 10:34:28.040314] WARN  [CLOG] handle (ob_clog_history_reporter.cpp:314) [13945][0][Y0-0000000000000000-0-0] [lt=15] [dc=0] exec partition task fail(ret=-4023, ret="OB_EAGAIN", partition_task={pkey:{tid:1099511627945, partition_id:2, part_cnt:0}, head:{partition op str:"ONLINE", svr:"192.168.2.54:2882", svr_seq:0, start_log_id:1041, start_log_timestamp_:1706030095082177, end_log_id:18446744073709551615, end_log_timestamp:-1, next:null}, tail:{partition op str:"ONLINE", svr:"192.168.2.54:2882", svr_seq:0, start_log_id:1041, start_log_timestamp_:1706030095082177, end_log_id:18446744073709551615, end_log_timestamp:-1, next:null}})
[2024-01-27 10:34:28.040637] WARN  [SERVER] execute_write (ob_inner_sql_connection.cpp:1408) [13946][0][Y0-0000000000000000-0-0] [lt=39] [dc=0] execute_write failed(ret=-5019, tenant_id=1, sql="REPLACE INTO oceanbase.__all_clog_history_info_v2 (table_id, partition_idx, partition_cnt, start_log_id, start_log_timestamp, svr_ip, svr_port, svr_seq, end_log_id, end_log_timestamp) VALUES(1099511627927, 5, 0, 1041, 1706030097742718, '192.168.2.54', 2882, 0, 18446744073709551615, -1) ")
[2024-01-27 10:34:28.036412] ERROR [CLOG] read_disk (ob_log_direct_reader.cpp:739) [14954][0][Y0-0000000000000000-0-0] [lt=0] [dc=0] read not enough(ret=-4016, fd_handle={fd_item_:0x7f4bcd0467c0, is_local_:false}, offset=0, read_count=172032, count=1966080) BACKTRACE:0xfc4bc10 0x57f66bf 0x595a901 0x595a52f 0x595a1fc 0x9ccc6ec 0x9c10b22 0x9c0bad7 0x9c0b299 0x9c10f5b 0x9b1d2d8 0x9b1bbc0 0x9ba0046 0x9b9faa3 0x9c31231 0x9e026a1 0x9e02310 0x5944a34 0xfb20fd3 0xfb20e2f 0xfdc1f5f
[2024-01-27 10:34:28.040801] WARN  [CLOG] prepare_buffer_ (ob_raw_entry_iterator.h:429) [14954][0][Y0-0000000000000000-0-0] [lt=4291] [dc=0] read data from file error(ret=-4016, param={file_id:60, offset:0, partition_key:{tid:18446744073709551615, partition_id:-1, part_idx:268435455, subpart_idx:268435455}, log_id:18446744073709551615, read_len:1966080, timeout:1000000, is_proxy_request:false, svr_addr_seq:{server_addr:"0.0.0.0", server_seq:-1}}, rbuf_={buf_:0x7f495298c000, buf_len_:1970176}, read_res={buf_:null, data_len_:0})
[2024-01-27 10:34:28.040839] ERROR [CLOG.CSR] handle_last_ilog_file_ (ob_ilog_storage.cpp:1089) [14954][0][Y0-0000000000000000-0-0] [lt=23] [dc=0] iter next_entry failed(ret=-4016) BACKTRACE:0xfc4bc10 0x57f66bf 0x5837064 0x57f27af 0x5836ed8 0x5836af8 0x9ba9664 0x9ba012a 0x9b9faa3 0x9c31231 0x9e026a1 0x9e02310 0x5944a34 0xfb20fd3 0xfb20e2f 0xfdc1f5f
[2024-01-27 10:34:28.041000] ERROR [CLOG.CSR] fill_file_id_cache (ob_ilog_storage.cpp:166) [14954][0][Y0-0000000000000000-0-0] [lt=131] [dc=0] handle_last_ilog_file_ failed(ret=-4016) BACKTRACE:0xfc4bc10 0x57f66bf 0x5837064 0x57f27af 0x5836ed8 0x5836af8 0x9ba0522 0x9b9fb5b 0x9c31231 0x9e026a1 0x9e02310 0x5944a34 0xfb20fd3 0xfb20e2f 0xfdc1f5f
[2024-01-27 10:34:28.041115] ERROR [CLOG] do_scan_log_ (ob_log_scan_runnable.cpp:223) [14954][0][Y0-0000000000000000-0-0] [lt=95] [dc=0] fill_file_id_cache_ failed(ret=-4016) BACKTRACE:0xfc4bc10 0x57f66bf 0x5837064 0x57f27af 0x5836ed8 0x5836af8 0x9e027d1 0x9e024df 0x5944a34 0xfb20fd3 0xfb20e2f 0xfdc1f5f
[2024-01-27 10:34:28.041165] ERROR [CLOG] do_scan_log_ (ob_log_scan_runnable.cpp:242) [14954][0][Y0-0000000000000000-0-0] [lt=48] [dc=0] log scan runnable exit error(ret=-4016) BACKTRACE:0xfc4bc10 0x57f66bf 0x5837064 0x57f27af 0x5836ed8 0x5836af8 0x9e03b63 0x9e0249a 0x5944a34 0xfb20fd3 0xfb20e2f 0xfdc1f5f
[2024-01-27 10:34:28.041284] WARN  [SERVER] query (ob_inner_sql_connection.cpp:951) [13947][0][YB42C0A80236-00060FE440669DD1-0-0] [lt=38] [dc=0] failed to process final(executor={ObIExecutor:, sql:"REPLACE INTO oceanbase.__all_clog_history_info_v2 (table_id, partition_idx, partition_cnt, start_log_id, start_log_timestamp, svr_ip, svr_port, svr_seq, end_log_id, end_log_timestamp) VALUES(1103909674287482, 0, 0, 664, 1706031045418979, '192.168.2.54', 2882, 0, 18446744073709551615, -1) "}, aret=-5019, ret=-5019)
[2024-01-27 10:34:28.041267] ERROR on_fatal_error (ob_log_define.h:709) [14954][0][Y0-0000000000000000-0-0] [lt=54] [dc=0] ret = -4016 BACKTRACE:0xfc4bc10 0x9a40162 0x9e024b8 0x5944a34 0xfb20fd3 0xfb20e2f 0xfdc1f5f BACKTRACE:0xfc4bc10 0x57f66bf 0xfc3463d 0x9a401a5 0x9e024b8 0x5944a34 0xfb20fd3 0xfb20e2f 0xfdc1f5f
[2024-01-27 10:34:28.041463] WARN  [SERVER] execute_write (ob_inner_sql_connection.cpp:1408) [13947][0][Y0-0000000000000000-0-0] [lt=123] [dc=0] execute_write failed(ret=-5019, tenant_id=1004, sql="REPLACE INTO oceanbase.__all_clog_history_info_v2 (table_id, partition_idx, partition_cnt, start_log_id, start_log_timestamp, svr_ip, svr_port, svr_seq, end_log_id, end_log_timestamp) VALUES(1103909674287482, 0, 0, 664, 1706031045418979, '192.168.2.54', 2882, 0, 18446744073709551615, -1) ")

通过ret=-4016在官网搜索，找到如下一篇文章

https://www.oceanbase.com/knowledge-base/oceanbase-database-20000000004

观看此文后，随即查看redo日志目录。

node1
[admin@OBServer4 clog]$ ls -ltr
total 3211264
-rw-r--r-- 1 admin admin 67108864 Jan 23 02:09 577
-rw-r--r-- 1 admin admin 67108864 Jan 23 03:02 578
-rw-r--r-- 1 admin admin 67108864 Jan 23 03:56 579
-rw-r--r-- 1 admin admin 67108864 Jan 23 04:49 580
-rw-r--r-- 1 admin admin 67108864 Jan 23 05:44 581
-rw-r--r-- 1 admin admin 67108864 Jan 23 06:40 582
-rw-r--r-- 1 admin admin 67108864 Jan 23 07:32 583
-rw-r--r-- 1 admin admin 67108864 Jan 23 08:25 584
-rw-r--r-- 1 admin admin 67108864 Jan 23 09:19 585
-rw-r--r-- 1 admin admin 67108864 Jan 23 10:13 586
-rw-r--r-- 1 admin admin 67108864 Jan 23 11:06 587
-rw-r--r-- 1 admin admin 67108864 Jan 23 12:01 588
-rw-r--r-- 1 admin admin 67108864 Jan 23 12:53 589
-rw-r--r-- 1 admin admin 67108864 Jan 23 13:45 590
-rw-r--r-- 1 admin admin 67108864 Jan 23 14:38 591
-rw-r--r-- 1 admin admin 67108864 Jan 23 15:31 592
-rw-r--r-- 1 admin admin 67108864 Jan 23 16:24 593
-rw-r--r-- 1 admin admin 67108864 Jan 23 17:18 594
-rw-r--r-- 1 admin admin 67108864 Jan 23 18:11 595
-rw-r--r-- 1 admin admin 67108864 Jan 23 19:04 596
-rw-r--r-- 1 admin admin 67108864 Jan 23 19:58 597
-rw-r--r-- 1 admin admin 67108864 Jan 23 20:53 598
-rw-r--r-- 1 admin admin 67108864 Jan 23 21:48 599
-rw-r--r-- 1 admin admin 67108864 Jan 23 22:41 600
-rw-r--r-- 1 admin admin 67108864 Jan 23 23:35 601
-rw-r--r-- 1 admin admin 67108864 Jan 24 00:28 602
-rw-r--r-- 1 admin admin 67108864 Jan 24 01:21 603
-rw-r--r-- 1 admin admin 67108864 Jan 24 02:01 604
-rw-r--r-- 1 admin admin 67108864 Jan 24 02:42 605
-rw-r--r-- 1 admin admin 67108864 Jan 24 03:36 606
-rw-r--r-- 1 admin admin 67108864 Jan 24 04:27 607
-rw-r--r-- 1 admin admin 67108864 Jan 24 05:21 608
-rw-r--r-- 1 admin admin 67108864 Jan 24 06:15 609
-rw-r--r-- 1 admin admin 67108864 Jan 24 07:07 610
-rw-r--r-- 1 admin admin 67108864 Jan 24 08:01 611
-rw-r--r-- 1 admin admin 67108864 Jan 24 08:57 612
-rw-r--r-- 1 admin admin 67108864 Jan 24 09:51 613
-rw-r--r-- 1 admin admin 67108864 Jan 24 10:44 614
-rw-r--r-- 1 admin admin 67108864 Jan 24 11:37 615
-rw-r--r-- 1 admin admin 67108864 Jan 24 12:30 616
-rw-r--r-- 1 admin admin 67108864 Jan 24 13:24 617
-rw-r--r-- 1 admin admin 67108864 Jan 24 14:16 618
-rw-r--r-- 1 admin admin 67108864 Jan 24 15:10 619
-rw-r--r-- 1 admin admin 67108864 Jan 24 16:03 620
-rw-r--r-- 1 admin admin 67108864 Jan 24 16:56 621
-rw-r--r-- 1 admin admin 67108864 Jan 24 17:50 622
-rw-r--r-- 1 admin admin 67108864 Jan 24 18:46 623
-rw-r--r-- 1 admin admin 67108864 Jan 24 19:40 624
-rw-r--r-- 1 admin admin 67108864 Jan 24 19:46 625


node2
[admin@OBServer5 clog]$ ls -ltr
total 3211264
-rw-r--r-- 1 admin admin 67108864 Jan 23 21:47 682
-rw-r--r-- 1 admin admin 67108864 Jan 23 22:40 683
-rw-r--r-- 1 admin admin 67108864 Jan 23 23:34 684
-rw-r--r-- 1 admin admin 67108864 Jan 24 00:27 685
-rw-r--r-- 1 admin admin 67108864 Jan 24 01:20 686
-rw-r--r-- 1 admin admin 67108864 Jan 24 02:01 687
-rw-r--r-- 1 admin admin 67108864 Jan 24 02:41 688
-rw-r--r-- 1 admin admin 67108864 Jan 24 03:35 689
-rw-r--r-- 1 admin admin 67108864 Jan 24 04:26 690
-rw-r--r-- 1 admin admin 67108864 Jan 24 05:20 691
-rw-r--r-- 1 admin admin 67108864 Jan 24 06:15 692
-rw-r--r-- 1 admin admin 67108864 Jan 24 07:07 693
-rw-r--r-- 1 admin admin 67108864 Jan 24 08:01 694
-rw-r--r-- 1 admin admin 67108864 Jan 24 08:56 695
-rw-r--r-- 1 admin admin 67108864 Jan 24 09:51 696
-rw-r--r-- 1 admin admin 67108864 Jan 24 10:44 697
-rw-r--r-- 1 admin admin 67108864 Jan 24 11:37 698
-rw-r--r-- 1 admin admin 67108864 Jan 24 12:29 699
-rw-r--r-- 1 admin admin 67108864 Jan 24 13:23 700
-rw-r--r-- 1 admin admin 67108864 Jan 24 14:16 701
-rw-r--r-- 1 admin admin 67108864 Jan 24 15:09 702
-rw-r--r-- 1 admin admin 67108864 Jan 24 16:02 703
-rw-r--r-- 1 admin admin 67108864 Jan 24 16:56 704
-rw-r--r-- 1 admin admin 67108864 Jan 24 17:49 705
-rw-r--r-- 1 admin admin 67108864 Jan 24 18:45 706
-rw-r--r-- 1 admin admin 67108864 Jan 24 19:40 707
-rw-r--r-- 1 admin admin 67108864 Jan 25 10:52 708
-rw-r--r-- 1 admin admin 67108864 Jan 25 12:17 709
-rw-r--r-- 1 admin admin 67108864 Jan 25 13:47 710
-rw-r--r-- 1 admin admin 67108864 Jan 25 15:15 711
-rw-r--r-- 1 admin admin 67108864 Jan 25 16:44 712
-rw-r--r-- 1 admin admin 67108864 Jan 25 18:12 713
-rw-r--r-- 1 admin admin 67108864 Jan 25 19:41 714
-rw-r--r-- 1 admin admin 67108864 Jan 25 21:10 715
-rw-r--r-- 1 admin admin 67108864 Jan 25 22:39 716
-rw-r--r-- 1 admin admin 67108864 Jan 26 00:07 717
-rw-r--r-- 1 admin admin 67108864 Jan 26 01:36 718
-rw-r--r-- 1 admin admin 67108864 Jan 26 02:30 719
-rw-r--r-- 1 admin admin 67108864 Jan 26 03:58 720
-rw-r--r-- 1 admin admin 67108864 Jan 26 05:27 721
-rw-r--r-- 1 admin admin 67108864 Jan 26 06:56 722
-rw-r--r-- 1 admin admin 67108864 Jan 26 08:25 723
-rw-r--r-- 1 admin admin 67108864 Jan 26 09:53 724
-rw-r--r-- 1 admin admin 67108864 Jan 26 11:22 725
-rw-r--r-- 1 admin admin 67108864 Jan 26 12:50 726
-rw-r--r-- 1 admin admin 67108864 Jan 26 14:19 727
-rw-r--r-- 1 admin admin 67108864 Jan 26 15:47 728
-rw-r--r-- 1 admin admin 67108864 Jan 26 17:16 729
-rw-r--r-- 1 admin admin 67108864 Jan 26 17:44 730

node3
[admin@OBServer6 clog]$ ls -ltr
total 3211264
-rw-r--r-- 1 admin admin 67108864 Jan 23 21:56 695
-rw-r--r-- 1 admin admin 67108864 Jan 23 22:48 696
-rw-r--r-- 1 admin admin 67108864 Jan 23 23:42 697
-rw-r--r-- 1 admin admin 67108864 Jan 24 00:36 698
-rw-r--r-- 1 admin admin 67108864 Jan 24 01:29 699
-rw-r--r-- 1 admin admin 67108864 Jan 24 02:01 700
-rw-r--r-- 1 admin admin 67108864 Jan 24 02:51 701
-rw-r--r-- 1 admin admin 67108864 Jan 24 03:42 702
-rw-r--r-- 1 admin admin 67108864 Jan 24 04:35 703
-rw-r--r-- 1 admin admin 67108864 Jan 24 05:29 704
-rw-r--r-- 1 admin admin 67108864 Jan 24 06:23 705
-rw-r--r-- 1 admin admin 67108864 Jan 24 07:16 706
-rw-r--r-- 1 admin admin 67108864 Jan 24 08:10 707
-rw-r--r-- 1 admin admin 67108864 Jan 24 09:05 708
-rw-r--r-- 1 admin admin 67108864 Jan 24 09:59 709
-rw-r--r-- 1 admin admin 67108864 Jan 24 10:52 710
-rw-r--r-- 1 admin admin 67108864 Jan 24 11:45 711
-rw-r--r-- 1 admin admin 67108864 Jan 24 12:37 712
-rw-r--r-- 1 admin admin 67108864 Jan 24 13:31 713
-rw-r--r-- 1 admin admin 67108864 Jan 24 14:25 714
-rw-r--r-- 1 admin admin 67108864 Jan 24 15:18 715
-rw-r--r-- 1 admin admin 67108864 Jan 24 16:10 716
-rw-r--r-- 1 admin admin 67108864 Jan 24 17:04 717
-rw-r--r-- 1 admin admin 67108864 Jan 24 17:59 718
-rw-r--r-- 1 admin admin 67108864 Jan 24 18:54 719
-rw-r--r-- 1 admin admin 67108864 Jan 24 19:49 720
-rw-r--r-- 1 admin admin 67108864 Jan 25 11:03 721
-rw-r--r-- 1 admin admin 67108864 Jan 25 12:32 722
-rw-r--r-- 1 admin admin 67108864 Jan 25 14:00 723
-rw-r--r-- 1 admin admin 67108864 Jan 25 15:29 724
-rw-r--r-- 1 admin admin 67108864 Jan 25 16:58 725
-rw-r--r-- 1 admin admin 67108864 Jan 25 18:27 726
-rw-r--r-- 1 admin admin 67108864 Jan 25 19:55 727
-rw-r--r-- 1 admin admin 67108864 Jan 25 21:24 728
-rw-r--r-- 1 admin admin 67108864 Jan 25 22:52 729
-rw-r--r-- 1 admin admin 67108864 Jan 26 00:21 730
-rw-r--r-- 1 admin admin 67108864 Jan 26 01:50 731
-rw-r--r-- 1 admin admin 67108864 Jan 26 02:44 732
-rw-r--r-- 1 admin admin 67108864 Jan 26 04:12 733
-rw-r--r-- 1 admin admin 67108864 Jan 26 05:41 734
-rw-r--r-- 1 admin admin 67108864 Jan 26 07:10 735
-rw-r--r-- 1 admin admin 67108864 Jan 26 08:39 736
-rw-r--r-- 1 admin admin 67108864 Jan 26 10:07 737
-rw-r--r-- 1 admin admin 67108864 Jan 26 11:35 738
-rw-r--r-- 1 admin admin 67108864 Jan 26 13:04 739
-rw-r--r-- 1 admin admin 67108864 Jan 26 14:33 740
-rw-r--r-- 1 admin admin 67108864 Jan 26 16:01 741
-rw-r--r-- 1 admin admin 67108864 Jan 26 17:29 742
-rw-r--r-- 1 admin admin 67108864 Jan 26 17:44 743

解决方法

发现node1和node2/3的日志序号差别过大，因此怀疑由于clog过旧导致无法同步。按照官网文档中的说法，此时删除clog和ilog下的所有东西。

cd clog/
ls -ltr
rm -f *
cd ..
sl -ltr
cd ilog/
ls -ltr
rm -f *

删除后重新启动OBServer，发现问题解决。

lglovegq
关注
  • 3
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
OB官方建议的优化参数值导致observer无法启动问题
Du.的博客
12-15 918
observer无法启动
五、zookeeper(2)集群
M_azed的博客
05-24 536
一、zookeeper集群工作原理 1. zookeeper集群中,节点有 3种角色 4种状态 角色:leader,follower,observer leader负责客户端writer类型的请求； follower负责客户端reader类型的请求，并参与leader选举； observer是特殊的follower，可以接收客户端reader请求，但是不会参与选举，可以用来扩容系统支撑...
OBServer服务器修复后，重启OBServer失败
lglovegq的博客
03-27 307
使用OCP重启OBServer时，可以看到卡在Wait observer active这一步已经快半个小时了，另外start observer process这一步明明没有启动observer，但是还是成功了，比较值得深思它是如何判断的。可以看出文章是以offset是否为0 提供不同的解决方案的，此时去搜下offset是否为0，看到以下截图中offset并不为0，但是此时的输出跟文章上的有点不一样。此时删除ilog后，重新执行启动observer的任务，发现启动成功。打开看下影响的是2的版本，于是继续查。
kotlin+ViewModel+LiveData+协程的练习小项目
03-02
在Android开发中，由于主线程负责UI更新，所以任何长时间运行的操作都可能导致应用卡顿。协程提供了一种轻量级的并发机制，可以在不阻塞主线程的情况下执行耗时操作。通过在后台线程中运行协程，然后在需要的时候将...
JS实现图片延迟加载(缓冲)，非常实用
02-25
下面我们将深入探讨如何使用JavaScript实现图片延迟加载，以及如何解决可能出现的问题。 首先，我们需要了解延迟加载的基本原理。通常，我们会为图片元素设置一个默认的占位符，如一个空白的`<img>`标签或一个加载...
如何编写一个Windows服务(一)-研发中心.docx
02-14
- 示例中，服务创建了一个`QCoreApplication`实例和一个名为`Algalon::Observer`的Qt类实例，这表明可以在服务中使用Qt库，但不建议在服务中显示用户界面，因为这可能导致不可预知的行为。 5. **启动服务**： - ...
android异步操作
08-05
在Android系统中，所有的UI操作都在主线程中进行，如果在主线程执行长时间的任务，会导致应用程序无响应（ANR），影响用户体验。因此，开发者需要将耗时操作放在工作线程中，以保证界面的流畅性。这就是异步操作的...
angular监听dom加载完毕
01-09
Angular的`Renderer2`服务提供了一种安全的方式来操作DOM，它会在Angular的安全上下文中运行，避免了直接操作DOM导致的潜在问题。虽然`Renderer2`不是用来监听DOM加载，但你可以在`ngAfterViewInit`等适当的生命...
MySQL（事务、索引）&&MyBatis
hycccccch的博客
07-19 450
事务指的是一组操作的集合，是一个不可分割的工作单位。事务会将所有的操作作为一个整体一起向系统提交或撤销操作请求，即这些操作要么同时成功，要么同时失败默认MySQL的事务是自动提交，即当执行一条DML语句时，MySQL会立即隐式的提交事务开启事务后运行事务不会对数据改变，commit后才会改变数据如果有命令发生错误，需要进行rollback进行回滚、
【星海随笔】vCenter Server 和主机管理。
weixin_41997073的博客
07-16 197
1.方法：删除页面信息，然后断连这个受管主机，断开受管主机的连接不会将其从 vCenter Server 中移除，而只是临时挂起 vCenter Server 执行的所有监控活动。2.方法：在分布式存储中找到该虚拟设备的存储盘，文件里找到相关的vmdk磁盘文件，点击注册虚拟机。当资料不匹配时候，可以删除展示页面，孤立的设备的 匹配位置的信息。断开后，然后重新连接，既可以重新识别受监管的主机。数据库在Vserver中展示的是一个数据库的资料，应该是client的资料。1.确定为资料不匹配导致的展示问题。
Spring框架之DI依赖注入
G81948577的博客
07-18 569
我们在下面构建spring的过程中体会依赖注入；从上面的图中我们知道，在ssm框架中服务层（server）无法直接操作数据库，持久层（dao）是直接操作数据库进行数据处理的，但是我们如果在服务层有一个持久层的对象，然后我们在服务层通过对象去调用持久层的方法就可以操作数据库了。@OverrideSystem.out.println("持久层，你好");UserServiceImpl类中的代码如下@Override。
深入 Dify 源码，洞察 Dify RAG 核心机制
易迟的专栏
07-17 1109
之前深入源码对 Dify 的完整流程进行了解读，基本上梳理了 Dify 的实现流程与主要组件。但是在实际部署之后，发现 Dify 现有的 RAG 检索效果没有那么理想。因此个人结合前端页面，配置信息与实现流程，深入查看了私有化部署的 Dify 的技术细节。将核心内容整理在这边，方便大家根据实际的业务场景调整 Dify 知识库的配置，或者根据需要进行二次开发调优。
MySQL 其他
w1834938347的博客
07-15 694
SQL执行顺序from确定查询的表，jion连接表、on对from进行过滤，where进行条件过滤，group by和having进行分组后过滤，select进行指定的列，distinct去重，排序，限制行数定表过滤-分组过滤-选列过滤。
day04：Redis和店铺营业状态设置
m0_69266818的博客
07-15 840
介绍了Redis命令和用java操作redis还有营业额状态接口的书写
怎样在 PostgreSQL 中实现数据的异地备份？
最新发布
技术笔记
07-19 598
总而言之，在 PostgreSQL 中实现数据的异地备份不是一件难事，但也需要我们认真对待，精心规划。选择合适的备份方法和异地存储方式，制定合理的备份策略，定期进行测试和恢复演练，才能确保我们的数据在任何情况下都能“安然无恙”。🎉相关推荐🍅关注博主🎗️带你畅游技术世界，不错过每一次成长机会！📚领书：PostgreSQL 入门到精通.pdf📙PostgreSQL 中文手册📘PostgreSQL 技术专栏🍅CSDN社区-墨松科技。
Apache AGE的WITH子句
oscube的博客
07-17 246
使用 WITH，您可以在将输出传递给以下查询部分之前对其进行操作。这些操作可以是结果集中条目的形状和/或数量。WITH 也可以像 RETURN 一样，使用别名对引入结果的表达式进行别名，使用别名作为绑定名称。WITH 还用于将图的读取与图的更新分开。查询的每个部分必须是只读的或只写的。从写入子句转到读取子句时，可以使用可选的 WITH 进行此操作。
Java面试八股之Redis集群Cluster
u012151345的博客
07-15 636
如果客户端连接的是错误的节点，节点会返回MOVED或ASK重定向响应，指示客户端转向正确的节点。添加新节点：向集群中添加新节点时，通过redis-trib或redis-cli重新分配部分槽位到新节点，其他节点自动与新节点同步这部分槽位的数据。配置集群模式：为每个节点启用Cluster模式，指定Cluster所需的端口（通常为主节点端口+10000，用于节点间通信）以及Cluster配置文件（如redis.conf中的相关参数）。原主节点恢复后，若配置允许，它将自动成为新主节点的从节点。
observer启动多个
06-02
可以通过多线程的方式启动多个Observer，每个Observer监听不同的事件源。具体实现可以参考以下代码： ```python from watchdog.observers import Observer from watchdog.events import FileSystemEventHandler import threading class MyHandler(FileSystemEventHandler): def on_modified(self, event): print(f"{event.src_path} has been modified") if __name__ == "__main__": event_handler = MyHandler() observer1 = Observer() observer1.schedule(event_handler, path="/path/to/directory1", recursive=True) observer2 = Observer() observer2.schedule(event_handler, path="/path/to/directory2", recursive=True) observer1.start() observer2.start() try: while True: threading.Event().wait(1) except KeyboardInterrupt: observer1.stop() observer2.stop() observer1.join() observer2.join() ``` 在这个例子中，我们定义了一个继承自FileSystemEventHandler的事件处理类MyHandler，实现了on_modified方法用于处理文件修改事件。然后我们创建了两个Observer对象，分别监听两个不同的目录。最后通过多线程的方式启动了两个Observer。注意要使用try-except语句以及threading.Event().wait(1)来保证程序能够正常退出。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

lglovegq

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值