大数据
lynnyq
这个作者很懒,什么都没留下…
展开
-
KuduTablet设置维护时间
KuduTablet设置维护时间参考follower_unavailable_considered_failed_sec默认为300s,tablet失去联系超过300s后,该节点的数据就会在其他节点重建,为了避免维护造成的不必要的数据移动和拷贝,可以临时设置此时间为更长的时间(重启维护加上tablet重启后初始化需要的时间)1.健康检查维护前需要健康检查,如果有任何副本不足的情况,需等...原创 2019-10-24 16:44:16 · 888 阅读 · 0 评论 -
Kudu TabletServer服务器断电无法启动
Kudu TabletServer服务器断电无法启动1.问题Kudu TabletServer服务器正常大量写入时,服务器异常重启,会造成TabletServer的metadata的文件数据不完整功能,再次启动TabletServer会报如下错误:Check failed: _s.ok() Bad status: Corruption: Failed to load FS layout: C...原创 2019-10-24 16:42:12 · 1734 阅读 · 0 评论 -
KuduMaster迁移
KuduMaster迁移主数量必须为奇数。官方文档1.添加Kudu Master获取现有master的uuidsudo -u kudu kudu fs dump uuid --fs_wal_dir=/kudu/master/fs_wal_dir --fs_data_dirs=/kudu/master/fs_data_dirs 2>/dev/null5315431da71e4...原创 2019-10-24 16:41:10 · 599 阅读 · 0 评论 -
Flume学习笔记
Flume学习笔记1.Flume概述 Flume NG是一个分布式,高可用,可靠的系统,它能将不同的海量数据收集,移动并存储到一个数据存储系统中。轻量,配置简单,适用于各种日志收集,并支持Failover和负载均衡。并且它拥有非常丰富的组件。Flume NG采用的是三层架构:Agent层,Collector层和Store层,每一层均可水平拓展。其中Agent包含Source,Ch...原创 2018-07-05 19:34:42 · 651 阅读 · 0 评论