- 博客(11)
- 收藏
- 关注
RSS订阅原创 cassandra节点启动报错：java.io.UTFDataFormatException
"java.io.UTFDataFormatException: malformed input around byte 0"错误是由于Cassandra尝试读取保存的缓存文件时发生了UTF格式异常。在提供的错误消息中，缓存目录为：/home/data0/cassandra/cassandra_caches/saved_caches/。请注意，删除缓存文件将导致Cassandra重新生成缓存数据。cassandra数据量500G，重新生成缓存用了10分钟。Cassandra将自动重新创建缓存文件。
2023-12-26 14:52:18
210
1
原创 Centos7 安装docker（离线安装)
添加 --insecure-registry harbor.casicloud.com。在/usr/lib/systemd/system/docker.service。已docker-18.03.1-ce为例。3.docker注册为service。1.下载之后传输至服务器上。
2023-03-29 17:42:18
160
原创 Windows设置VMware虚机开机自启
windows下设置VMware开机自启，虚拟机自启1、编写bat批处理文件VMware安装目录如下：虚机目录如下：根据VMware地址和虚机目录编写 VMware内的CentOS7_01和CentOS7_02两台虚机的自启动 start_VM.bat 批处理文件“D:\Program Files (x86)\VMware\VMware Workstation\vmware.exe” -x “E:\Virtual Machines\CentOS7_01\CentOS7_01.vmx” “E:\
2021-11-12 16:08:03
2960
原创 Linux下Cassandra集群搭建
1.Cassandra介绍Cassandra是一套开源分布式NoSQL数据库系统。它最初由Facebook开发，用于储存收件箱等简单格式数据。NoSQl数据库分为4大类，Key-value类型、列存储型、文档类型、图形(Graph)等，而Cassandra为列存储型。Cassandra的特点：弹性可扩展性 - Cassandra是高度可扩展的; 它允许添加更多的硬件以适应更多的客户和更多的数据根据要求。数据存储灵活 - Cassandra适应所有可能的数据格式，包括：结构化，半结构化和非结构化。它可
2021-11-04 13:47:07
1057
原创 Cassandra介绍
cassandra概况为什么选择Cassandra？cassandra到底有那些令人印象深刻的特点呢？不防我们先来看下cassandra目前的大体概况理论扎实，师出名门cassandra不仅吸收了dynamo论文中的如何做分布式，如何做副本复制，故障容错等方面成功的经验，又吸取了google bigtable中的LSM单机引擎层面精华。理论扎实，工程实现靠谱，所以面世以来，不断受到人们的追捧。DB-EnginesRanking排名一骑绝尘宽表领域第一，全部数据排名第十，可以看出广受用户认可，流
2021-11-04 10:30:51
1086
原创 hbase集群间数据同步replication
一、hbase replication的原理hbase 的复制方式是 master-push 方式，即主集群推的方式，主要是因为每个regionserver都有自己的WAL(Write Ahead Log)预写日志。 一个master集群可以复制给多个从集群。复制是异步的，运行集群分布在不同的地方，这也意味着从集群和主集群的数据不是完全一致的。他的目标就是最终一致性。复制的格式与mysql的状态的复制类似，不同于mysql的状态复制，整个WAL的修改（包括insert delete 和cell的修改）
2021-10-29 16:32:44
2560
原创 MongoShake迁移同步MongoDB
一丶 MongoShake简介MongoShake是阿里云以Golang语言编写的通用平台型服务工具，它通过读取MongoDB的Oplog操作日志来复制MongoDB的数据以实现特定需求。MongoShake还提供了日志数据的订阅和消费功能，可通过SDK、Kafka、MetaQ等方式的灵活对接，适用于日志订阅、数据中心同步、Cache异步淘汰等场景源可以是单个 mongod、副本集或分片，而目标可以是 mongod 或 mongos。如果源是副本集，官方建议从次要/隐藏中获取数据以减轻主要压力。如果源
2021-10-22 17:37:51
825
原创 关于kafka:consumer_offsets日志不能自动清理，设置自动清理规则
关于kafka:consumer_offsets日志不能自动清理，设置自动清理规则起因Kafka服务器在运行几个月后，存储空间耗尽了。剖析Kafka的占用空间状况，发现Kafka主动生成的“__consumer_offset”topic，占用了大量空间，它用于记录每个用户topic的生产偏移量。这一topic实用的清理规定与其余topic不同，某些状况下，它可能始终得不到清理，耗尽服务器资源。查看清理策略因为服务器上的Kafka版本较老，这里应用的参数是–zookeeper，而非–bootstrap
2021-10-12 09:46:56
2179
原创 Linux MongoDB分片集群搭建：分片+副本集
1.mongodb环境配置mongodb 下载地址：https://www.mongodb.org/dl/linux/x86_64解压mongodb tar -xfmongodb*.tar移动到安装目录 mv mongodb-linux-x86_64-xxx /usr/local/mongodb添加环境变量 echo "export PATH=$PATH:/usr/local/mongodb/bin > /etc/profile使环境变量生效 source /et...
2020-07-17 13:57:35
765
原创 Ambari监控启动失败Metrics Collector报错：OutOfMemoryError
Ambari监控Metrics Collector 启动后不久就挂掉，经查看/var/log/ambari-metrics-collector下的日志ambari-metrics-collector.log 发现：Metrics Collector报错：OutOfMemoryError然后修改Metrics Collector的配置文件修改相关配置文件之前需要注意查看hbase的相关配置，否则会出现其他的问题。重启Metrics Collector 服务即可并查看相关日志。.
2020-06-15 16:03:22
1212
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人