2020年01月_jast_zsh

09月 08月 07月 06月 05月 04月 03月 02月 01月

原创 Hbase 预写日志WAL处理源码分析之 LogCleaner

目录Hlog WALs和oldWALs整体流程HMaster 初始化定时执行LogCleaner日志清理类ReplicationLogCleaner 日志清理类总结Hlog WALs和oldWALs这里先介绍一下Hlog失效和Hlog删除的规则HLog失效：写入数据一旦从MemStore中刷新到磁盘，HLog（默认存储目录在/hbase/WALs...

2020-01-19 16:54:06 4392 3

原创 JanusGraph 安装

下载地址：https://github.com/JanusGraph/janusgraph/releases/版本：Version 0.3.2 (June 16, 2019)安装解压janusgraph-0.3.2-hadoop2.zip文件janusgraph单机版安装注：本次安装janusgraph基于es和hbse，所以先安装es和hbase1.安装jdk2....

2020-01-17 09:24:46 1366

原创 Cloudera-Manager-agent 误删恢复

场景：同事操作失误，将agent节点误删了解决方法1.对比正常agent节点与被删除节点安装包差异 yum list installed |grep cloudera2.通过和正常的服务器对比我们发现，丢失的只有cloudera-manager-agent.x86_643.查看yum源中所有cloudera-manager组件：yum search c...

2020-01-15 10:56:20 1869 1

原创 CM，CDH 修改迁移元数据库

1.停止所有服务2.停止Cloudera Management Service服务3.登录CM所在服务器，停止cloudera-scm-server服务，命令如下：systemctl stop cloudera-scm-server4.停止CM服务和CDH集群后，对数据库进行迁移数据导出mysqldump -uroot -p --all-database...

2020-01-15 10:42:58 2817

原创迁移 Cloudera Manager 节点，迁移Cloudera Scm Server端

目录1.迁移节点信息：212 -> 442.压缩存储目录，备份SCMServer数据3.在新服务器安装server端4.修改 cloudera-scm-server 配置文件5.解压恢复备份数据到新服务器指定配置的目录中6.修改所有agent节点的配置文件内容7.迁移ClouderaManagementService节点8.停止原有的server端与所有...

2020-01-15 10:35:47 1110

原创 JanusGraph（HugeGraph通用）：可视化 GraphEXP 插件安装

JanusGraph：可视化 Gephi 插件安装可参考：https://datamining.blog.csdn.net/article/details/103894994下载地址：https://github.com/bricaud/graphexp安装解压，在根目录下修改graphexp.html<div class="nav input_unit_conta...

2020-01-08 19:54:59 4286

原创 JanusGraph：可视化 Gephi 插件安装

下载地址https://gephi.org/安装下一步默认安装即可打开安装插件打开后发现提示无法连接，并且可用插件显示为0 （我更新过所以不为0）点击“代理配置” 设置代理安装插件GraphStreaming继续重新启动，安装完成点击概览，会有streaming界面点击文件->新建项目右键...

2020-01-08 17:16:37 5514 3

原创 HugeGraph 多图配置

多图配置我们的系统是可以存在多个图的，并且各个图的后端可以不一样，比如图 hugegraph 和 hugegraph1，其中 hugegraph 以 cassandra 作为后端，hugegraph1 以 rocksdb作为后端。配置方法也很简单：修改 gremlin-server.yaml在 gremlin-server.yaml 的 graphs 域中添加一个键值对，键为图的名...

2020-01-08 16:08:38 2744 5

原创 HugeGraphServer 部署安装

官方文档链接：https://hugegraph.github.io/hugegraph-docHugeGraphServer Quick Start1 概述HugeGraph-Server 是 HugeGraph 项目的核心部分，包含Core、Backend、API等子模块。Core模块是Tinkerpop接口的实现，Backend模块用于管理数据存储，目前支持的后端包括：Mem...

2020-01-08 14:33:18 2819 2

转载图数据库 HugeGraph : IndexLabel

IndexLabel 用来定义索引类型，描述索引的约束信息，主要是为了方便查询。IndexLabel 允许定义的约束信息包括：name、baseType、baseValue、indexFeilds、indexType，下面逐一介绍。name: 属性的名字，用来区分不同的 IndexLabel，不允许有同名的属性；interface param must set index...

2020-01-07 16:47:05 1292 2