- 博客(6)
- 资源 (1)
- 收藏
- 关注
原创 第6.1.4章 spark环境配置
spark与hive部署在一台服务器上。1 hive-site.xml这里可以看到spark和hive使用的是thrift协议通讯<configuration> <property> <name>hive.metastore.uris</name> <value>thrift://bwsc79:9083,thri...
2019-07-12 14:58:45 183
原创 第2.2.3章 hadoop的管理
这个章节的名字套用的是《Hadoop权威指南》第10章的名称,按图索骥,实地看看hadoop里面有什么。1 名称节点新格式化的namenode目录结构如下:# dfs.namenode.name.dir在hdfs-site.xml中配置了路径# 这里跟书上不一样,没有 fstime目录${dfs.namenode.name.dir}/current/VERSION edits fsima...
2019-07-11 15:33:41 446
原创 第1.10章 elasticsearch优化
1 跨es集群复制在elasticsearch.yml中增加配置,在两个集群都配置上白名单reindex.remote.whitelist: ["10.101.10.58:9200","10.101.10.59:9200","10.101.10.60:9200"]其余配置参考第1.8章 elasticsearch水平扩展Elasticsearch跨集群搜索(Cross Cluster S...
2019-07-09 16:27:23 390
原创 第4.1.3章 flume写入数据到hbase中
1、环境准备1.1 flume组件开发环境flume组件依赖的jar如下:<!-- provided --> <dependency> <groupId>commons-lang</groupId> <artifactId>commons-lang</artifactId> <version&...
2019-07-08 14:24:04 1261
原创 第1.3章 docker部署Eureka集群
关于Eureka的描述,可以参考Eureka简介,对Eureka和zookeeper对比,我个人觉得还是很容易看的明白的 Eureka作为服务的注册中心,即生产环境必须使用集群才能保证系统之间稳定运行...
2019-07-05 16:09:54 2329
原创 chineseocr环境准备
1、Anaconda3使用chineseocr源码,这里面用的版本是Anaconda3-2019.03-Linux-x86_64.sh执行下面的命令,参考Ubuntu18.04 安装 Anaconda3进行安装,指定安装目录cd bash Anaconda3-2019.03-Linux-x86_64.sh如果安装错了,卸载rm -rf anaconda文件夹名更改Anacond...
2019-07-01 11:47:13 1937
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人