大数据
文章平均质量分 68
井口者
这个作者很懒,什么都没留下…
展开
-
Hadoop大数据(一)
HDFS、YARN、Mapreduce简介 http://www.mamicode.com/info-detail-1565128.html MapReduce工作原理 http://weixiaolu.iteye.com/blog/1474172 用web查看hadoop运行状态 https://www.cnblogs.com/laov/p/3433994.html原创 2018-01-17 22:22:41 · 255 阅读 · 0 评论 -
kafka记录
kafka开发环境配置及java示例 http://blog.csdn.net/z769184640/article/details/51585419原创 2018-01-24 16:10:25 · 250 阅读 · 0 评论 -
zookeeper kafka 集群配置(centos6.5)
版本:zookeeper-3.4.10kafka_2.11-0.9.0.11.需要先设置好服务器的用户名和hosts表vi /etc/sysconfig/network 修改hostname HOSTNAME=server01 vi /etc/hosts127.0.0.1 localhost localhost4 localhost4.localdomain4::1原创 2017-10-24 17:33:52 · 318 阅读 · 0 评论 -
MapReduce记录
We want to count all the books in the library. You count up shelf #1, I count up shelf #2. That’s map. The more people we get, the faster it goes.我们要数图书馆中的所有书。你数1号书架,我数2号书架。这就是“Map”。我们人越多,数书就更快。No原创 2018-01-15 15:45:25 · 252 阅读 · 0 评论 -
elasticsearch-sql5.2.0.0 + centos6.5安装教程
ElasticSearch-sql:5.2.0.0版本Elasticsearch:5.2.0版本操作系统:Centos 6.5(64位)JDK: 1.8.0_121版本安装elasticsearch-sql原创 2017-10-30 16:13:47 · 382 阅读 · 0 评论 -
elasticsearch 5.2.0 + centOs6.5安装
1、在Linux下执行命令:java -version,检查Jar包是否安装 安装java版本至少是1.8以上2、下载Elasticsearch5.2.0 安装包3、下载到/usr/local 目录下,解压tar -zxvf elasticsearch-5.2.2.tar.gz4、因为Elasticsearch5.0之后,不能使用root账户启动,我们先创建一个elasticsearchuser原创 2017-10-30 10:55:59 · 367 阅读 · 0 评论 -
KafkaOffsetMonitor安装
KafkaOffsetMonitor是一个可以用于监控Kafka的工具。源项目Github地址为:https://github.com/quantifind/KafkaOffsetMonitor。 最好用:http://pan.baidu.com/s/1ntzIUPN 修改过的,不用下载太多依赖一、KafkaOffsetMonitor的使用 因为完全没有安装配置的过程,所以直接从KafkaOf原创 2017-10-30 14:43:43 · 344 阅读 · 0 评论 -
Elasticsearch-sql 用SQL查询Elasticsearch语句
Elasticsearch-sql 用SQL查询Elasticsearch 转自http://www.cnblogs.com/kangoroo/p/7273493.html Elasticsearch的查询语言(DSL)真是不好写,偏偏查询的功能千奇百怪,filter/query/match/agg/geo各种各样,不管你是通过封装JSON还是通过python/java的api进行封装,都非常不转载 2017-10-30 17:30:51 · 8519 阅读 · 0 评论 -
phoenix4.3.0 hbase0.98.13集群安装
环境:centos6.5 jdk 1.8 hbase 0.98.13 hbase集群: 192.168.1.57 slave01 192.168.1.64 slaver02 192.168.1.65http://archive.apache.org/dist/phoenix/phoenix-4.3.0/bin/ 拷贝到需要做测试的服务器上(1.113),并对其解压缩tar -xvf phoeni原创 2017-11-16 11:46:40 · 332 阅读 · 0 评论 -
flume1.6.0 linux 安装与监控
下载apache-flume-1.6.0-bin.tar.gz解压tar -zxvf apache-flume-1.6.0-bin.tar.gz 配置cp conf/flume-conf.properties.template conf/flume-conf.properties//配置的模板(source,sink,channel)cp conf/flume-env原创 2017-11-06 15:00:58 · 373 阅读 · 0 评论 -
Hbase记录
HBase的查询实现只提供两种方式: 1、按指定RowKey获取唯一一条记录,get方法(org.apache.hadoop.hbase.client.Get) 2、按指定的条件获取一批记录,scan方法(org.apache.hadoop.hbase.client.Scan) 实现条件查询功能使用的就是scan方式原创 2018-01-15 13:31:32 · 402 阅读 · 0 评论 -
Hbase MapReduce扩展
Hbase访问方式之Mapreduce http://blog.csdn.net/woshiwanxin102213/article/details/17914083原创 2018-02-06 17:08:58 · 269 阅读 · 0 评论