2016年08月_人生偌只如初见

11月 10月 08月 07月 06月 05月

原创 MongoDB学习笔记-数据导入Excel文件

使用mongoexport工具bin/mongoexport --host 192.168.10.10:27017 --username test --password test --db test --collection user --type=csv --fields "name,age,phone,email,address" --out data.csv使用p

2016-08-28 15:50:31 6777

原创 Python学习笔记-Txt文件转Excel文件

Txt文件转Excel 2003文件（Excel 2003 一个工作表行数限制65536，列数限制256）# -*- coding:utf-8 -*-import osimport sysimport xlwtimport datetimedefault_encoding = 'utf-8'if sys.getdefaultencoding() != default_encod

2016-08-21 15:30:18 5831

原创 ES-Hadoop学习笔记-Storm交互

elasticsearch-hadoop提供ElasticSearch与Apache Storm的集成支持。从ElasticSearch读取的数据是以Storm里Tuple的形式进行操作处理。依赖版本信息：org.apache.stormstorm-core1.0.1org.apache.stormstorm-starter1.0.1or

2016-08-17 10:47:23 3563

原创 MongoDB学习笔记-安装部署和简易API操作

解压安装包tar -xzvf mongodb-linux-x86_64-ubuntu1404-3.2.8.tgz启动MongoDB方法一：bin/mongod --dbpath=/home/hadoop/Software/mongodb-3.2.8/datas/instance00 --logpath=/home/hadoop/Software/mongodb-3.

2016-08-15 19:56:26 1070

原创 Storm学习笔记-集成Kafka

Kafka接收数据源生产的消息数据，通过订阅的方式，使用Storm的Topology作为消息的消费者。相关版本：kafka_2.11-0.10.0.0storm-1.0.1启动Kafka Brokerkafka_2.11-0.10.0.0$ bin/kafka-server-start.sh config/server.properties &启动Kaf

2016-08-04 10:43:12 841

原创 ElasticSearch学习笔记-集群安装部署

集群版本：elasticsearch-2.4.6.tar.gz集群节点：centos.master 192.168.10.10centos.slave1 192.168.10.11centos.slave2 192.168.10.12配置文件elasticsearch.yml：cluster.name: elasticsearchnode.name: mas...

2016-08-02 23:47:04 766

原创 Storm学习笔记-集群环境安装部署

安装版本如下：apache-storm-1.0.1.tar.gzzookeeper-3.4.8.tar.gz修改zookeeper配置文件zoo.cfg内容tickTime=2000initLimit=10syncLimit=5dataDir=/home/hadoop/software/zookeeper-3.4.8/datadataLogDir=/home/had

2016-08-01 18:20:48 1366