- 博客(6)
- 收藏
- 关注
RSS订阅原创 kafka基本操作
#指定zookeeper主机，副本数1，分区数为1，topic名称bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic topicname#查看消息是否创建成功bin/kafka-topics.sh --list --zookeeper lo...
2018-09-26 21:28:09
139
原创 Storm编程demo
任务：将得到的字符串更改为大写，添加后缀后写入文件1：spout类import org.apache.storm.spout.SpoutOutputCollector;import org.apache.storm.task.TopologyContext;import org.apache.storm.topology.OutputFieldsDeclarer;import or...
2018-09-25 18:14:10
200
原创 storm集群安装配置：
1：首先安装zookeeper集群2：安装storm：tar -zxvf apache-storm-1.2.2.tar.gz -C /usr/localsudo mv apache-storm-1.2.2 storm3:更改conf目录下storm.yarml配置文件sudo vi storm.yarml########### These MUST be filled ...
2018-09-25 15:52:45
147
原创 zookeeper安装配置
1：解压安装sudo tar -zxvf /home/hadoop/ftpDocuments/zookeeper-3.4.10.tar.gz -C /usr/local/sudo mv zookeeper-3.4.10 zookeeperchown -R hadoop zookeeper/2：修改zookeeper/conf目录下配置文件zoo_sample.cfgsudo m...
2018-09-23 16:15:37
167
原创 【Hadoop】自定义Hadoop序列化been Demo
package hadoop.mapreduce.serializable;import org.apache.hadoop.io.Writable;import java.io.DataInput;import java.io.DataOutput;import java.io.IOException;/** 自定义Hadoop序列化* */public class MyS...
2018-09-22 10:31:59
156
原创 【python】【爬虫】爬取Fate Grand Order wiki所有英灵礼装图鉴
import requestsfrom lxml import etreefor i in range(1,895): ''' url0="https://fgowiki.com/guide/equipdetail/894?p=pc" #网页地址 res=requests.get(url0) content=res.content html=...
2018-09-17 19:44:25
1073
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人