![](https://img-blog.csdnimg.cn/20201014180756780.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Storm-kafka-Redis-zookeeper
文章平均质量分 94
小兵qwer
我是杜小兵
展开
-
写shell,运行出错:syntax error near unexpected token `$’do\r”
cygwin下面写shell,运行出错:syntax error near unexpected token `$’do\r”写shell,运行出错:syntax error near unexpected token `$’do\r” 【问题】在cygwin下,用notepad++写了个简单的shell脚本,内容如下: 1 2 3 4 ...转载 2018-12-16 12:35:39 · 1230 阅读 · 0 评论 -
Storm之——Storm+Kafka+Flume+Zookeeper+MySQL实现数据实时分析(程序案例篇)
Storm之——Storm+Kafka+Flume+Zookeeper+MySQL实现数据实时分析(程序案例篇)2018年03月04日 23:44:59 冰 河 阅读数:16329更多所属专栏: Hadoop生态版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/l1028386804/article/details/79441007转...转载 2018-12-16 12:31:14 · 215 阅读 · 0 评论 -
Storm之——Storm+Kafka+Flume+Zookeeper+MySQL实现数据实时分析(环境搭建篇)
Storm之——Storm+Kafka+Flume+Zookeeper+MySQL实现数据实时分析(环境搭建篇)2018年03月04日 23:05:29 冰 河 阅读数:1602更多所属专栏: Hadoop生态版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/l1028386804/article/details/79440511转载...原创 2018-12-16 12:28:40 · 201 阅读 · 0 评论 -
Flume+Kafka+Storm+Redis实时分析系统基本架构
置顶 2016年07月24日 01:24:08 咕噜大大 阅读数:42523版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/ymh198816/article/details/51998085今天作者要在这里通过一个简单的电商网站订单实时分析系统和大家一起梳理一下大数据环境下的实时分析系统的架构模型。当然这个架构模型只是实时分析技术的...转载 2018-12-15 19:32:26 · 396 阅读 · 0 评论 -
Storm命令详解-Storm+kafka的HelloWorld初体验
Storm命令详解2015年04月26日 15:08:08 lavimer 阅读数:9171 标签: Storm Storm命令详解 Storm命令 更多个人分类: Storm 所属专栏: Storm实战版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/lzm1340458776/article/details/45288503...转载 2018-12-15 19:30:09 · 390 阅读 · 0 评论 -
Storm入门学习随记
推荐慕课网视频:http://www.imooc.com/video/10055 另外,关于Storm并发度,已经整理到另一篇博客中,希望对读者有所帮助。请参考:http://www.cnblogs.com/quchunhui/p/8271349.html ====Storm的起源。Storm是开源的、分布式、流式计算系统 什么是分布式呢?就是将一个任务拆解给多...原创 2018-12-15 19:19:19 · 195 阅读 · 0 评论 -
Kafka入门学习
Kafka入门学习用简单的话来说,你可以把Kafka当作可顺序写入的一大卷磁带, 可以随时倒带,快进到某个时间点重放。 ====常用开源分布式消息系统*集群:多台机器组成的系统叫集群。*ActiveMQ还是支持JMS的一种消息中间件。*阿里巴巴metaq,rocketmq都有kafka的影子。*kafka的动态扩容目前是通过zookeeper来完成的。 ...转载 2018-12-15 19:13:19 · 194 阅读 · 0 评论 -
Kafka日志及Topic数据清理
由于项目原因,最近经常碰到Kafka消息队列拥堵的情况。碰到这种情况为了不影响在线系统的正常使用,需要大家手动的清理Kafka Log。但是清理Kafka Log又不能单纯的去删除中间环节产生的日志,中间关联的很多东西需要手动同时去清理,否则可能会导致删除后客户端无法消费的情况。 在介绍手动删除操作之前,先简单的介绍一下Kafka消费Offset原理。一、Kafka消费Offset...转载 2018-12-15 18:03:30 · 1448 阅读 · 0 评论 -
Win7下Zookeeper 单机与集群的搭建【可行版】
Win7下Zookeeper 单机与集群的搭建【可行版】2014年04月08日 17:35:32 单向街的夏天 阅读数:3218更多个人分类: 大数据处理 版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/wenzhibinbin_pt/article/details/231969191. 概述 ZooKeeper...转载 2018-12-15 17:57:08 · 206 阅读 · 0 评论 -
zookeeper安装和使用 windows环境&集群搭建
zookeeper安装和使用 windows环境2016年07月25日 22:27:02 tlk20071 阅读数:93471 标签: zookeeper 分布式应用 更多个人分类: zookeeper 简介ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件。它是一个为分布式应用提...转载 2018-12-15 17:55:32 · 173 阅读 · 0 评论 -
CentOS6 Install kafka
一.zookeeper集群安装 原文链接:http://www.cnblogs.com/caoguo/p/5958608.html # 环境192.168.190.152192.168.190.153192.168.190.154 Install jdk# tar zxvf jdk-8u65-linux-x64.tar.gz# mv jdk1.8.0_...转载 2018-12-14 22:06:25 · 257 阅读 · 0 评论 -
CentOS6.5 安装Kafka集群
猎手家园CentOS6.5 安装Kafka集群2016-05-17 11:34 by 猎手家园, 763 阅读, 0 评论, 收藏, 编辑1、安装zookeeper参考文档:http://www.cnblogs.com/hunttown/p/5452138.html2、下载:https://www.apache.org/dyn/closer.cgi?path=/kafka/...转载 2018-12-14 21:53:13 · 218 阅读 · 0 评论 -
一位大数据开发工程师的两年工作经验总结
一位大数据开发工程师的两年工作经验总结工程师人生 • 2018-07-02 16:41 • 9207次阅读今年广州的六月,在经历了大雨的洗礼之后,一切都变得更加明朗起来,新的工作,新的人和事。懒惰让我变得更焦虑,焦虑促使我进步,程序员的焦虑大家应该都有共同的感觉,时代的步伐太快了,在这个环境下的软件开发一定会淘汰掉那些不懂得学习,懒惰的人。希望跟大家共勉。 今天呢,博主主要回顾...原创 2018-12-16 12:50:25 · 9283 阅读 · 0 评论