途音-CSDN博客

原创 Guava-EventBus简单学习笔记

EventBus 介绍EventBus 是轻量级的Event（消息）发布/订阅框架，采用设计模式中的Observer(观察者)模式。允许组件之间进行发布-订阅式的通信，而不需要组件彼此显式的注册。EventBus 不是一个通用的发布-订阅系统，不适用于进程间通信。EventBus用法这里使用Socket创建一个简单的一对一的消息发送，对EventBus进行初步了解。public cla...

2019-03-10 16:24:09 265

原创 Flume-ng源码分析--启动脚本解析

Flume源码分析–flume-ng解析以此篇作为研究、学习源码的起步。Flume简介Flume 是一个高可用的、高可靠的分布式系统，可以从不同的数据源进行日志的采集、聚合、传输，可以将采集到的日志传输到HDFS、HBase、MySQL等。数据源和接收数据的端都是可定制的。Flume本地化调试1、安装java JDK。2、从FLume官网下载编译好的flume包和flume源码包，并进...

2019-03-09 23:13:25 894

原创爬取搜狗热搜榜数据制成南丁格尔图

【实验目的】 1.在Windows平台上使用基本的Python语言结合Scrapy将搜狗热搜榜上的九个热门类型的数据进行爬取，并将爬取数据保存到本地数据库； 2.使用eclipse编辑工具结合echarts和jQuery等组件将爬取到的数据以南丁格尔图的形式展现出来。【实验原理】 1.Scrapy结合xpath和Css可以很方便快捷的从获取到的网页中找出所需标签的文本内容，同时可以为爬取到

2017-04-27 10:56:36 2642 1

原创 Windows中Python3.6安装、Scrapy安装及简单认识

1.从http://python.org/download/上下载Windows平台上的Python3.6的安装文件，点击进行安装：2.安装完毕后，可以在DOS命令行查询安装的Python版本：3.从http://sourceforge.net/projects/pywin32/安装pywin32（下载符合系统的pywin32版本）4.在安装Python3.6时，会自动

2017-04-26 16:38:51 2657 1