守得云开见月明

系统技术链 QQ:598691918

排序:
默认
按更新时间
按访问量

zookeeper的应用和原理详解

场景一 有这样一个场景:系统中有大约100w的用户,每个用户平 均有3个邮箱账号,每隔5分钟,每个邮箱账需要收取100封邮件,最多3亿份邮件需要下载到服务器中(不含附件和正文)。用20台机器划分计算的压力,从 多个不同的网路出口进行访问外网,计算的压力得到缓解,那么每台机器的计算压力也不会...

2018-09-02 15:00:24

阅读数:41

评论数:0

top命令输出解释以及load average 详解及排查思路

原地址: https://blog.csdn.net/zhangchenglikecc/article/details/52103737 1.top输出以及load a...

2018-09-02 11:37:32

阅读数:12

评论数:0

快速定位java系统线上问题

原文:https://blog.csdn.net/GitChat/article/details/79019454 一、前言Java 语言是当前互联网应用最为广泛的语言,作为一名 Java 程序猿,当业务相...

2018-08-31 10:37:02

阅读数:22

评论数:0

Memory Analyzer分析内存泄漏的解决过程

原博客地址:https://blog.csdn.net/liu765023051/article/details/75127361 状况描述: 最近项目新打的版本,过...

2018-08-30 11:08:41

阅读数:28

评论数:0

分布式锁如何实现

原博客地址:https://blog.csdn.net/xlgen157387/article/details/79036337 分布式锁简单入门以及三种实现方式介绍 ...

2018-08-27 15:24:36

阅读数:20

评论数:0

线程池中如何饲养线程?(线程池为什么能维持线程不释放,随时运行各种任务)

参考博客原址:https://blog.csdn.net/cjh94520/article/details/70545202/ ...

2018-08-25 17:22:14

阅读数:26

评论数:0

大数据平台搭建(四):hive中的表及UDF

前言      本章介绍hive内部表、外部表、分区表和UDF等。 1.hive表介绍     1.Hive虽说是数据仓库,其实可以认为就是一个mysql数据库,hive中的表名对应的是hdfs上的文件目录名,表内容就是对应目录下的文件。     2.hive表的hdf...

2018-04-13 21:07:17

阅读数:226

评论数:0

大数据平台搭建(三):hive 介绍和安装配置

前言      集群我们已经弄好了,本章开始搭建hive。 1.hive介绍     1.Hive是什么?      官方解释:Hive是基于Hadoop的数据仓库解决方案。由于Hadoop本身在数据存储和计算方面有很好的可扩展性和高容错性,因此使用Hive构建的数据仓...

2018-04-13 17:18:38

阅读数:141

评论数:0

大数据平台搭建(二):hadoop HA 集群搭建

前言      本章搭建zookeeper集群和hadoop集群 1.hadoop版本的选择     1.目前而言,不收费的Hadoop版本主要有三个(均是国外厂商),分别是:Apache(最原始的版本,所有发行版均基于这个版本进行改进)、Cloudera版本(Clouder...

2018-04-11 17:52:21

阅读数:186

评论数:0

大数据平台搭建(一):虚拟机环境配置

前言      最近看了些hadoop相关的资料,然后想自己从零开始搭建一个大数据平台。 大数据平台架构     1.概念性的东西还是不想多啰嗦,先上一张网上找的平台架构图,上图的目的是为了大家对整个平台架构有个宏观的认识,这个很重要,如果盲目的零碎的去研究效果很差。 ...

2018-04-10 17:25:22

阅读数:113

评论数:0

数据可视化 三步走(三):thymeleaf + echarts 完成数据可视化

前言      春节小长假休的比较舒服,第一天上班,继续年前未完成的内容。      本章节完成最后一点:利用thymeleaf模板引擎 和echarts完成数据可视化。 为什么使用thymeleaf和echarts?  &a...

2018-02-26 17:29:52

阅读数:1192

评论数:1

数据可视化 三步走(二):springboot整合mybatis 搭建Java Web

前言     本章节完成第2点:利用springboot + mybatis 作为web后台服务。 1.环境依赖   1.Win7 + Intellij IDEA 15.0.2 + JDK8 2.创建springboot项目  &am...

2018-02-07 16:16:27

阅读数:457

评论数:0

数据可视化 三步走(一):数据采集与存储,利用python爬虫框架scrapy爬取网络数据并存储

前言     最近在研究python爬虫,突然想写博客了,那就写点东西吧。给自己定个小目标,做一个完整的简单的数据可视化的小项目,把整个相关技术链串联起来,目的就是为了能够对这块有个系统的认识,具体设计思路如下: 1. 利用python爬虫框架scrapy爬取网络数据并存储到mysql中...

2018-02-06 16:39:48

阅读数:721

评论数:1

提示
确定要删除当前文章?
取消 删除
关闭
关闭