AndyLizh的专栏

给人生一个梦,给梦一条路,给路一个方向!

如何用Hive“傻瓜式”搭建数据仓库—Hive安装部署

一、前言: 数据仓库主要用来用来存储公司或者企业的历史数据,即日积月累的数据。 1、数据库与数据仓库区别: 关系型数据库是基于事务性的,数据仓库是根据主题构建的。 2、使用示例: l 用户使用天然气的大数据分析 l 电影票房分析收视率等 l 百度搜索关键词分析热词 二、Hive简介...

2017-04-28 18:23:42

阅读数 4729

评论数 0

Hive 使用RegexSerDe来处理标准格式Apache Web日志

我们以一个例子来介绍如何使用RegexSerDe来处理标准格式的Apache Web日志,并对其进行统计分析。我的Hive版本是apache-hive-2.1.1-bin 一、在Hive中创建表apache_log [sql] view plain copy CREATE T...

2017-04-28 18:19:09

阅读数 739

评论数 0

用Hive分析nginx日志——1

这里用到的nginx日志是网站的访问日志,比如: [java] view plain copy 180.173.250.74 - - [08/Jan/2015:12:38:08 +0800] "GET /avatar/xxx.png HTT...

2017-04-28 18:02:14

阅读数 630

评论数 0

用Hive分析Nginx日志

一、Nginx日志文件格式 111.37.1.15|100.109.0.149|[28/Apr/2017:14:36:08 +0800]|GET /service/getCity.do?region=河北 HTTP/1.0|200|1292|0.002|-|Dalvik/1.6.0 (Linux;...

2017-04-28 17:04:00

阅读数 1602

评论数 0

Linux(Centos7)yum安装Nginx

一、关于Nginx Nginx是一个高性能的web服务器软件,比Apache更快更轻。 二、添加Nginx仓库 新建文件 vim /etc/yum.repos.d/nginx.repo 输入下面内容 [nginx] name=nginx repo baseurl=http://n...

2017-01-18 15:36:49

阅读数 3138

评论数 0

用Redis存储Tomcat集群的Session

作者:chszs,转载需注明。博客主页:http://blog.csdn.net/chszs 前段时间,我花了不少时间来寻求一种方法,把新开发的代码推送到到生产系统中部署,生产系统要能够零宕机、对使用用户零影响。 我的设想是使用集群来搞定,通过通知负载均衡Nginx,取下集群中的T...

2016-06-16 15:09:15

阅读数 697

评论数 0

运行和控制Nginx

nginx命令行参数 不像许多其他软件系统,Nginx 仅有几个命令行参数,完全通过配置文件来配置 -c  为 Nginx 指定一个配置文件,来代替缺省的。 -t 不运行,而仅仅测试配置文件。nginx 将检查配置文件的语法的正确性,并尝试打开配置文件中所引用到的文件。 -...

2014-12-26 15:00:21

阅读数 1068

评论数 0

Nginx安装

nginx可以使用各平台的默认包来安装,本文是介绍使用源码编译安装,包括具体的编译参数信息。正式开始前,编译环境gcc g++ 开发库之类的需要提前装好,这里默认你已经装好。ububtu平台编译环境可以使用以下指令apt-get install build-essentialapt-get ins...

2014-12-26 14:39:47

阅读数 833

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭