- 博客(9)
- 收藏
- 关注
RSS订阅原创 Intellij IDEA 快捷键整理
【常规】Ctrl+Shift + Enter，语句完成“！”，否定完成，输入表达式时按 “！”键Ctrl+E，最近的文件Ctrl+Shift+E，最近更改的文件Shift+Click，可以关闭文件Ctrl+[ OR ]，可以跑到大括号的开头与结尾Ctrl+F12，可以显示当前文件的结构Ctrl+F7，可以查询当前元素在当前文件中的引用，然后按 F3 可以选择Ctrl+N，可以快速打开类Ctrl...
2018-03-24 11:06:49
284
原创 使用 Flume 收集数据
一、实验介绍1.1 实验内容Flume 是分布式的日志收集系统，可以处理各种类型各种格式的日志数据，包括avro、thrift、exec、jms、spooling directory、netcat、sequence generator、syslog、http、legacy、自定义等，本节课主要讲解 Flume 的应用案例。1.2 课程来源本课程源自 图灵教育 的 《Hadoop基础教程》 第1...
2018-03-23 16:50:59
577
原创 mysql 远程连接数据库的方法汇总
一、连接远程数据库：1、显示密码如：MySQL 连接远程数据库（192.168.5.116），端口“3306”，用户名为“root”，密码“123456”C:/>mysql -h 192.168.5.116 -P 3306 -u root -p1234562、隐藏密码如：MySQL 连接本地数据库，用户名为“root”，C:/>mysql -h localhost -u root ...
2018-03-20 10:56:40
664
转载 Flume-og和Flume-ng的变化详解
Cloudera 开发的分布式日志收集系统 Flume，可以实时的将分布在不同节点、机器上的日志收集到 存储系统中。Flume 初始的发行版本统称为 Flume OG（original generation），属于 cloudera。但随着 Flume 功能的扩展，Flume OG 代码工程臃肿、核心组件设计不合理、核心配置不标准等缺点暴露出来，尤其 Flume OG 的最后一个发行版本 0....
2018-03-16 21:44:33
896
原创 flume基本知识要点儿须知
运行flume:flume-ng agent -c conf -f netcat to_logger.conf --name atelnet centosl 8888yum install telnet.x86 61特点: 1.采集大量的log数据 2.高可靠性，高效性和高可用性 3.分布式 4.不仅可以采集转移数据，还可以对数据进行处的处理操作(对数据的简单清洗可以由...
2018-03-16 08:55:42
382
原创 Phoenix4.7.0安装
1. phoenix安装拷贝phoenix-4.7.0-HBase-1.1-bin.tar.gz文件到linux的/usr/tools目录下面解压：tar –zxvf phoenix-4.7.0-HBase-1.1-bin.tar.gz生成新的目录phoenix-4.7.0-HBase-1.1-bin将其配置到环境变量中去#phoenixexport PHOENIX_HOME=/usr/too...
2018-03-14 19:13:42
586
转载 HBase-1.2.1和Phoenix-4.7.0分布式安装指南
目录目录 11. 前言 22. 概念 22.1. Region name 23. 约定 24. 相关端口 35. 下载HBase 36. 安装步骤 36.1. 修改conf/regionservers 36.2. 修改conf/hbase-site.xml 36.2.1. hbase.master.info.port 56.2.2. hbase.master.info.bindAddress 56...
2018-03-14 15:42:16
760
原创 HBase行键设计原则
【原理】HBase是一个分布式的、面向列的数据库，它和一般关系型数据库的最大区别是：HBase很适合于存储非结构化的数据，还有就是它基于列的而不是基于行的模式。既然HBase是采用KeyValue的列存储，那Rowkey就是KeyValue的Key了，表示唯一一行。Rowkey也是一段二进制码流，最大长度为64KB，内容可以由使用的用户自定义。数据加载时，一般也是根据Rowkey的二进制序由小...
2018-03-13 16:58:16
10117
转载 HDFS基本原理及数据存取实战
本文主要介绍了hdfs的基本原理、hdfs基本操作、hdfs的读取数据流程、namenode工作机制，rpc编程以及常见的两种必会的面试题等，旨在于全面深入的理解HDFS的基本工作流程并可以开发出简易的HDFS的程序。一、HDFS简介Hadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件(commodity hardware)上的分布式文件系统。HDFS体系结构中有两类节点，一类是N...
2018-03-10 17:42:04
627
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人