2015年08月_andrewgb

12月 11月 10月 09月 08月 07月 06月 04月 03月

原创 Linux 查看版本和查看多少位的方法

1. 查看内核版本命令[root@q1test01 ~]# cat /proc/version　　 Linux version 2.6.9-22.ELsmp ([email protected]) (gcc version 3.4.4 20050721 (Red Hat 3.4.4-2)) #1 SMP Mon Sep 19 18:00:54 EDT 2005[root

2015-08-31 21:30:23 955

原创 HBase 简介以及个人理解(原理，基本概念，基本架构)

1.HBase简介 HBase – Hadoop Database，是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。HBase利用Hadoop HDFS作为其文件存储系统，利用Hadoop MapReduce来处理HBase中的海量数据，利用Zookeeper作为协调工具。2.基础知识2.1数据模型HBASE中的每一

2015-08-22 21:01:20 854

原创 ZooKeeper 简介以及服务器集群的搭建

1.简介ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件，提供的功能包括：配置维护、名字服务、分布式同步、组服务等。2.集群搭建zk服务器集群规模不小于3个节点，要求各服务器之间系统时间要保持一致。在hadoop0这台机器上的/usr/local目录下，解

2015-08-22 18:19:06 1345

原创 HDFS 维护节点

添加DataNode、卸载DataNode、以及使用fsck检查文件系统的一致性

2015-08-19 22:59:18 853

原创 Linux中的计划任务——Crontab

Crontab的介绍，包括什么是Crontab，怎样用，常见问题

2015-08-09 18:18:01 7101

原创 HADOOP生态系统

Hadoop生态系统的介绍

2015-08-08 18:07:42 527

原创 Sqoop 之初认识以及安装、操作

Sqoop的概述，以及安装、导入和导出的相关操作，并以例子说明问题

2015-08-08 17:54:51 483

原创 Hive 之表的种类以及相关操作

关于Hive 的表的介绍以及一些表的操作的总结，最后再一次回顾Hive在生态圈里所处的位置

2015-08-08 16:58:54 3468

原创 Hive 之再认识

1.Hive的运行方式Hive的运行模式即任务的执行环境，分为本地与集群两种，我们可以通过mapred.job.tracker 来指明，设置方式：hive > SET mapred.job.tracker=local;2.Hive的启动方式hive 命令行模式，直接输入#/hive/bin/hive的执行程序，或者输入 #hive --service cli hive web界面的 (端口号

2015-08-07 23:46:19 1067

原创 Hive 之使用mysql作为hive的metastore

使用mysql作为metastore，安装mysql和配置文件

2015-08-07 23:03:06 3844 1

原创 Hadoop 在使用过程中常遇到的问题

hadoop在使用过程中遇到的问题，总结出来方便以后查看

2015-08-07 22:27:23 1076

原创 Hive 之初认识以及安装

1.Hive是什么？Hive 是建立在 Hadoop 上的数据仓库基础构架。它提供了一系列的工具，可以用来进行数据提取转化加载（ETL ），这是一种可以存储、查询和分析存储在 Hadoop 中的大规模数据的机制。Hive 定义了简单的类 SQL 查询语言，称为 QL ，它允许熟悉 SQL 的用户查询数据。Hive是SQL解析引擎，它将SQL语句转译成M/R Job然后在Hadoop执行。

2015-08-05 00:11:07 288

2007~2014年同等学历计算机综合真题及部分答案解析

包含2007年到2014年的考题以及部分答案解析，内容手工整理，实属不易，请珍惜

2018-03-12

MySQL 远程连接后建表问题

2015-08-15

Hadoop分布式搭建时，在主节点JPS找不到JobTracker进程

2015-07-14

TA创建的收藏夹 TA关注的收藏夹

TA关注的人