Vcard可心-CSDN博客

原创 Hadoop伪分布搭建

安装包准备1. JDK1.7.X安装包（64位）2. Hadoop2.6.0安装包（64位）环境准备1.设置IP地址执行命令：service network restart验证：ifconfig2.关闭防火墙执行命令：service iptables stop验证：service iptables status3.关闭防火墙的自动运行执行命令：chkconfig iptables off验证:c...

2018-03-02 11:11:57 208

原创 linux 的nat连接模式和桥接连接模式的网络设置

桥接模式下首先查看自己的电脑的ip情况：cmd然后输入ipconfig那么打开你的虚拟机打开 Edit Connections点击网络，选择右边的Edit...配置你的ip，子网掩码，网关和DNS，点击Apply..保存退出。现在你就能跟你的电脑连通了，其实只要在你的这个ip:172.18.75.*的这个ip段里就能连通。

2017-05-09 21:53:17 4119

原创 python连接mysql数据库

Python跟数据库mysql连接环境准备1、python2.72、MySQL-python-1.2.4.win32-py2.7.exe默认你已经安装好python2.71、那么你直接把MySQL-python-1.2.4.win32-py2.7.exe直接点击安装就行了，然后输入import MySQLdb 没报错就说明你安装好了2、实现与mysql数据库

2017-05-09 21:32:04 409

原创 python中关于list remove不得不说的秘密

在python 中进行一次简单的列表循环，当用到remove时出现了一个很有趣的现象，代码如下：a=range(30)for i in a : if i%4!=0: a.remove(i)这段代码是在a里取i 当i不能够整除4 的时候，a就在自己里面删除这个时候的i 值，最后输出的ａ的结果应该是[0,4,8,12,16,20,24,28],结果真的是

2017-05-09 21:23:06 15175 10

原创 hbase和hive的集合

hbase和hive的集成下面写的是hbase中的表hbase_1和hive中的表hive_1关联，然后在hbase中进行hbase_1的数据改变，实现hive中的表hive_1的同时改变。一、安装好hadoop、hbase、hive。二、进行配置jar包的转移主要有一下几个hive-hbase-handler-1.2.1.jar、hbase-it-0.98.15-hadoop

2016-03-30 22:01:27 347

原创 Hadoop 完全分布式ssh免密码设置

大家在进行Hadoop完全分布式搭建时经常会碰见ssh免密码登录的问题，在这里我给大家说一下我成功的案例首先说一下这里面碰到的公钥和私钥。（一）公钥和私钥就是俗称的不对称加密方式，是从以前的对称加密（使用用户名与密码）方式的提高。实现如下目的：（1）我发送给你的内容必须加密，在邮件的传输过程中不能被别人看到。（2）必须保证是我发送的邮件，

2016-03-14 21:41:14 1558

原创往hive中导入数据

往hive中导入数据有好几种方法，目前我就学会一种，从本地导入，还有从别的表导入，从hdfs中导入等，我学会了再补充吧。我的文件类型是文本文档txthive导入数据一、从本地导入首先得通过winscp类似的东西将文件传输到Linux中，记住文件的存放目录然后启动Hadoop，再启动hive。建表：hive> CREATE TABLE （你要建的表名）(num INT, na

2015-12-04 21:08:41 435

原创 hbase shell的一些简单命令

hbase shell中间的一些命令1、创建一个表create 'data:zoo', {NAME => 'dog', VERSIONS => 3}, {NAME => 'panda', VERSIONS => 1}2、查看表list3、描述一张表describe ‘guan’4、插入数据put 'zoo', 'rk0001', 'dog:gender', 'ma

2015-12-04 21:05:14 297

原创闲谈最近的生活

闲时浅谈一个多月前我加入了学校的大数据科研室，当时我感觉真的好高兴，一是因为我终于也有明确的目标了，不再像大一时那样，下了课后没事干了，除了去玩游戏，就是在宿舍拿着手机看视频，在这里可能有人会问你不会去上自习啊，那我只能说你没上过大学，或者你是个好学生，像我这种普通二本的大学生，大一就去上自习的真的真的很少，尤其是男同学，基本上就是玩游戏，泡妞，和各种玩，学习?跟它很熟吗?所以我大学第一年基本

2015-11-19 18:18:33 532

原创 Linux下mysql安装和一些基础操作

MySQL是一个关系型数据库管理系统，由瑞典 MySQL AB 公司开发，目前属于 Oracle 旗下公司。MySQL 是一种关联数据库管理系统，关联数据库将数据保存在不同的表中，而不是将所有数据放在一个大仓库内，这样就增加了速度并提高了灵活性。MySQL 所使用的 SQL 语言是用于访问数据库的最常用标准化语言。MySQL 软件采用了双授权政策，它分为社区版和商业版，由于其体积小、速

2015-11-18 19:25:11 282

原创 hbase伪分布式搭建

一、首先得安装好Hadoop伪分布式，然后下载一个hbase的安装包。二、对hbase的安装包进行解压，更名（这一步有没有都一样） tar –zxvf Hbase-0.98.15.tar.gzmv Hbase-0.98.15 hbase（这个是更名）三、执行vi/etc/profile添加 export HBASE_HOME=/usr/local/h

2015-11-16 19:27:34 315

原创 Hadoop伪分布式搭建

对于新手来说，刚开始学Hadoop还是从单机和伪分布式开始学起，然后再去学习完全分布式，下面是我搭建Hadoop伪分布式平台的一些步骤希望对大家有一些帮助。安装包准备1. JDK1.7.X安装包（64位）2. Hadoop2.6.0安装包（64位）环境准备1.设置IP地址执行命令：service network restart验证：ifconfig2.关闭

2015-11-16 19:20:40 276

guan666的博客