- 博客(14)
- 收藏
- 关注
转载 Ubuntu下在线安装Apache+PHP5+MySQL
1 安装Apachesudo apt-get install apache2 安装apache2 apache2安装完成以后,启动文件是/etc/init.d/apache2。sudo /etc/init.d/apache2 start 启动apachesudo /etc/init.d/apache2 stop 关闭apachesudo ...
2016-03-04 15:21:00 145
转载 Eclipse 连接Hive
Hive本质上不是数据库,数据内容保存在HDFS,元数据和数据映射保存在mysql。eclipse连接hive时,需要将hive启动为服务,hive自身提供了服务启动方式一、Hive服务启动方式hive --service hiveserver2 hive服务绑定的10000端口号 查看10000端口号的绑定状态sudo netstat -nplt...
2015-12-17 12:03:00 467
转载 Hive安装与使用
Hive是用类似sql语句的形式去操作存储在HDFS上文件的一个客户端,功能上是一个数据仓库,需要配合一个关系型数据库使用,hive自带了一个关系型数据库derby,但是官方不推荐使用,这里我们使用Mysql。关系型数据库的作用是将HDFS上的数据结构化,将结构和数据映射对应起来。 mysql用于存储映射关系,HDFS用来存储数据一、安装mysql 略二、Hiv...
2015-12-17 11:27:00 102
转载 ubuntu安装tomcat
tomcat需要依赖jdk,所以在安装tomcat之前先安装jdk1、解压tomcat tomcat安装在/home/qqx/softtar -zxvf apache-tomcat-7.0.65.tar.gz2、启动tomcat 进入tomcat安装目录的bin目录下 ./startup.sh3、检测tomcat是否启动成功 通...
2015-12-03 11:29:00 84
转载 ubuntu安装ActiveMQ
ActiveMQ依赖jdk,所以在安装ActiveMQ之前先要安装好jdk。一、安装JDK1、解压jdk-7u79-linux-x64.gz jdk安装在/home/qqx/soft目录tar -zxvf jdk-7u79-linux-x64.gz2、注册环境变量 sudo vi /etc/profileexport JAVA_HOME=...
2015-12-03 11:23:00 559
转载 UTF-8和GBK区别
UTF-8 UTF-8编码用以解决国际上字符的一种多字节编码。它对英文使用8位(即一个字节),中文使用24位(三个字节)。对于英文字符较多的论坛则用UTF-8节省空间。包含全世界所有国家需要用到的字符。GBK GBK通俗点将就是我们国家自己的编码方式。它对中英文都采用双字节表示,为了区分中文,将其高字节都设为1。GBK是GB2312在量上的扩充,并没有质的区别,向后兼容。...
2015-11-24 16:09:00 108
转载 MapReduce实现二次排序(温度年份排序)
文件内容:1949-10-01 14:21:02 34℃1949-10-02 14:01:02 36℃1950-01-01 14:21:02 32℃1950-10-01 11:01:02 37℃1951-10-01 14:21:02 23℃1950-10-02 17:11:02 41℃1950-10-01 18:20:0...
2015-11-24 15:45:00 476
转载 MapReduce实现倒排索引
倒排索引倒排索引"是文档检索系统中最常用的数据结构,被广泛地应用于全文搜索引擎。它主要是用来存储某个单词(或词组)在一个文档或一组文档中的存储位置的映射,即提供了一种根据内容来查找文档的方式。由于不是根据文档来确定文档所包含的内容,而是进行相反的操作,因而称为倒排索引(Inverted Index)。file1:MapReduce is simplefile2:...
2015-11-22 23:26:00 248
转载 MapReduce实现多表链接
多表链接输入是两个文件,一个代表工厂表,包含工厂名列和地址编号列;另一个代表地址表,包含地址名列和地址编号列。要求从输入数据中找出工厂名和地址名的对应关系,输出"工厂名——地址名"表。factory:factoryname addressedBeijing Red Star 1Shenzh...
2015-11-22 22:18:00 468
转载 MapReduce实现单表链接
单表关联实例中给出child-parent(孩子——父母)表,要求输出grandchild-grandparent(孙子——爷奶)表。file:child parentTom LucyTom JackJone LucyJone JackLucy MaryLucy ...
2015-11-22 19:19:00 180
转载 MapReduce的Shuffle阶段和Sort阶段
组成部分 Shuffle阶段分为两部分:Map端和Reduce端。 Sort阶段就是对Map端输出的key进行排序。 第一部分:Map端Shuffle 对于输入文件,会进行分片,对于一个split,有一个map任务进行处理,每个Map在内存中都有一个缓存区,map的输出结果会先放到这个缓冲区中,在缓冲区中,会进行预排序(即sort和co...
2015-11-18 12:38:00 247
转载 java日志Log4j
Java中提供的日志类:org.apache.log4j.Logger 添加log4j jar包 配置log4j属性文件:log4j.properties log4j.rootLogger = debug,D log4j.appender.D = org.apache.log4j.DailyRollingFileAppender log4j...
2015-11-16 22:37:00 61
转载 Ubuntu在线安装NFS服务
一、安装NFS服务器端 (192.168.228.137) 1、安装nfs-kernel-server 命令:sudo apt-get install nfs-kernel-server nfs依赖portmap。在安装nfs-kernel-server时,会自动安装portmap。 2、创建需要共享的文件夹 mkdir /home/qqx/t...
2015-11-10 18:44:00 76
转载 Ubuntu在线安装mysql
一 安装mysql-server1、安装mysql服务器端sudo apt-get install mysql-server2、登陆mysqlmysql -u root -p 注:-u 代表用户名;-p 代表密码3、使用mysql 1)展示数据库show databases; 2)使用某个数据库use XX...
2015-11-10 18:18:00 86
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人