2016年12月_ntk1986

转载解决Maven工程中报 Missing artifact jdk.tools:jdk.tools:

jdk.tools:jdk.tools是与JDK一起分发的一个JAR文件，可以如下方式加入到Maven项目中： jdk.tools jdk.tools 1.7 system ${JAVA_HOME}/lib/tools.jar详见Maven FAQ for adding dependencies to tools.jar也可以在本地

2016-12-07 08:44:13 388

转载 Linux SSH免登录配置总结

转载请出自出处：http://eksliang.iteye.com/blog/2187265一、原理我们使用ssh-keygen在ServerA上生成私钥跟公钥，将生成的公钥拷贝到远程机器ServerB上后,就可以使用ssh命令无需密码登录到另外一台机器ServerB上。生成公钥与私钥有两种加密方式，第一种是rsa(默认)，还有一种是dsa,

2016-12-05 21:16:28 321

转载 hadoop2.6.0版本集群环境搭建

一、环境说明1、机器：一台物理机和一台虚拟机2、linux版本：[spark@S1PA11 ~]$ cat /etc/issueRed Hat Enterprise Linux Server release 5.4 (Tikanga)3、JDK: [spark@S1PA11 ~]$ java -versionjava version "1.6.0_27"

2016-12-05 21:15:00 310

转载 hive常用命令

创建表：Hive> CREATE TABLE pokes (foo INT, bar STRING); Creates a table called pokes with two columns, the first being an integer and the other a string创建一个新表，结构与其他一样hive> create table new_tabl

2016-12-03 09:51:55 420

原创 hive的安装与简单使用

1、安装hive【安装hive之前必须安装好mysql】1.1 把hive的压缩包解压。1.2 产生一个文件cp conf/hive-default.xml.template conf/hive-site.xml1.3 把hive-site.xml中<configuration></configuration>中的内容清空。1.4 在里面添加如下内容，如下配置的意义在于metastore的数据

2016-12-03 09:15:49 329

原创 linux6.5安装MySQL-5.5.53-1.el6.x86_64.rpm-bundle.tar

系统：centos6.5_64bits 安装包：MySQL-5.5.53-1.el6.x86_64.rpm-bundle.tar将MySQL-5.5.53-1.el6.x86_64.rpm-bundle.tar复制到linux /opt目录下，解压MySQL-5.5.53-1.el6.x86_64.rpm-bundle.tar，按顺序安装三个文件：安装命令：rpm - ivh

2016-12-02 22:28:44 4738

原创 MapReduce提交jar包的相关操作

模拟HDFS–》MapReduce–》HDFS过程：在linux中运行jar包【使用MapReduce处理指定的HDFS中的数据，处理完成之后将数据返回到指定的HDFS中】具体操作步骤：1、在eclipse中生成jar包：export–》生成jar包–》填写JAR file：生成路径–》选择Main class–》finish2、将jar包上传到linux，执行： ya

2016-12-01 22:57:13 1026

转载 HDFS 常用文件操作命令

前言HDFS命令基本格式：Hadoop fs -cmd < args >ls 命令hadoop fs -ls / 列出hdfs文件系统根目录下的目录和文件hadoop fs -ls -R / 列出hdfs文件系统所有的目录和文件put 命令hadoop fs -put < local file > < hdfs file > hdfs file的父目录一定要存在，否则命令不会执行hadoop

2016-12-01 19:11:34 384

原创 Idea 常用快捷键

Alt+回车导入包,自动修正Alt+Insert 生成代码(如get,set方法,构造函数等)Ctrl+N 查找类Ctrl+Shift+N 查找文件Ctrl+Alt+L 格式化代码Ctrl+Alt+O 优化导入的类和包Ctrl+E或者Alt+Shift+C 最近更改的代码Ctrl+R 替换文本Ctrl+F 查找文本Ctrl+Shift+Space 自动补全代码Ctrl+

2016-12-01 08:13:14 275

原创提交jar包到Storm集群

生成jar包，提交到Storm集群步骤： 1、右击项目–》properties–》复制Location； 2、进入cmd命令窗口，切换路径到Location； 3、运行dir命令，查看是否有pom.xml文件 4、如果有，运行mvn clean package,生成jar包 5、将jar包复制到服务器，使用CR

2016-12-01 08:09:12 5922

转载 Redis安装使用

一、获取Redis1、通过官网http://redis.io/获取稳定版源码包下载地址； 2、通过wget http://download.redis.io/releases/redis-3.0.2.tar.gz下载源码包；二、编译安装Redis1、解压源码安装包，通过tar -xvf redis-3.0.2.tar.gz解压源码，速度相当快； 2、进入解压后的目录，执行make编译源码；

2016-12-01 08:06:03 383

ntk1986的博客