2018年03月_自然语言处理-nlp

原创 git clone https://github.com/azkaban/azkaban.git Cloning into 'azkaban'... fatal: unable to access '

wget https://services.gradle.org/distributions/gradle-4.1-all.zip--2018-03-29 16:56:03-- https://services.gradle.org/distributions/gradle-4.1-all.zipResolving services.gradle.org (services.gradle.org...

2018-03-29 17:55:28 2381

原创安装git

安装 Git是时候动手尝试下 Git 了，不过得先安装好它。有许多种安装方式，主要分为两种，一种是通过编译源代码来安装；另一种是使用为特定平台预编译好的安装包。从源代码安装若是条件允许，从源代码安装有很多好处，至少可以安装最新的版本。Git 的每个版本都在不断尝试改进用户体验，所以能通过源代码自己编译安装最新版本就再好不过了。有些 Linux 版本自带的安装包更新起来并不及时，所以除非你在用最新的...

2018-03-29 17:42:50 134

转载 azkaban安装

在root的用户下搭建的• Azkaban安装部署（可参照：http://azkaban.github.io/azkaban/docs/latest/） 1)：前提安装JDK，安装Hadoop，Hive客户端环境2）：前提安装 git 的命令：apt-get install git3）：把github的azkaban源码下载命令：git clone https://github.com/az...

2018-03-20 23:02:23 905

原创 ide中安装完git报错Could not read from remote repository.

找到setting下的git SSH选择Native，成功解决问题。

2018-03-20 15:18:12 404

原创 Python注册码

进入http://idea.lanyus.com/不用修改用户名直接点击获取注册码复制获取的注册码填入code里面，即可

2018-03-18 11:12:58 13890 4

转载 hive基础语句

Hadoop Hive基础sql语法Posted on 2015-03-18 09:52 xuzhengzhu 阅读(70731) 评论(0) 编辑收藏1.先建表drop table sfmk.xzz_0726_srcarea_desarea;create table sfmk.xzz_0726_srcarea_desarea (srcarea_desarea string) row...

2018-03-15 14:54:15 5580

转载 hive配置元数据

Hive的meta数据支持以下三种存储方式，其中两种属于本地存储，一种为远端存储。远端存储比较适合生产环境。Hive官方wiki详细介绍了这三种方式，链接为：Hive Metastore。一、本地derby这种方式是最简单的存储方式，只需要在hive-site.xml做如下配置便可[html] view plain copy<?xml version="1.0"?> <?xm...

2018-03-15 14:40:44 892

转载 hive报错

关于这个环境变量。存放在hadoop-env.sh里面。这个环境变量是hadoop执行程序时会查询class的路径。以前遇到过在本地开发Hbase程序，本地编译通过(本地开发有在IDE里面导入jar包)，打包jar包(并未包含开发时的Hbase的lib中的jar包因为考虑到运行linux环境中有这些jar包)然后在linux环境下hadoop jar XXX运行报错不能够找到类。原因是环境中的H...

2018-03-15 11:28:00 360

转载 hive启动报错

初次启动hive,解决 ls: cannot access /home/hadoop/spark-2.2.0-bin-hadoop2.6/lib/spark-assembly-*.jar: No such file or directory问题>>提君博客原创 http://www.cnblogs.com/tijun/ <<刚刚安装好hive,进行第一次启动提君博客原创...

2018-03-14 14:24:11 570

小白成小黑