2016年11月_NobiGo

11月 10月 09月

原创 hadoop启动脚本分析：start-all.sh

为了加深对Hadoop的理解，慢慢前进：----------------------------------------------------------调用顺序：1.先调用（hadoop）\libexec\hadoop-config.sh HADOOP_CONF=... //--config参数2."${HADOOP_HDFS_HOME}"/sbin/start-df

2016-11-24 20:27:06 3637

错误一：错误提示：ERROR: Bad Request;default/E1004 : E1004: Expression language evaluation error, Unable to evaluate :${now(0,-5)}:CausedBy: E1004: Expression language evaluation error, Unable to evaluate :${n

2016-11-24 16:22:48 864

原创 Linux Shell 汇总

注意事项行首以 # 开头(除#!之外)的是注释。#!是用于指定当前脚本的解释器，我们这里为bash，且应该指明完整路径，所以为/bin/bash使用双分号（;;）可以终止case选项。bash 中的 source 命令用于在当前 bash 环境下读取并执行 FileName.sh 中的命令。“STRING” 将会阻止（解释）STRING中大部分特殊的字符。‘STRING’ 将会阻止STRI

2016-11-24 16:12:23 313

原创理解OpenSSH的RSA和DSA认证过程

简介OpenSSH 的 RSA 和 DSA 认证协议的基础是一对专门生成的密钥，分别叫做专用密钥和公用密钥。使用这些基于密钥的认证系统的优势在于：在许多情况下，有可能不必手工输入密码就能建立起安全的连接。RSA/DSA 密钥的工作原理下面从整体上粗略的介绍了 RSA/DSA 密钥的工作原理。让我们从一种假想的情形开始，假定我们想用 RSA 认证允许一台本地的 Linux 工作站（称作 localb

2016-11-21 14:37:12 1588

原创 Hive常见问题汇总

1 执行#hive命令进入Hive CLI时报如下错误：Exception in thread "main" java.lang.RuntimeException: java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient

2016-11-21 10:25:16 667

翻译 Ranger-kafka-plugin

ranger如何对在非安全模式下的kafka进行授权操作这部分主要是关于ranger如何对非安全模式下的kafka进行授权操作。1. 我可以通过ranger对非安全模式下的kafka进行访问控制？可以通过指定Ip地址对访问进行控制。2. 我可以通过ranger的用户/用户组来对非安全模式下的kafka进行访问控制？不能通过基于用户/用户组的条件来对非安全模式下的kafka进行控制，因为在非安全模式下

2016-11-19 23:34:09 3665

原创 JAVA jar文件打包详解

jar文件简介JAR就是Java ARchive。它能让你把一组类文件包装起来，所以交付时只需要一个Jar文件。创建可执行的（简单程序）JAR(HelloWord)1. 确定要打包为jar的所有类文件在相同目录下。2. 创建manifest.txt来描述哪个类滴啊有main方法。Mian-Cliss：（这里要有空格）类名（注意没有加.class后缀）Mian-Cliss： HelloWord3.

2016-11-10 22:03:48 842

原创 Sqoop将SqlServer数据导入HDFS

环境准备1.下载jdbc的sqlserver驱动在HDFS与SqlServer数据库之间导入数据，需要下载jdbc的sqlserver驱动。并将jar文件拷入/var/local/hadoop/sqoop-1.4.6/lib2.但是这个只是jdbc中SqlServer的驱动，它并不支持HDFS与SqlServer数据库之间数据的传输，还需要下载 SQL Server-Hadoop Conne

2016-11-05 17:10:59 1357

newimproved-SQL-2016.pdf

SQL-2016 相对于SQL-2003的提升文件说明

2022-01-13

ISO-2003-SQL.zip

ISO-2003-SQL

2022-01-13

ISO-2016-SQL.zip

2016年12月14日，ISO/IEC发布了最新版本的数据库语言SQL标准（ISO/IEC 9075:2016）。从此，它替代了之前的ISO/IEC 9075:2011版本。最新的标准分为9个部分： ISO/IEC 9075-1 信息技术 – 数据库语言 – SQL – 第1部分：框架（SQL/框架） ISO/IEC 9075-2 信息技术 – 数据库语言 – SQL – 第2部分：基本原则（SQL/基本原则） ISO/IEC 9075-3 信息技术 – 数据库语言 – SQL – 第3部分：调用级接口（SQL/CLI） ISO/IEC 9075-4 信息技术 – 数据库语言 – SQL – 第4部分：持久存储模块（SQL/PSM） ISO/IEC 9075-9 信息技术 – 数据库语言 – SQL – 第9部分：外部数据管理（SQL/MED） ISO/IEC 9075-10 信息技术 – 数据库语言 – SQL – 第10部分：对象语言绑定（SQL/OLB） ISO/IEC 9075-11 信息技术 – 数据库语言 – SQL – 第11部分：信息与定义概要（SQL/Schemata） ISO/IEC 9075-13 信息技术 – 数据库语言 – SQL – 第13部分：使用Java编程语言的SQL程序与类型（SQL/JRT） ISO/IEC 9075-14 信息技术 – 数据库语言 – SQL – 第14部分：XML相关规范（SQL/XML）

2021-11-16

jdk1.6rpm安装包（linux）

安装CM过程提示出 jdk x86_64 2000:1.6.0_31-fcs 没有安装源。

2018-09-09

protoc2.5版本，直接放在system32下即可

保证可以运行，将文件解压后，直接放置在C盘下的System32下即可运行，或者对环境变量进行配置。

2018-07-19

hadoop-2.7.0-winutils.zip

解决运行Spark、Hadoop程序出现：Caused by: java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO$Windows.createFileWithMode0(Ljava/lang/String;JJJI)Ljava/io/FileDescriptor;问题

2018-04-11