关闭
当前搜索:

apache hive + sentry测试

环境: 1. ubuntu 16.04STL 2. hadoop-2.6.0-cdh5.13.0 3. hive-1.1.0-cdh5.13.0 4. sentry-1.5.1-cdh5.13.0 —————————————————————————————— 各版本下载地址:(http://archive-primary.cloudera.com/cdh...
阅读(42) 评论(0)

关于hadoop,hive,sentry版本问题

最初因为懒得找资源直接在apache官网上下载hadoop,hive,sentry,结果因为各个版本之间的兼容问题导致互相集成出现各种这样那样的错误。 现在已经改为cloudera下的各个软件,版本控制清楚,不会因为版本问题导致各种不必要的错误。。。 血的教训!!更多关于apache和cloudera之间的区别请移步Cloudera的CDH和Apache的Hadoop的区别。...
阅读(64) 评论(0)

量子通讯加密技术的技术原理

1 什么是量子一个物理量如果存在最小的不可分割的基本单位,则这个物理量是量子化的,并把最小单位称为量子。量子英文名称量子一词来自拉丁语quantus,意为“有多少”,代表“相当数量的某物质”。在物理学中常用到量子的概念,指一个不可分割的基本个体。例如,“光的量子”(光子)是一定频率的光的基本能量单位。而延伸出的量子力学、量子光学等成为不同的专业研究领域。其基本概念为所有的有形性质是“可量子化的”。“...
阅读(58) 评论(0)

Maven详解

转载自:Maven详解一.前言以前做过的项目中,没有真正的使用过Maven,只知道其名声很大,其作用是用来管理jar 包的。最近一段时间在项目过程中使用Maven,用Maven构建的web项目,其项目结构只停留在了解阶段,没有深入的使用与理解,刚好最近看了一篇关于Maven的详解;就开始深入学习一下Maven的具体应用。二.Maven的作用在开发中,为了保证编译通过,我们会到处去寻找jar包,当编译...
阅读(106) 评论(0)

Sentry简单的shell命令

概述简单的shell命令是Sentry用于管理元数据的命令行工具,比如:bin/sentryShell --grant_role_privilege --role analyst --privilege server=server1->db=db2->table=tab1->action=select --conf sentry-site.xmlShell命令目前仅限于Hive授权元数据,支持一下命...
阅读(163) 评论(0)

为什么Cloudera要创建Hadoop安全组件Sentry?

要说清楚这个问题,还得从大数据平台安全体系的四个层次说起:外围安全、数据安全、访问安全以及访问行为监控;...
阅读(72) 评论(0)

Apache Sentry架构介绍

转载自JavaChen Blog,作者:JavaChen本文链接地址:http://blog.javachen.com/2015/04/29/apache-sentry-architecture.html介绍Apache Sentry是Cloudera公司发布的一个Hadoop开源组件,截止目前还是Apache的孵化项目,它提供了细粒度级、基于角色的授权以及多租户的管理模式。Sentry当前可以和H...
阅读(168) 评论(0)

基于角色的访问控制

RBAC概述基于角色的访问控制(Role-Based Access Control, RBAC )的核心思想就是将访问权限与角色相联系,通过给用户分配合适的角色,让用户与访问权限相联系。 角色是权限的集合,对于一个系统中可以有多个角色,每个角色对不同的资源有不同的权限,当用户访问资源时,首先系统识别用户的角色,然后决定该用户是否具有访问该资源的权限。角色是一种抽象的概念,将用户权限从每个单一用户抽...
阅读(91) 评论(0)

apache sentry安装

环境Ubuntu STL 16.0.4 Hadoop 2.7.4 Hive 2.1.1 sentry 1.7.0 maven 3.5.0//注:伪分布式环境安装maven1.apache maven官网下载maven,用于编译sentry源码。 2.修改~/.bashrc文件,添加maven路径。export MAVEN_HOME=/etc/usr/local/maven export...
阅读(107) 评论(0)

ubuntu16.04配置hive2.1.1详解及相关问题解决

主要参考博客Ubuntu系统下安装并配置hive-2.1.0mysql安装配置 安装mysql服务 ‘sudo apt-get install mysql-server mysql-client’ 启动mysql服务 ‘sudo service mysql start’ 注释: 重启mysql服务: ‘service mysql restart’ 停止mysql服务: ‘serv...
阅读(233) 评论(0)

Cloudera的CDH和Apache的Hadoop的区别

目前而言,不收费的Hadoop版本主要有三个(均是国外厂商),分别是:Apache(最原始的版本,所有发行版均基于这个版本进行改进)、Cloudera版本(Cloudera’s Distribution Including Apache Hadoop,简称CDH)、Hortonworks版本(Hortonworks Data Platform,简称“HDP”),对于国内而言,绝大多数选择CDH版本,...
阅读(151) 评论(0)

第一个Hadoop程序WordCount

参考博客:ubuntu安装hadoop详细步骤 环境: ubuntu16.04LTS+Hadoop2.7.4 配置可参考ubuntu16.04 Hadoop安装 本地新建一个文件,笔者在~/Documents目录下新建了一个wordCount.txt文档,里面的内容可以随便填写。 I have an apple I have a pen emmmmm applep...
阅读(95) 评论(0)

ubuntu16.04 Hadoop安装

主要参考: 在Ubuntu 14.04 LTS上安装部署Hadoop 2.7.1(伪分布式)配置ssh免密码登录 安装ssh server: sudo apt-get install openssh-server cd ~/.ssh/ # 若没有该目录,请先执行一次 ssh localhost ssh-keygen -t rsa...
阅读(200) 评论(0)

RSA加密算法简介

背景RSA加密算法是公钥密码最著名的算法之一,是由MIT三位(Ron Rivest, Adi Shamir, Len Adleman)提出的,也就以三位的名字首字母命名。 该算法的理论基础是“大数分解和素数检测“,如果说有一天,大数分解和素数检测的数学理论被证明可以简单解决,那么RSA算法的加密将没有任何意义。有提出说量子计算机的出现可以大大提高RSA的破解效率。下面我们将简单学习RSA加密算法的...
阅读(167) 评论(0)

公钥密码的基本原理

公钥密码:基于数学函数而非基于代替和置换;公钥密码使用两个独立的密钥。公钥密码术语: 非对称密钥:公钥和私钥,用来加密和解密,或用来生成签名或验证签名; 公钥证书:是有签证机构用自己的私钥签名的数字文件; 公钥密码算法:从公钥推私钥是不可行的; 公钥基础设施(PKI):用于管理证书,公私钥对,并负责产生,维护和废除公钥证书的集合。 公钥密码学解决了传统密码学中最困难的两个问题:1)密钥分配问题;2)...
阅读(359) 评论(1)
30条 共2页1 2 下一页 尾页
    个人资料
    • 访问:5170次
    • 积分:279
    • 等级:
    • 排名:千里之外
    • 原创:20篇
    • 转载:9篇
    • 译文:1篇
    • 评论:2条
    最新评论