Mapr与Hive工作(三)——升级hive

此页面包含了描述如何在MAPR分布为Apache Hadoop的升级蜂房以下主题:

在升级之前,请确保MAPR核心软件的群集上的版本支持蜂巢的要升级到的版本。看到蜂巢发行说明

更新资料库或下载的软件包

MAPR的RPMDEB库总是包含推荐为MAPR核心的最新版本的蜂巢版本。该库位于http://package.mapr.com/releases/ecosystem/。你也可以准备一个本地仓库与任何版本的蜂巢你所需要的。有关设置库的详细信息,请参阅准备包和存储库

如果你不想从一个库中安装,您可以下载安装包文件所需的特定版本,然后手动安装。单个软件包文件都位于http://package.mapr.com/releases/ecosystem-all/

要更新仓库缓存

如果您打算从库中安装,更新在安装蜂巢每个节点上的存储库缓存。

  在RedHat和CentOS
  在Ubuntu

移植配置文件

如果你已经对你目前的蜂房的安装改变配置属性,您可能希望将这些更改应用到更新的版本。配置属性都位于/ opt/mapr/hive/hive- <VERSION> / conf /中

一般情况下,您可以迁移你的配置更改以下程序:

  1. 升级前,保存在安装有蜂巢的所有节点的配置文件。
  2. 升级蜂巢软件。
  3. 移植自定义配置设置成在新的默认文件机密目录。

特定版本的注意事项

在您升级软件,注意是否有适用于您的任何版本特定的考虑。

蜂房之间的包装变化发布0.7.1和0.9.0

以下几点适用从0.7.1(或更早版本)升级配置单元时,0.9.0(或更高版本)。MAPR没有分配蜂房的任何版本这两个版本之间。

  • 这些版本之间MAPR的文件命名规则改变,这在升级时造成的一种特殊情况。因为反转的文件名的字母顺序,包管理器错误地感知到较新的版本是一个降级。当升级软件,软件包管理工具可能会要求您指定一个特定版本,而不是自动升级到最新版本。
  • 蜂房释放0.9.0(以后)被存储在比MAPR核心软件的单独储存库。此版本对应MAPR核心V2.0的发布。此前V2.0,蜂巢包均位于与MAPR核心相同的存储库。从MAPR V2.0起,蜂巢包放在一个单独的仓库,这需要一些考虑设立仓库。请参阅安装MAPR软件的详细信息。
  • MAPR包装蜂房0.7.1(或更早)作为两个独立的包,MAPR-蜂房MAPR -蜂巢内部。与蜂巢版本0.9.0开始,MAPR蜂巢打包为一个包MAPR-蜂房。当从0.7.1(或更早版本)升级时,如果你只升级MAPR-蜂巢包,包管理器将离开MAPR -蜂巢内部到位文件。你必须明确地卸载MAPR -蜂巢内部清洁从节点的旧版本。

删除硬盘引用到CLDB在MAPR-FS网址

当您升级到群集的MAPR分布的Hadoop或更高的2.0版本,请执行下列步骤来更新配置单元的相对的CLDB节点的行为。

  1. 确认位置在蜂房表属性属性显示的IP和端口的CLDB节点。
    蜂巢>描述扩展<TABLE_NAME>;
  2. 更新表删除从位置值的IP和端口。
    蜂巢> alter table将<TABLE_NAME>设置区域 'maprfs :/ / /用户/蜂巢/仓库/ <TABLE_NAME>'  ;
  3. 验证在mysql metastore数据库位置的URI有一个IP地址和端口号。
    的mysql> SELECT * FROM星展;
  4. 更新星展表中的DB位置的URI删除的IP地址和端口号。
    MySQL的>更新DBS设置DBS.DB_LOCATION_URI = REPLACE(DBS.DB_LOCATION_URI, 'maprfs :/ / <IP>:端口'  'maprfs :/ /'  )WHERE DBS.DB_LOCATION_URI像 'maprfs :/ / <IP>%'  ;
  5. 验证位置在SDS表中的每个条目属性。
    的mysql> SELECT * FROM SDS;
  6. 更新位置在SDS表中的所有条目属性,删除IP地址和端口号。
    MySQL的>更新SDS设置SDS.LOCATION = REPLACE(SDS.LOCATION, 'maprfs :/ / <IP>:端口'  'maprfs :/ /'  )WHERE SDS.LOCATION像 'maprfs :/ / <IP>%'  ;

升级软件

请使用下列方法之一来升级蜂巢组件:

图标

蜂房升级之前备份您的metastore数据库。

用的软件包管理器升级

配置存储库,让你想要安装的版本可用后,您可以使用的软件包管理器从存储库中安装。

  在RedHat和CentOS
  在Ubuntu

如果您是从蜂巢0.7.1升级,你可能必须指定,因为要升级到特定版本,#版本,具体考虑因素

要手动删除以前的版本并安装最新版本的资料库

如果您是从蜂巢0.7.1升级,这个过程可能需要移除MAPR-蜂巢内部包装这是MAPR的蜂巢版本0.9.0及以后的不再是一部分。

运行该程序包管理器两次,第一次删除旧版本,然后重新安装新版本。

图标

复制自定义配置文件在/ opt/mapr/hive/hive- <VERSION> / conf目录在继续之前一个安全的位置。

例如,从0.7.1版本升级到0.10.0版本,请执行以下步骤。在这种情况下,我们假设存储库设置的节点上,并0.10.0是最新的版本库中。

  在RedHat和CentOS
  在Ubuntu
为了保持以前的版本并安装新版本

配置单元安装到版本命名的单独的目录,如/ opt/mapr/hive/hive- <VERSION> /,所以对于多个版本的文件可以共存。

要安装新版本时保留以前的版本,则必须手动安装新版本的软件包文件。

例如,要在保持以前安装的任何版本上安装的版本0.10.0编译18380,请执行以下步骤。

  在RedHat和CentOS
  在Ubuntu

更新蜂房Metastore

图标

运行蜂巢的新版本之前,您需要更新Metastore与新版本一起工作。

请参阅自述文件中的/ opt/mapr/hive/hive- <VERSION> /脚本/ metastore /升级/ <metastore_database>有关更新现有的蜂巢升级为方向后的目录metastore_db架构与新的蜂巢版本一起工作。提供MySQL和德比脚本。

升级后,验证metastore数据库更新成功完成。一些样品诊断:

  • 表显示在蜂巢命令应提供有关你的所有配置单元表的完整列表。
  • 执行简单的SELECT在升级前存在蜂房表操作。
  • 进行过滤,选择在升级前存在蜂房表操作。
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值