hive 配置metastore连接参数

参照

hive1.1.0完全分布式环境安装(有安装包 步骤完整 不走弯路)_Mr_Bright的博客-CSDN博客

对hive进行配置,配置hive-site.xml时出现了与预想不一样的结果

上文中修改hive-site.xml内容如下

<configuration>
  <property>
    <name>hive.matastore.warehouse.dir</name>
    <value>/opt/hive/warehouse</value>
  </property>
  <!--使用本地mysql-->
  <property>
    <name>hive.matastore.local</name>
    <value>true</value>
  </property>
  <!--mysql连接地址-->
  <property>
    <name>java.jdo.option.ConnectionURL</name>
    <value>jdbc:mysql://127.0.0.1:3306/hive?createDatabaseIfNotExist=true</value>
  </property>
  <!--mysql驱动-->
  <property>
    <name>java.jdo.option.ConnectionDriverName</name>
    <value>com.jdbc.mysql.Driver</value>
  </property>
  <!--mysql用户名-->
  <property>
    <name>java.jdo.option.ConnectionUserName</name>
    <value>root</value>
  </property>
  <!--mysql密码-->
  <property>
    <name>java.jdo.option.ConnectionPassword</name>
    <value>ok</value>
  </property>
</configuration>

根据该配置,执行后续的schematool -dbType mysql -initSchema,发现元数据并没有使用mysql,后经搜索发现数参数值配置不符修改成如下配置后,初始schema信息才能得以成功

<property>
    <name>javax.jdo.option.ConnectionURL</name>
    <value>jdbc:mysql://hdp001:3306/hive</value>
  </property>
  <!--mysql驱动-->
  <property>
    <name>javax.jdo.option.ConnectionDriverName</name>
    <value>com.mysql.jdbc.Driver</value>
  </property>
  <!--mysql用户名-->
  <property>
    <name>javax.jdo.option.ConnectionUserName</name>
    <value>root</value>
  </property>
  <!--mysql密码-->
  <property>
    <name>javax.jdo.option.ConnectionPassword</name>
    <value>ok</value>
  </property>
  <property>
    <name>hive.metastore.schema.verification</name>
    <value>false</value>
  </property>

比较两个配置文件,发现配置属性名字,有一个差异点在于

java.jdo.option.ConnectionURL

javax.jdo.option.ConnectionURL

可识别的参数当中java改为了javax

记录一下,

当pyspark中的hive.metastore.uris无法识别时,可能会导致连接元数据存储失败。错误信息中的"Could not connect to meta store using any of the URIs provided"表示无法使用提供的URIs连接到元数据存储。 这个问题可能有几种可能的原因。一种可能是元数据存储服务没有正确配置或启动。另一种可能是配置的URIs不正确,无法连接到元数据存储。 为了解决这个问题,你可以按照以下步骤进行排查和修复: 1. 确保hive.metastore.uris参数的值正确配置。该参数应该包含元数据存储服务的URI,例如thrift://localhost:9083。你可以检查你的配置文件或代码中是否正确设置了这个参数。 2. 检查元数据存储服务是否已经正确配置和启动。你可以验证元数据存储服务的状态,并确保它正在运行。 3. 检查网络连接是否正常。如果你的代码运行在不同的机器上,确保能够通过网络连接到元数据存储服务的URI。 4. 检查元数据存储服务的日志文件,查看是否有任何错误或异常信息。根据日志中的错误信息,你可以进一步排查和解决问题。 总结来说,当pyspark中的hive.metastore.uris无法识别时,你需要确保元数据存储服务已经正确配置和启动,检查URIs是否正确,并检查网络连接。如果问题仍然存在,你可以查看元数据存储服务的日志文件以获取更多信息。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* [hive metastore java api使用](https://download.csdn.net/download/weixin_38707862/14037512)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_1"}}] [.reference_item style="max-width: 33.333333333333336%"] - *2* [10、hive配置hive.metastore.uris后报错](https://blog.csdn.net/Norni/article/details/120512325)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_1"}}] [.reference_item style="max-width: 33.333333333333336%"] - *3* [hive hive.metastore.warehouse.dir 和 hive.metastore.warehouse.external.dir 的作用](https://blog.csdn.net/houzhizhen/article/details/127314671)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_1"}}] [.reference_item style="max-width: 33.333333333333336%"] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值