HBase的Will not attempt to authenticate using SASL (unknown error)小结

最新推荐文章于 2024-09-07 02:16:01 发布

nanphonfy

最新推荐文章于 2024-09-07 02:16:01 发布

阅读量7.8k

点赞数 1

分类专栏： hbase 文章标签： java hbase

本文链接：https://blog.csdn.net/nanphonfy/article/details/53106178

版权

本文总结了解决HBase SASL认证失败的问题。通过调整项目依赖、添加Hadoop相关jar包、处理Windows环境下winutils.exe缺失、解决SSH隧道问题以及修正hosts文件，最终成功连接到HBase集群。

摘要由CSDN通过智能技术生成

1.背景

业务场景：
输入IMSI标识，返回用户历史足迹图。因为用户使用的卡数量很多，记录可达千万级，如果放在关系型数据库中明显压力巨大，于是把它放入HBase，再由Java API调用之。

2.解决步骤

①要调用HBase得导入一系列的依赖包，类似于MySql驱动包。项目连接它，就需要其提供的API，所以我们要先到Maven中央仓库去查找连接HBase的依赖包：

输入pom文件我们就可以得到相关的依赖。

<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
    xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
    <modelVersion>4.0.0</modelVersion>
    <groupId>cn.sibat</groupId>
    <artifactId>uhuibao-hbase</artifactId>
    <version>0.0.1-SNAPSHOT</version>
    <packaging>war</packaging>

    <dependencyManagement>
        <dependencies>
            <dependency>
                <groupId>org.glassfish.jersey</groupId>
                <artifactId>jersey-bom</artifactId>
                <version>${jersey.version}</version>
                <type>pom</type>
                <scope>import</scope>
            </dependency>
        </dependencies>
    </dependencyManagement>

    <dependencies>
        <dependency>
            <groupId>org.glassfish.jersey.containers</groupId>
            <artifactId>jersey-container-servlet</artifactId>
        </dependency>

        <dependency>
            <groupId>net.sf.json-lib</groupId>
            <artifactId>json-lib</artifactId>
            <version>2.4</version>
            <classifier>jdk15</classifier>
        </dependency>

        <!-- 连接Hbase -->
        <dependency>
            <groupId>org.apache.hbase</groupId>
            <artifactId>hbase-client</artifactId>
            <version>1.0.3</version>
        </dependency>
        <dependency>
            <groupId>jdk.tools</groupId>
            <artifactId>jdk.tools</artifactId>
            <version>1.7</version>
            <scope>system</scope>
            <systemPath>${JAVA_HOME}/lib/tools.jar</systemPath>
        </dependency>


        <-- 以下的依赖，可以把上面的hbase依赖的Hadoop环境版本设置成与集群的Hadoop版本一致，但是它也会引发Jersey冲突，因为新版的Hadoop的jar包中的关联依赖有Jersey的jar包1.9和2.6的冲突。
        <dependency>
            <groupId>org.apache.hadoop</groupId>
            <artifactId>hadoop-annotations</artifactId>
            <version>${hadoop-version}</version>
        </dependency>
        <dependency>
            <groupId>org.apache.hadoop</groupId>
            <artifactId>hadoop-auth</artifactId>
            <version>${hadoop-version}</version>
        </dependency>
        <