bear

异常信息：Exception in thread "main" java.lang.IllegalAccessError: class org.apache.hadoop.hdfs.web.HftpFileSystem cannot access its superinterface org.apache.hadoop.hdfs.web.TokenAspect$TokenManagementDelegator完整错误信息如下：解决：在IDEA导出jar包之前，将依赖包中所有hadoop.

错误：java.lang.SecurityException: Invalid signature file digest for Manifest main attributes原因：在使用maven打包市，有些包有签名，导致错误或无法访问解决：打开jar包进入META-INF目录，将*.SF，*.DSA，*.RSA，*.MF文件删除注意：*.MF文件也会造成java.lang.ClassNotFoundException: com.SparkJavaVersion 类找不到的问...

环境：CDH6.3.2Kudu 1.10.0-cdh6.3.2Spark2.4.0-cdh6.3.2错误：java.lang.ClassNotFoundException: Failed to find data source: org.apache.kudu.spark.kudu.java.lang.ClassNotFoundException: org.apache.kudu.spark.kudu.DefaultSource解决：将/opt/clouder..

前段时间公司业务需求，需要把oracle中的数据迁移到数据仓库中(kudu整合的hive)，为了使用kudu方便，kudu的日常操作通过impala来完成。由于第一次整合sparkSQL与kudu,所以打算通过一些demo记录一下遇到的问题。oracle数据导入到kudu中，代码如下：object OracleToKudu { def main(args: Array[String]): Unit = { val spark = SparkSession.builder....

问题​前段时间由于项目需要将spark计算后的大量数据插入到HBbase数据库中，但在项目进行过程中发现整个Hadoop集群很不稳定，集群状态中CPU使用率很高，运行一段时间后HBase运行不稳定或者Hbase集群挂掉。说明​数据库的性能表现与很多因素相关，比如数据库本身的参数配置、客户端API的使用、表和字段的设计，及操作系统、JVM等。THP是为了提升性...

1.  问题导读：     Failed to locate the winutils binary in the hadoop binary path     java.io.IOException: Could not locate executablenull\bin\winutils.exe in the Hadoop binaries.2.  问题解决：      仔细查

HBase架构核心组件的知识总结及自我理解

HBase文件系统LSM数据结构的主题思想与特点

hdfs使用copyToLocalFile下载文件时出现Exception in thread "main" java.lang.NullPointerException。

hive对数据的导出

使用SQOOP分别实现关系型数据库入mysql与hive、hbase之间的数据交流。

hive数据导入的几种格式。包括load data、查询语句导入、动态语句导入、CTAS格式数据导入。