![](https://img-blog.csdnimg.cn/20201014180756923.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
日常开发中的问题及解决
文章平均质量分 79
老薛的猫出海抓鱼不在这
哎吆~技术小渣
展开
-
Sqoop抽取Hive数据到Oracle
使用Sqoop抽取Hive数据到Oracle,报错:Timestamp format must be yyyy-mm-dd hh:mm:ss[.fffffffff] at java.sql.Timestamp.valueOf(Timestamp.java:204) at ...这是一个Sqoop时间戳转化方法的格式差异问题:各系统实现的时间戳转换方法中的截断和位数细节上有所差异。1.4问题日志:当导入Oracle时会出现时间转化失败的问题。原创 2023-05-03 15:37:14 · 644 阅读 · 0 评论 -
记DataX-datax_v202209:oceanbasev10writer版本号比较问题导致写入OceanBase3.2.3.0报错:java.lang.NumberFormatException
Error:使用DataX中oceanbasev10writer插件向OceanBase3.2.3.0中写数据报错:java.lang.NumberFormatException: multiple points源码分析、源码调试、源码问题修复、本地调试DataX原创 2022-10-25 01:20:52 · 1808 阅读 · 1 评论 -
Sqoop将Hive数据导入MySQL异常
完美解决:使用Sqoop导数据导入mysql报错duplicate entry for ' ' key primary原创 2022-01-02 21:50:07 · 1906 阅读 · 0 评论 -
Sqoop工具模块之sqoop-export详解附案例
最全最细致Sqoop工具模块之sqoop-export详解,附案例翻译 2022-01-02 14:00:30 · 6251 阅读 · 0 评论 -
@Transient注解的使用
@Transient注解的使用转自:https://blog.csdn.net/sinat_29581293/article/details/51810805java 的transient关键字的作用是需要实现Serilizable接口,将不需要序列化的属性前添加关键字transient,序列化对象的时候,这个属性就不会序列化到指定的目的地中。transient使用小结1)一旦变量被t...转载 2020-04-24 18:55:53 · 862 阅读 · 0 评论 -
SpringMVC中css,js,图片等静态资源被拦截的解决办法
一、静态资源的存放路径css,js,图片等静态资源存放在项目的路径必须为二、html、jsp导入静态资源文件html、jsp页面中的导入静态资源文件:js:css:图片:二、web.xml和SpringMVC配置文件中的配置方法一:web.xml中的配置:SpringMVC配置文件中的配置:方法二:web.xml中的配置:...转载 2020-02-05 17:01:40 · 416 阅读 · 1 评论 -
解决HBase错误,ERROR: org.apache.hadoop.hbase.PleaseHoldException: Master is initializing
HBase错误日志:2019-12-23 00:35:05,844 ERROR [Thread-65] master.HMaster: Master failed to complete initialization after 900000ms. Please consider submitting a bug report including a thread dump of this ...原创 2019-12-23 01:11:42 · 2605 阅读 · 3 评论 -
解决CentOS启动提示unexpected inconsistency;RUN fsck MANUALLY的问题(断电重启报错)
使用CentOS过程中,不小心断了电,导致了下面的问题,记录一下解决的方法出现这样的问题,极大可能是异常断电。解决方法如下,输入密码进入命令行,执行(由于截图中是/dev/mapper/vg_cmaster-lv_root出错,所以命令中是对/dev/dev/mapper/vg_cmaster-lv_root进行恢复)fsck -y /dev/mapper/vg_cmaster-lv...原创 2019-11-07 17:18:33 · 3202 阅读 · 1 评论 -
Hue安装详解(编译中的坑与爬)
1.上传解压安装包Hue的安装支持多种方式,包括rpm包的方式进行安装、tar.gz包的方式进行安装以及cloudera manager的方式来进行安装等,我们这里使用tar.gz包的方式来进行安装,此教程也适用于git下来的源码包的编译安装,主要是教会分析与解决编译过程中的出现的依赖问题。Hue的压缩包的下载地址:http://archive.cloudera.com/cdh5/c...原创 2019-10-27 18:03:04 · 1468 阅读 · 2 评论 -
关于yum命令下载出现 fails with the error : [Errno 256] No more mirrors to try等的问题分析及解决
环境Red Hat Enterprise Linux 5 and later Red Hat Customer Portal Red Hat Subscription Management (RHSM) Red Hat Satellite问题yum updatefails with the error : [Errno 256] No more mirrors to try y...原创 2019-10-27 16:55:36 · 1245 阅读 · 0 评论 -
想到开头,没想到结尾系利——MapReduce自定义分区策略,序列化相关的坑
有需求实现按手机号所属省份划分来对用户进行划分,相同省份的用户打印在同一文件中,想到可以使用MapReduce的自定义分区策略来实现,大致思路是获取手机号,获取数据库手机号号段--省份--省份编号对应关系,查询手机号查询对应关系,把省份编号作为分区编号即:Tasks编号,修改下面算法即可:p_Id=hash(userPhoneNumber)%TasksNum.然而想到开头,没想到结尾,却入...原创 2019-10-15 01:53:06 · 232 阅读 · 0 评论 -
DeBug调试解决在跑MapReduce程序时,出现Caused by: java.lang.ArrayIndexOutOfBoundsException: 1(数组越界异常)问题
在跑MapReduce程序时,出现了Caused by: java.lang.ArrayIndexOutOfBoundsException: 1(数组越界异常)分析过程:从这些提示信息中可以获取如下信息:1、错误发生在17行,找到对应行2、发生错误的时候,下标的值为1接下来分析为什么下标值为什么是1时出现越界,就可以解决了。我们使用打断点的方式找到问题根源:再出...原创 2019-10-13 13:49:47 · 4411 阅读 · 2 评论