其它
新技术调研分析,奇奇怪怪的东西
IceelfLuo
搞搞数据,搞搞算法
展开
-
Hive:Either list of columns or a custom serializer should be specified等两个问题
这几天被拉去写了几天SQL,出现了两个新的问题……说实话实在太蠢了,所以一定要记录下来:1、Either list of columns or a custom serializer should be specifieddrop table if exists table1;create table if not exists table1; asselect * from temp.card_version0当写了一万行SQL的时候,很容易在细枝末节上出现问题,比如第二行多了一个分号……这原创 2020-08-26 16:59:40 · 6069 阅读 · 1 评论 -
向hive插入数据时出现中文乱码
问题顾名思义,在通过shell或hue向hive插入数据时,有可能出现中文乱码。和运维GG聊了一下以后,说这个是集群缺陷问题,以后会解决。那眼下的处理方式呢?我想了个简单的办法:--出现乱码insert into temp.Iceelfluo_featurelist PARTITION(ymd='2020-08-10') values ("3517146571244","张三","6","0","3");--不出现乱码insert into temp.Iceelfluo_featurelist原创 2020-08-10 17:00:23 · 1077 阅读 · 0 评论 -
Hive:Execution Error, return code 2 和Error while compiling statement: FAILED三个问题
最近在Hive上跑数跑出了三个问题,应该都是hive查询引擎的缺陷,解决问题后照例要记录一下:Execution Error, return code 2Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask这个是因为查询数据量太大,如果建表时存储格式为 Parquet 就会造成内存溢出。建议:建表时使用 TEXTFILE 进行存储(STORED AS TEXTFILE) 。Error whi原创 2020-07-31 16:25:12 · 3706 阅读 · 0 评论 -
xls与csv转换:多工作表合并与拆分
今天工作上遇到了xls与csv互转的场景,分别是xls的多工作表批量转csv,和多个csv纵向合并成一个xls,简单记录一下。多工作表批量转csv先用ALT+F11打开VBA编辑窗口,在左边列表框点鼠标右键选插入模块粘贴一个宏:Sub 转换CSV()iPath = ThisWorkbook.PathFor n = 1 To Worksheets.Count Name = "\" & Sheets(n).Name & ".csv" filepath = iPath &原创 2020-07-21 22:53:21 · 777 阅读 · 0 评论 -
Win10解决Disciples 2圣战群英传2卡顿问题
最近想翻点老游戏出来玩,比如圣战群英传2,但是卡得我mmp,一通搜索和捣鼓之后,终于发现了比较简单的解决问题的方法。1、首先确认电脑中是否有vcredist2010,至少08年以后的VC++库,没有就安。2、检查游戏根目录下有没有d3d9.dll,没有就下方传送门。https://dl.pconline.com.cn/download/91252.html如果还没能解决问题,那么:3、看看根目录有没有Disciple.ini,如果没有:3.1、看看根目录有没有一个骷髅头头像的Importer.e原创 2020-07-19 16:57:30 · 6016 阅读 · 2 评论