- 博客(8)
- 收藏
- 关注
RSS订阅原创 Hive踩坑指南
1.File user/hive/tmp does not exsitFile user/hive/tmp does not exsit解决办法：<dependency> <groupId>org.apache.hive</groupId> <artifactId>hive-jdbc</artifactId> <version>1.1.0</version></dependency>=====改
2020-10-27 15:55:46
281
原创 DataX踩坑指南
1.编码格式导致读写乱码Win10的文件默认GBK格式，Mac的文件默认UTF-8解决办法：使用DataX导入导出数据时reader和writer里要注明文件的编码格式，编码格式错误会导致类型报错，或者导出的数据出现乱码。2.用csv文件导入导出出现脏数据问题手动编辑的xls文件，无论数据是否为空，中间都要加上分隔符，否则会出现索引越界的问题解决办法：补充分隔符，或者使用办公软件编辑excel文件<-未完待续，持续补充->有遇到比较奇葩的问题欢迎补充一起探讨~...
2020-09-17 16:36:15
1793
5
转载 Kylin Java RESTful API
转载:https://www.cnblogs.com/dreamfactory/p/5588203.htmlimport java.io.BufferedReader;import java.io.InputStream;import java.io.InputStreamReader;import java.io.OutputStream;import java.net.HttpURLConnection;import java.net.URL;import org.apache.comm
2020-09-15 11:09:22
178
原创 解析SQL语法树-获取依赖表
简单写了个小工具，用来获取SQL中的数据来源表代码如下：package com.app.utils;import java.util.ArrayList;import java.util.List;import java.util.Map;import com.alibaba.druid.sql.SQLUtils;import com.alibaba.druid.sql.ast.SQLStatement;import com.alibaba.druid.sql.dialect.mysql
2020-09-01 13:57:37
1400
转载 【转载】Datax限速bug
转载自(侵删)：https://zhmin.github.io/2018/12/16/datax-ratelimiter-bug/Datax 限速原理使用官方文档并没有写到怎么配置限速，通过观察源码才得知，需要配置core.transport.channel.speed.byte或core.transport.channel.speed.record值。这两个值是指定每个channel的速度。注意job.setting.speed.byte和job.setting.speed.record也是指定速度
2020-07-09 10:02:31
3278
原创 Kafka+SparkStreaming-实战入门（Java版）
Producer.classpackage com.fromjoker;import org.apache.kafka.clients.producer.KafkaProducer;import org.apache.kafka.clients.producer.Producer;import org.apache.kafka.clients.producer.ProducerRecord;import java.util.HashMap;import java.util.Map;impo
2020-07-03 15:50:23
419
原创 Hbase-增删查改（Java版本）
package com.fromjoker;import java.io.IOException;import java.util.ArrayList;import java.util.List;import java.util.Map;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.Cell;import org.apache.hadoop.hbase.HBaseConfiguratio
2020-07-03 15:13:38
250
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人