![](https://img-blog.csdnimg.cn/20201014180756757.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
lorrystars
这个作者很懒,什么都没留下…
展开
-
hive数据文件加载的区别
应用场景:开发数据采集工具,采集各种类型数据库数据为文件到服务器 数据文件命名方式:/datacollection/抽取数据业务日期/系统名称/系统名称_源系统schema_表名_业务日期_666_批次号.DAT 数据任务文件命名方式:/datacollection/抽取数据业务日期/系统名称/系统名称_源系统schema_表名_业务日期_666_批次号.CTL 当部署采集工具时,当采集工具应用所在服务器和hiveserver服务器不在同一个服务器上面的时, 会出现本地文件不存在的报错:no files m原创 2020-05-10 22:28:58 · 266 阅读 · 0 评论 -
host parameter is null
//1.解析ip地址的时候遇到的问题,通过http接口获取省市信息 Caused by: java.lang.IllegalArgumentException: host parameter is null 此原因主要是因为没有传入URL到http接口工具类中 def get(url:String):String ={ //1.创建一个Httpclient val client = new Htt...原创 2019-11-23 17:08:47 · 1898 阅读 · 0 评论 -
redis基本介绍以及操作
一,redis概述 1.基本介绍 1.1redis介绍 现在市面上用得非常多的一款内存数据库 Redis是当前比较热门的NOSQL系统之一,它是一个开源的使用ANSI c语言编写的key-value存储系统(区别于MySQL的二维表格的形式存储。)。和Memcache类似,但很大程度补偿了Memcache的不足。和Memcache一样,Redis数据都是缓存在计算机内存中,不同的是,Memc...原创 2019-10-20 12:46:44 · 138 阅读 · 0 评论