![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
项目
山顶看数据
这个作者很懒,什么都没留下…
展开
-
在项目中的定时作用
Calendar cal = Calendar.getInstance();//不仅可以获取当前时间,还能指定需要获取的时间点,在项目中应用中达到定时的作用 cal.add(Calendar.DATE,1); //获取每个月的第五天+1天(也就是获取每个月的第6天) String data = new SimpleDateFormat("yyyyMMdd").format(cal.getTime()); ...原创 2022-01-12 10:54:45 · 81 阅读 · 0 评论 -
通过sparksql读取presto中的数据存到clickhouse
整体结构 Config package com.fuwei.bigdata.profile.conf import org.slf4j.LoggerFactory import scopt.OptionParser case class Config( env:String = "", username:String = "", password:String = "", .原创 2022-01-08 15:55:10 · 1863 阅读 · 0 评论 -
把hive数据导入到mysql并进行可视化展示
效果展示 [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-YYZMeccW-1640344966005)(/Users/lifuwei/Library/Application Support/typora-user-images/image-20211224170025068.png)] 我的大致思路是 1、写了一个udf函数,这个函数的作用就是把对应的ip转换成省份,这个主要参考的是老师给的ip.txt(里面有很多ip所对应的地址) 2、把这个udf函数放到hive中,然后对原创 2021-12-24 19:24:04 · 3024 阅读 · 0 评论