- 博客(1)
- 收藏
- 关注
原创 【spark】关于spark处理上百T数据清洗过滤的思考
我,菜鸡一只!本文会通过读取数据文件,外部传入参数,处理数据,保存数据,参数设置这几个点来宏观的说说我自己对于spark使用中的一些注意点继上一次写文章到现在好久了哦!工作上,数据的日常需求还是一直有的,然后我自己又想接一接java功能上的需求(多写写java代码提升自己的眼界),在这样的情况下,我的工作已经基本饱和了,结果突然领导说还要开个新的数据模型,年前要给测试反馈,所以12...
2020-02-12 18:57:44 2425 1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人