大数据与机器学习:实践方法与行业案例.3.5 本章小结

3.5 本章小结

本章使用Java实现了数据闭环中的关键环节,使数据能够自动且高效地批量导入分析环境。为了便于程序实现,首先定义了数据缓冲区的文件存储规则、命名规则和清理规则。相对于代码上的实现,深刻理解这些方法论则更为重要。
依据数据缓冲区的基本规则,分别设计了扫描文件、下载文件、解压文件和加载文件的相关流程,并进一步设计了相关的数据库配置表。
最后,根据上述设计,使用Java多线程实现了数据的整个加载过程。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值