- 博客(3)
- 收藏
- 关注
RSS订阅原创 SqlServer插入五百万条数据的脚本（存储过程）
ALTER PROCEDURE 函数名称 ASDECLARE @COUNT INTEGER -----声明变量DECLARE @INDEX INTEGER -----声明变量SET @COUNT = 5000001 -----赋予初始值SET @INDEX = 1 -----赋予初始值WHILE ----------条件 @INDEX <@COUNT ...
2020-01-01 13:51:44
1015
原创 Spark的checkpoint机制简析
Spark中的checkpoint的机制，用在机器学习领域中较多，因为你要写很多的rdd，如果你在写rdd的过程中的部分rdd丢失了话，当然可以通过血统机制去恢复，但是这样十分消耗资源，所以一般会引入checkpoint机制，把写的那一堆的rdd进行保存到hdfs上面，这个保存的是这个rdd的结果，并不是最后你执行action的结果。当执行action的时候会发现有两个进程在执行，因为一个是计算任...
2018-05-23 10:12:25
534
转载 数据分析与挖掘的联系和区别！
作者：匿名用户链接：https://www.zhihu.com/question/20127962/answer/37363309来源：知乎著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。转自：数据分析与挖掘的联系和区别！ 数据分析只是在已定的假设，先验约束上处理原有计算方法，统计方法，将数据分析转化为信息，而这些信息需要进一步的获得认知，转化为有效的预测和决策，这时...
2018-05-23 09:44:01
4290
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人