- 博客(6)
- 收藏
- 关注
原创 Spark部署与job运行
原文链接:https://spark-internals.books.yourtion.com/markdown/1-Overview.html部署图 从部署图中可以看到整个集群分为 Master 节点和 Worker 节点,相当于 Hadoop 的 Master 和 Slave 节点。Master 节点上常驻 Master 守护进程,负责管理全部的 Worker 节点。Worker 节点上常
2017-05-27 22:24:25 623
转载 数据结构与算法--子数组和为k
问题:子数组和为kGiven an nonnegative integer array, find a subarray where the sum of numbers is k.Your code should return the index of the first number and the index of the last number.ExampleGiven [1, 4, 2
2017-05-27 09:17:09 481
转载 数据结构与算法--子数组和为0
问题:子数组和为0Given an integer array, find a subarray where the sum of numbers is zero.Your code should return the index of the first number and the index of the last number.ExampleGiven [-3, 1, 2, -3, 4]
2017-05-26 22:33:52 917
原创 天池O2O优惠券使用预测比赛--总结
1. 赛题简介 以优惠券盘活老用户或吸引新客户进店消费是O2O的一种重要营销方式。然而随机投放的优惠券对多数用户造成无意义的干扰。对商家而言,滥发的优惠券可能降低品牌声誉,同时难以估算营销成本。 个性化投放是提高优惠券核销率的重要技术,它可以让具有一定偏好的消费者得到真正的实惠,同时赋予商家更强的营销能力。本次大赛为参赛选手提供了O2O场景相关的丰富数据,希望参赛选手通过分析
2017-05-24 14:18:16 8048
转载 Spark--RDD编程模型
弹性分布式数据集(RDD)编程模型1) RDD设计目标RDD用于支持在并行计算时能够高效地利用中间结果,支持更简单的编程模型,同时也具有像MapReduce等并行计算框架的高容错性、能够高效地进行调度及可扩展性。RDD的容错通过记录RDD转换操作的lineage关系来进行,lineage记录了RDD的家族关系,当出现错误的时候,直接通过lineage进行恢复。2)
2017-05-19 11:00:12 398
转载 动态规划之01背包、完全背包问题
转载于http://blog.csdn.net/kangroger/article/details/38864689在hihocoder上面的题目中看到的这个问题,总结一下。先看01背包问题。01背包问题:一个背包总容量为V,现在有N个物品,第i个 物品体积为weight[i],价值为value[i],现在往背包里面装东西,怎么装能使背包的内物品价值最大?看到这个问题,可能会想
2017-05-17 18:51:18 357
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人