- 博客(4)
- 资源 (5)
- 收藏
- 关注
RSS订阅原创 Hadoop 二次排序实现
业务场景:通常情况下,在MR操作中到达Reduce中的key值都是按照指定的规则进行排序,在单一key的情况下一切都进行的很自然,直到我们要求数据不再单纯的按key进行排序,以如下数据举例:Key -> value:100 -> 2017-02-27 19:21:31,45,67,6850 -> 2017-02-27 19:22:04,89,
2017-02-28 08:23:43
1299
原创 数据发送接口源码示例
由于项目中经常需要写各种对接的接口，此次决定花点心思设计一下，避免每次都重复开发。场景描述：重数据库中读取数据发送至WebService接口，需要对发送的数据进行确认。以往开发的痛点在于:要操作的表及表的字段不确定对接的WebService接口及规范不统一，此原因在于对接的第三方。 设计思路:抽象容器类，负责管理所有的作业，并调度Work,BaseContaine
2017-02-09 20:33:03
579
1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人