大型互联网系统平台化的主要挑战在于:
- 大量的外部对接
- 批量数据处理能力
- 服务的抽象、解耦和组合(SOA化)
- 分布式要求是刚需,要求拆分大事务和数据的弱一致性
- 消息驱动和消息中间件
- 数据的并发处理能力,要求分库分表
- 灵活多变的各种规则
- 定时任务调度问题,包括调度框架、并发控制、同步机制、工作流引擎等。
- 消息驱动和消息中间件技术。
- 服务接口定义,包括接口粒度、循环依赖、幂等等。
- 批处理逻辑和框架,包括批量接口、批量文件、批量幂等重试等。
- 拆分大事务和数据最终一致处理。
- 超级网关,抽象对接逻辑,通过动态语言和代码生成技术,使得各种外部对接开发更加快速,耦合度更低。
- 分库分表技术
- 海量数据搜索技术。
- 规则引擎技术。