1.集群处理:比如pandas --> modin 使用集群处理
2.队列:celery等队列,缓解高并发压力
3.负载均衡:nginx进行负载均衡,转发多个后台处理
4.缓存:高频数据进行缓存,redis等
5.重试机制:对异常失败的任务进行重试
1.集群处理:比如pandas --> modin 使用集群处理
2.队列:celery等队列,缓解高并发压力
3.负载均衡:nginx进行负载均衡,转发多个后台处理
4.缓存:高频数据进行缓存,redis等
5.重试机制:对异常失败的任务进行重试