- 博客(2)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 Spark任务流程解析
Spark主要的角色SparkControlProcesses Driver Application entry point that contains the SparkContext instance Master In charge of scheduling and resource orchestration Worker Responsible for node ...
2021-01-07 17:13:40
584
原创 多线程批量提交Spark任务
一.目的1.避免资源的浪费2.提高任务执行的效率3.防止任务未执行完毕，session和线程池已关闭，导致任务失败二、异常conding：1）method 1 for (String s : list) { Dataset<Row> sql = sparkSession.sql(s); sql.show(); } sparkSession.close(); Syste.
2021-01-07 16:35:14
1368
2
ElasticSearch写入原理及优化.docx
ElasticSearch写入原理及优化案例，此文章深入刨析了ElasticSearch在put和get时的原理。并且对于批量数据写入时进行优化给出最佳的方案和示例
2020-09-01
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人