- 博客(2)
- 收藏
- 关注
转载 scala学习笔记-RDD操作
RDD操作大致分为转换操作和行动操作,由于spark的惰性机制,导致在遇到行动操作前是不会进行运算的, 直到遇到行动才做才出发运算。转换操作:filter 过滤map 转换函数flatMap 与map类似,但是映射为0个或多个groupByKey 返回key,iterablereduceByKey返回一个新的(K,V)形式的数据集,其中的每个值是将每个key传递...
2019-09-16 22:59:00 559
转载 关于server.max-http-header-size参数的配置
在某次项目的开发过程中,因为是接手的项目,所以下意思认为参数的配置是比较合理的,基本上除非涉及到地址等变更内容外,没有关注其他参数。当项目提测时,测试告诉我说整个系统并发到10基本就会被压垮,让我去检查下接口的设置。我去系统上下载了日志,查看了堆栈内容,发现并没有明显的任何拖延时间的处理程序,整个内容获取的数据也在合理的范围内,但是一旦并发数上去了,就又会被压垮。当时因为其他问题比较...
2019-09-12 11:29:00 7229
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人