tianyeshiye

天之道,损有余而补不足.人之道,则不然,损不足以奉有余.孰能有余以奉天下?唯有道者...

排序:
默认
按更新时间
按访问量

【Big Data 每日一题】Spark开发性能调优总结

1. 分配资源调优 Spark性能调优的王道就是分配资源,即增加和分配更多的资源对性能速度的提升是显而易见的,基本上,在一定范围之内,增加资源与性能的提升是成正比的,当公司资源有限,能分配的资源达到顶峰之后,那么才去考虑做其他的调优 如何分配及分配哪些资源 在生产环境中,提交spark作业时...

2018-09-18 23:04:48

阅读数:40

评论数:0

大牛博客

过往记忆   ---   大数据 马猴烧酒└(┐卍^o^)卍ドゥルルル   ---   架构、微服务 Laurence的技术博客   ---   大数据、企业级应用架构 董的博客  ---   大数据  (技术版本相对旧) 微软、Google等面试题    ---   面试 大数据专题...

2018-09-05 23:39:46

阅读数:13

评论数:0

大数据框架、概念等 简短总结 (持续总结中)

数据仓库  更关注数据分析层面(OLAP) 一次写入、多次读取 HDFS 分布式文件系统 HDFS适合批处理场景,不支持数据随机查找,不适合增量数据处理且不支持数据更新 Habse 分布式文件系统的动态查询,HDFS的随机读写操作 HBase并不适合传统的事物处理程序或关联分析,不支...

2018-08-29 23:30:56

阅读数:18

评论数:0

【Big Data 每日一题】目录

Spark 【Big Data 每日一题】Spark开发性能调优总结 【Big Data 每日一题20180821】Spark中ml和mllib的区别? 【Big Data 每日一题20180828】Maven 中 jar 包的 Snapshot 和 Release 版本区别? 【Big ...

2018-08-15 23:43:06

阅读数:27

评论数:0

Book Collection

Essential Netty in Action 《Netty 实战(精髓)》 https://github.com/waylau/essential-netty-in-action Essential Netty in Action 《Netty 4.x 用户指南》 https://gi...

2018-06-26 21:54:43

阅读数:44

评论数:0

编程思想总结 - 堆排序,少做无用功

堆排序,用于解决一下通用问题消费前十名总成绩最好的前十名思想源自吴军

2018-06-26 20:27:37

阅读数:24

评论数:0

编程思想 - 五大常用算法详解

https://www.cnblogs.com/brucemengbm/p/6875340.htmlhttps://blog.csdn.net/changyuanchn/article/details/51476281https://www.cnblogs.com/chuninggao/p/729...

2018-04-15 20:46:11

阅读数:81

评论数:1

编程思想总结 - 分解问题,解决问题

1, 先把问题理解清楚       确认好场景,考虑的因素       沟通并确认好已知2, 基于已知信息,分解问题        在已知的基础上,把一个问题分解成几个子问题3, 解决问题 (避免做无用功)        解决子问题,找到更好的解决方法4, 基于分布的子问题解决,重构解决方案, 全...

2018-04-15 13:05:03

阅读数:32

评论数:0

【Big Data 每日一题20181017】

【Big Data 每日一题20181017】

2018-10-17 22:42:34

阅读数:23

评论数:0

【Big Data 每日一题20181016】

【Big Data 每日一题20181016】

2018-10-17 22:42:14

阅读数:12

评论数:0

【Big Data 每日一题20181015】

【Big Data 每日一题20181015】

2018-10-15 23:15:14

阅读数:0

评论数:0

【Big Data 每日一题20181014】

【Big Data 每日一题20181014】

2018-10-15 23:14:57

阅读数:2

评论数:0

【Big Data 每日一题20181013】

【Big Data 每日一题20181013】

2018-10-13 23:15:39

阅读数:1

评论数:0

【Big Data 每日一题20181012】

【Big Data 每日一题20181012】

2018-10-13 23:15:18

阅读数:1

评论数:0

【Big Data 每日一题20181011】

【Big Data 每日一题20181011】

2018-10-11 22:19:34

阅读数:3

评论数:0

【Big Data 每日一题20181010】

【Big Data 每日一题20181010】

2018-10-11 22:19:16

阅读数:2

评论数:0

【Big Data 每日一题20181009】

【Big Data 每日一题20181009】

2018-10-09 19:56:10

阅读数:8

评论数:0

【Big Data 每日一题20181008】

【Big Data 每日一题20181008】

2018-10-08 20:31:54

阅读数:14

评论数:0

【Big Data 每日一题20181007】

【Big Data 每日一题20181007】

2018-10-08 20:31:32

阅读数:16

评论数:0

【Big Data 每日一题20181006】

【Big Data 每日一题20181006】

2018-10-08 20:31:11

阅读数:15

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭