- 博客(2)
- 收藏
- 关注
RSS订阅翻译 Spark调优（数据序列化和内存调优）
翻译自Spark官网文档：https://spark.apache.org/docs/2.1.0/tuning.html 前言 由于大多数Spark计算的内存使用特性，集群中的任何资源都可能成为Spark计算程序中的瓶颈：CPU，网络带宽或是内存。大多数情况下，如果内存可以容纳数据量，那么瓶颈就会是网络带宽，但有时，用户也需要去做一点调优的工作，例如以序列化的格式存
2017-12-06 11:44:21
15461
原创 查询优化技术概念
本文摘取自《数据库查询优化器的艺术》 一、查询优化技术简介 查询优化技术主要包括查询重用技术、查询重写规则技术、查询算法优化技术、并行查询的优化技术、分布式查询优化技术和其他优化技术6个方面的技术。 1.1 查询重用 查询重用是指尽可能利用先前的执行结果，以达到节约查询计算全过程的时间并减少资源消耗的目的。 目前查询重用技术主要集中在两个方面:
2017-12-04 00:42:50
2875
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人