- 博客(3)
- 收藏
- 关注
RSS订阅原创 记一次SQL查询优化
合理的优化，即使面对大表，也是获得很好的查询性能。表行数有52296296，是个大表，存储了各类商品每天的销售数据，每天都会往里面append数据，随着表的增大，组里的伙伴发现查询非常缓慢，已经达到调用方无法忍受的状态。我特此做了将优化过程做了记录，力图将优化过程的基本思路做个记录。未合理调优前，查询如下语句SELECT brand_name, item_number, s
2016-12-11 07:57:21
720
原创 YARN调度报错Stack trace: ExitCodeException exitCode=1解决方式
网上有很多解释，但是都不适合我，单纯看表面的堆栈信息，很容易迷惑，应该深入查看ApplicationMaster和NodeManager的日志。碰到过很多异常会有不合理的展示，导致使用者被表面迷糊，很难快速定位问题。问题的具体堆栈信息如下Stack trace: ExitCodeException exitCode=1: at org.apache.hadoop.util.Shel
2016-12-11 07:53:31
37284
4
原创 Docker尝鲜之Airflow快速安装
Docker尝鲜之Airflow快速安装 个人初步理解使用Docker应该尽量满足数据和应用隔离，数据尽量有mount在宿主机上；另外，与虚拟机相比，容器有一个很大的差异，它们被设计用来运行单进程，无法很好地模拟一个完整的环境，所以不建议一个容器塞太多的应用——容器的启动是非常廉价的。Docker设计者极力推崇“一个容器一个进程的方式”，所以遵循这样的应用原则就没错了。另外，docker exe
2016-12-01 07:06:37
18394
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人