性能优化
文章平均质量分 84
星环科技TDH社区版
星环科技社区版家族基于商业版强大的技术底座打造,目前免费提供了多个极具竞争力的核心子产品及开发管理套件,致力于让广大开发爱好者快速享受到大数据技术所带来的技术红利,提供了一个更轻量、更简单、更易用的数据分析开发环境。
展开
-
关于SQL优化解决InceptorSQL慢的一些思路
本篇文章提供了一些通过优化SQL来解决InceptorSQL慢的一些思路原创 2024-06-25 09:00:00 · 651 阅读 · 0 评论 -
SQL优化示例
把这个sql换成MR代码的话,map的时候,把a表的记录打上标签a,商品表记录每读取一条,打上标签b,变成两个<key ,value>对,<b,数字id>,<b,字符串id>。附上hadoop通用关联的实现方法(关联通过二次排序实现的,关联的列为paritionkey,关联的列c1和表的tag组成排序的group key,根据parition key分配reduce。如日志中,常会有信息丢失的问题,比如全网日志中的user_id,如果取其中的user_id和bmw_users关联,就会碰到数据倾斜的问题。原创 2024-06-24 15:07:14 · 1048 阅读 · 4 评论