maxcompute
weixin_47894524
这个作者很懒,什么都没留下…
展开
-
maxcompute 框架相关
1、实例数量① instance内存分配[256,12GB],默认为框架内存2G+JVM1G② map实例数根据split size决定,默认是256MB切分一个块,限制[1,100000]③ reduce实例数默认为map实例数的1/4,限制[0,2000]。当map后数据膨胀会导致reduce处理数据量较大,速度较慢,需要手动优化2、字节大小限制① resource字节数单job输入字节数默认不超过2GB② split size默认256MB,根据spli原创 2021-08-21 16:27:47 · 143 阅读 · 0 评论 -
maxcompute相关
1、多条JSON嵌套格式解析类似于这种格式的字符串:"{...},{...}"LATERAL VIEW EXPLODE(SPLIT(SUBSTR(strs,3,LENGTH(orgpoiids)-4),'},{')) ex AS str原创 2021-05-02 23:26:35 · 231 阅读 · 0 评论