loongshawn的博客

高德地图的向下看与中兴通讯的向上看~

案例:橱柜安装不合适，导致重做背景:橱柜安装过程中，最初是由于橱柜门和台面齐平，导致需要修改橱柜。要求:规范尺寸台面盖过柜体2公分。过程:台面师傅第一时间发现问题，建议改台面省时省事；工厂安排售后师傅过来改橱柜柜体，修改后并未通知业主验收，事前也未告知修改后可能引起的原因。业主发现橱柜与墙体留有过大缝隙，柜体切割工艺太差，无法接受。解决:重做柜体、台面。根因:1、尺寸不对，橱柜生产前应该考虑门套问题，最好待门套安装后复尺再生产。2、拆单人员尺寸未给对，错误尺寸生产。3、售后改柜体师傅，

数据倾斜：mapreduce程序执行时，reduce节点大部分执行完毕，但是有一个或者几个reduce节点运行很慢，导致整个程序的处理时间很长，这是因为某一个key的条数比其他key多很多（成千上万倍），这条key所在的reduce节点所处理的数据量比其他节点就大很多，从而导致某几个节点迟迟运行不完。Hive的执行是分阶段的，map处理数据量的差异取决于上一个stage的reduce输出，所以如何将数据均匀的分配到各个reduce中，就是解决数据倾斜的根本所在。...

令A和B是任意两个集合，若序偶的第一个成员是A的元素，第二个成员是B的元素，所有这样的序偶集合，称为集合A和B的笛卡尔乘积或直积，记做A X B

场景分组后的数据多行聚合成一行序号idclasstag11AAf21BBf31CCf41DDf51EEf62QQf72WWf82MMf期望序号idclass11AA,BB,CC22QQ,WW,MM实现两步走先分组再拼接with temp as ( select id as id, class as class

异常1、常见异常StatementCallback; uncategorized SQLException for SQL [select * from `xxx` where time= '20190404']; SQL state [HY000]; error code [0]; File 'hdfs://xxx/xxx/time=20190404/xxxxxxxxxx' has an incompatible Parquet schema for column 'xxx.xxx'. Column

如何提前JSON属性针对json数组提取待处理数据[{"id": "123456789", "orgID": "group", "empName": "张三", "empID": "93002", "orgNamePath": "数据中心/高德地图/阿里巴巴"}]SQL写法SELECTget_json_object( regexp_replace( regexp_replace(field, '\\[', ''), '\\]', '' ) -- 提取json对象

Mybatis异常-关于建立连接connection异常的专题

【FAQ】springboot启动datasource.properties、custom.properties等自定义配置未生效

ror querying database. Cause: java.sql.SQLException: Illegal mix of collations (utf8mb4_general_ci,COERCIBLE) and (utf8mb4_0900_ai_ci,COERCIBLE) for operation ‘<>’show global variables like ‘%coll%’, set global default_collation_for_utf8mb4 = ‘utf

关键字连接挂起DNS问题服务器没有侦听端口连接被服务器关闭好记性不如烂笔头，记录下温故下！！！telnet 不会解决问题但可以很快缩小问题的范围。telnet 用来调试网络问题的简单命令和语法：telnet <hostname or IP> <port>因为 telnet 最初通过端口建立连接不会发送任何数据，适用于任何协议，包括加密协议。连接问题主要集中在以上四种错误场景。了解下各种错误信息的含义，便于我们定位实际业务中的各类问题：平台访问远程数据源

Java命令 - 解压和打包Jar，用得不多容易忘的两种命令，记录下。

Kafka 的架构和原理，不要尝试去记忆他们

Kafka消费组时不时就会断开连接，提示如下异常2019-19-28 12:36:44.711 |-INFO [kafka-coordinator-heartbeat-thread | loongshawn] org.apache.kafka.clients.consumer.internals.AbstractCoordinator [1234] -| [Consumer clientId=loongshawn-xxxxxxxxxxxxxxxxxxxxxxxxxxxxx-127.0.0.1, grou

Kafka 的消息存储结构：索引文件与数据文件

长沙现象-求职之我见

JVM thread dump日志文件

OpenSSH私钥BEGIN OPENSSH PRIVATE KEY与BEGIN RSA PRIVATE KEY转换方式