chenzuoli的博客

什么是数据湖？什么是数据仓库？

说说我们在数据领域用的比较多的消息队列组件：kafka和rabbitmq。

web3的世界，一切都是有价值的

spark on yarn 时，task实际跑在nodemanager上如果是standalone模式，那么用的是spark原生的资源管理器，task跑在spark worker上今天才知道，晕。。。因为公司的集群只有两台spark thrift server，没有worker，刚开始我信心满满说，怎么可能没有worker呢，最后尴尬了????????????????...

首先，解释一下文件编码和文件格式文件编码是属于字符(文件内容)的编码格式，常见的有utf-8/gbk/latin1等等文件格式是针对系统而言的，比如Windows格式文件内容的换行符是\r\n，而Linux和Unix换行符择是\n有时候需要进行格式转换，怎么转呢?来看看:Vim进入文件查看文件系统格式::set ff编辑文件系统格式::set ff=unix:set ff=dos查看文件编码格式::set fileencoding设置文件编码格式::set fileencod