![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
机智的大龙哥
雁过留痕,一点点的积淀,努力向前
展开
-
mac 安装kafka报错 mkdir: illegal option -- e FAILED TO WRITE PID
mac配置kafka 环境报错,解决途径,记录一下:清华源下载:https://mirrors.tuna.tsinghua.edu.cn/apache/zookeeper/zookeeper-3.5.8/选择bin 下载,然后解压,启动报错如下:/usr/bin/javaZooKeeper JMX enabled by defaultUsing config: /Users/malong63/opt/apache-zookeeper-3.5.8-bin/bin/../conf/zoo.cf原创 2020-05-24 23:33:16 · 1178 阅读 · 2 评论 -
Spark 数据写入ES日期类型自动转换,在es中自动保存为date类型?
spark中数据写入es, 数据自动mapping 的时候,es会把时间戳转换为long, 如果是 yyyy-MM-dd HH:mm:ss 格式的则会转换为为text 类型。折腾两天,发现如果写入数据之前,将时间戳格式化为、UTC格式的时间,再写入ES,则ES会自动mapping为date类型。为什么要ES mapping这个字段为date类型呢?一个是不想写入局之前先往ES中手动建立mapping, 一个是 ES中数据会在ES中使用,ES中需要选择一个字段作为时间戳字段,必须为date类型。具原创 2020-05-11 15:05:41 · 1793 阅读 · 0 评论