logstash mysql日期_logstash-input-jdbc取mysql数据日期格式处理

2018-03-23T04:18:33.000Z，[email protected]，所以使用logstash的date 去match 。

date {

match => ["start_time","ISO8601"]

}

但实际发现每个document都会附带一个[_dataparserfail]的标签，百思不得姐

google一番后终于明白了，链接：https://discuss.elastic.co/t/trouble-matching-timestamp/83768/4

因为从mysql取到数据的时候start_time 已经是一个时间的数据类型了， 这时候再用date去处理自然失败，[email protected] ，老外给的解决方法如下：

In your SQL query, typecast the timestamp as a string.

Use a mutate filter‘s convert option to typecast the field to a string prior to the date filter.

Use a mutate filter to copy the timestamp into @timestamp and overwrite the existing value (use the replace option).

我使用的方法：

mutate {

add_field => {"temp_ts" => "%{start_time}"}

}

date {

match => ["temp_ts","ISO8601"]

remove_field => ["temp_ts"]

}

原文：http://blog.51cto.com/itanony/2090248