自定义日期时间相同，但在grok日期过滤器logstash中不匹配

Question

输入为逗号分隔值：“ 2010-08-19”，“ 09:12:55”，“ 56095675”

我创建了自定义date_time字段，该字段显示为正确格式2010-08-19;09:12:55 但不匹配 。

filter {
 grok {
    match => { "message" => '"(%{GREEDYDATA:cust_date})","(%{TIME:cust_time})","(%{NUMBER:author})"'}
    add_field => {
            "date_time" => "%{cust_date};%{cust_time}"
    }
}

date {
  match => ["date_time", "yyyy-MM-dd;hh:mm:ss"]
  target => "@timestamp"
  add_field => { "debug" => "timestampMatched"}
}

在Kibana上的输出：

cust_date       August 18th 2010, 20:00:00.000
cust_time       09:12:55
date_time       2010-08-19;09:12:55
message         "2010-08-19","09:12:55","56095675"
tags        beats_input_codec_plain_applied, _dateparsefailure

它给出_dateparsefailure 。 这些字段似乎与匹配模式相同。 我尝试了其他时间格式，例如YYYY-MM-dd;hh:mm:ss和YYYY-MM-dd;HH:mm:ss我在做什么错？ 救命！

Answer 1

您应该将date插件放在filter部分的grok下。

filter {
    grok {
        match => { "message" => '"(%{GREEDYDATA:cust_date})","(%{TIME:cust_time})","(%{NUMBER:author})"'}
    add_field => {
        "date_time" => "%{cust_date};%{cust_time}"
    }

    date {
        match => ["date_time", "yyyy-MM-dd;hh:mm:ss"]
        target => "@timestamp"
       add_field => { "debug" => "timestampMatched"}
    }
}