2015-08-28 111 views
0

我试图用Grok解析Logetsash的Netscaler日志。我在网上找到Netscaler logstash grok过滤器的时间字段

filter { 
    if "netscaler" in [tags] { 
      grok { 
        break_on_match => true 
        match => [ 
          "message", "<%{POSINT:syslog_pri}> %{DATE_US}:%{TIME} GMT %{SYSLOGHOST:syslog_hostname} %{GREEDYDATA:netscaler_message} : %{DATA} %{IP:source_ip}:%{POSINT:source_port} - %{DATA} %{IP:vserver_ip}:%{POSINT:vserver_port} - %{DATA} %{IP:nat_ip}:%{POSINT:nat_port} - %{DATA} %{IP:destination_ip}:%{POSINT:destination_port} - %{DATA} %{DATE_US:DELINK_DATE}:%{TIME:DELINK_TIME} GMT - %{DATA} %{POSINT:total_bytes_sent} - %{DATA} %{POSINT:total_bytes_recv}", 
          "message", "<%{POSINT:syslog_pri}> %{DATE_US}:%{TIME} GMT %{SYSLOGHOST:syslog_hostname} %{GREEDYDATA:netscaler_message} : %{DATA} %{IP:source_ip}:%{POSINT:source_port} - %{DATA} %{IP:destination_ip}:%{POSINT:destination_port} - %{DATA} %{DATE_US:START_DATE}:%{TIME:START_TIME} GMT - %{DATA} %{DATE_US:END_DATE}:%{TIME:END_TIME} GMT - %{DATA} %{POSINT:total_bytes_sent} - %{DATA} %{POSINT:total_bytes_recv}", 
          "message", "<%{POSINT:syslog_pri}> %{DATE_US}:%{TIME} GMT %{SYSLOGHOST:syslog_hostname} %{GREEDYDATA:netscaler_message} : %{DATA} %{INT:netscaler_spcbid} - %{DATA} %{IP:clientip} - %{DATA} %{INT:netscaler_client_port} - %{DATA} %{IP:netscaler_vserver_ip} - %{DATA} %{INT:netscaler_vserver_port} %{GREEDYDATA:netscaler_message} - %{DATA} %{WORD:netscaler_session_type}", 
          "message", "<%{POSINT:syslog_pri}> %{DATE_US}:%{TIME} GMT %{SYSLOGHOST:syslog_hostname} %{GREEDYDATA:netscaler_message}" 
        ] 
      } 
      syslog_pri { } 

    }} 

对于时间字段以下过滤器,它的%{TIME} GMT,我不知道这意味着什么,以及如何日期使用提取时间字段()过滤器?

回答

0

%{TIME} GMT

基本上意味着匹配正则表达式TIME (?!<[0-9])%{HOUR}:%{MINUTE}(?::%{SECOND})(?![0-9])后跟一个空格和单词 “GMT”。

更多神交模式>http://grokdebug.herokuapp.com/patterns#

我觉得你的目的,而不是%{DATE_US}:%{TIME} GMT可以使用

<ns_syslog_timestamp>%{DATE}:%{TIME} %{WORD:ns_syslog_timezone}

date { 
    match => [ "ns_syslog_timestamp", "MM/dd/YYYY:HH:mm:ss" ] 
    locale => en 
    } 

更多的日期过滤器>https://www.elastic.co/guide/en/logstash/current/plugins-filters-date.html

-Siva