New Relic の ログ解析機能を活用して Key と Value のペアをパースしてログの確認を簡単に #初心者

　New Relic のログ解析機能を使って Key-Value 形式のログデータをパースすることができるようになりました。Grokパターンを使った基本的なパース方法とカスタマイズの方法を紹介します。
　New Relic のログパースはGrokパターンと正規表現に対応しています。Grokパターンを使うことでログデータを簡単に解析してパースすることができます。Grokパターンを使ったログのパース方法については下記のブログをご確認ください。

この記事で紹介しているポイントは、次の２つです。

1. 基本的な Key-Value 形式のログデータのパース方法を知る
   Grok パターン keyvalue() を使用して Key-Value 形式のログをパースする方法を紹介します。
2. パース方法をカスタマイズする方法がわかる
   Grok パターン keyvalue() のオプション設定を使って解析動作をカスタマイズする方法を紹介します。

例えば、動作を簡単に把握するためにわかりやすい下記のログを例として使用します。

 key1=value1,key2=value2,key3=value3

上記のログを解析して Key と Value に分割して取り込む場合は、下記のようにGrokの式を設定します。

%{GREEDYDATA:custom_attribute_prefix:keyvalue()}

実際に New Relic 上で設定すると下記のように変換が実行されます。

　変換後はパーシングルールで設定した custom_attribute_prefix がプレフィックスとして属性名に付与されます。これだけでKey-Value 形式のログデータをパースして New Relic に取り込む事ができます。

区切り文字を変更する

 key1=value1;key2=value2;key3=value3

%{GREEDYDATA:custom_attribute_prefix:keyValue({"delimiter": ";"})}

 key1:value1;key2:value2;key3:value3

%{GREEDYDATA:custom_attribute_prefix:keyValue({"keyValueSeparator": ":"})}

 key1=value1,key2=value2,key3=value3

%{GREEDYDATA:custom_attribute_prefix:keyValue({"noPrefix": true})}

 key1:value1;key2:value2;key3:value3

%{GREEDYDATA:custom_attribute_prefix:keyValue({"delimiter": ";", "keyValueSeparator": ":", "noPrefix": true})}