MySQL からのログの収集

最後の更新
PDFとして保存

この手順では、MySQL からログを収集して Sumo Logic に取り込む方法について説明します。

ログタイプ

MySQL 用 Sumo Logic アプリケーションでは、エラーログにデフォルトの MySQL エラーログファイル形式を使用し、スロークエリログに MySQL スロークエリファイル形式を使用することを前提としています。

MySQL スロークエリログ
MySQL エラーログ

MySQL のログファイル形式の詳細については、MySQL のドキュメントを参照してください。

前提条件/要件

ログを生成するアプリケーションを MySQL で作成します。
MySQL エラーログと MySQL スロークエリログを有効にします。

Collector の設定

Sumo Logic で、Installed Collector を設定します。

Source の設定

Installed Collector の 2 つのローカルファイル Source を作成します。1 つはエラーログ用、もう 1 つはスロークエリログ用です。

MySQL エラーログ

MySQL エラーログは単一行のログです。Source を設定し、エラーログの境界正規表現を定義します。

ローカルファイル Source を設定します。
以下の Source フィールドを設定します。
1. Name (名前): (必須) 例: MySQL Errors (説明は省略可能です)。
2. File Path (ファイルパス)。(必須) 例: /var/log/mysql/mysql_error.log
3. Source Category: (必須) 例: prod/mysql_error詳細については、「ベストプラクティス」を参照してください。
[Advanced (詳細)] セクションを設定します。
1. Enable Timestamp Parsing (タイムスタンプ parse の有効化)。True
2. Time Zone (タイムゾーン): UTC (またはシステムのデフォルト)
3. Timestamp Format (タイムスタンプ形式)。自動検出
4. Encoding (エンコーディング): UTF-8
5. Enable Multiline Processing (複数行の処理の有効化)。
  1. Detect Messages Spanning Multiple Lines (複数行にわたるメッセージを検出する)。True
  2. Infer Boundaries - Detect message boundaries automatically (境界を推測する - メッセージ境界を自動的に検出する)。False
  3. Boundary Regex (境界正規表現): ^\d{6}\s+\d{1,2}:\d{1,2}:\d{1,2}.*
[Save (保存)] をクリックします。

MySQL スロークエリログ

MySQL スロークエリログは複数行のログであるため、Source を編集して [Detect messages spanning multiple lines (複数行にわたるメッセージを検出する)] を有効にし、スロークエリの境界正規表現を定義する必要があります。

Source を編集するには、次の手順を実行します。

ローカルファイル Source を設定します。
以下の Source フィールドを設定します。
1. Name (名前): (必須) MySQL Slow Queries (説明は省略可能です)。
2. File Path (ファイルパス)。(必須) 例: /var/log/mysql/mysql-slow.log
3. Source Category: (必須) 例: prod/mysql_slow詳細については、「ベストプラクティス」を参照してください。
[Advanced (詳細)] セクションを設定します。
1. Enable Timestamp Parsing (タイムスタンプ parse の有効化)。True
2. Time Zone (タイムゾーン): UTC (またはシステムのデフォルト)
3. Timestamp Format (タイムスタンプ形式)。自動検出
4. Encoding (エンコーディング): UTF-8
5. Enable Multiline Processing (複数行の処理の有効化)。
  1. Detect Messages Spanning Multiple Lines (複数行にわたるメッセージを検出する)。True
  2. Infer Boundaries - Detect message boundaries automatically (境界を推測する - メッセージ境界を自動的に検出する)。False
  3. Boundary Regex (境界正規表現): ^#\sTime:\s+\d{6}\s+\d{1,2}:\d{1,2}:\d{1,2}.*
[Save (保存)] をクリックします。

ログメッセージのサンプル

エラーログ

120326 16:56:45 [ERROR] /usr/sbin/mysqld: Incorrect key file for table '/tmp/#sql_21b2_0.MYI'; try to repair it
120326 16:56:45 [ERROR] Got an error from unknown thread, storage/myisam/mi_write.c:223

スロークエリログ

/usr/local/mysql/libexec/mysqld, Version: 3.23.54-log, started with:
Tcp port: 3306  Unix socket: /tmp/mysql.sock
Time                 Id Command    Argument
# Time: 030207 15:03:33
# User@Host: wsuser[wsuser] @ localhost.localdomain [127.0.0.1]
# Query_time: 13  Lock_time: 0  Rows_sent: 117  Rows_examined: 234
use wsdb;
SELECT l FROM un WHERE ip='209.xx.xxx.xx';

クエリのサンプル

エラーログ - 一定期間のログタイプ別のエラー

スロークエリ - スロークエリを発行した上位ユーザ

_sourceCategory=mysql_slow "User@Host" "Query_time" | parse regex "(?<query_block># User@Host:[\S\s]+?SET timestamp=\d+;[\S\s]+?;)" multi | parse regex field=query_block "# User@Host: \S+?\[(?<user>\S*?)\] @ (?<host_name>\S+)\s\[(?<ip_addr>\S*?)\]" nodrop // Pttrn1-vrtn1 | parse regex field=query_block "# User@Host: \S+?\[(?<user>\S*?)\] @\s+\[(?<ip_addr>\S*?)\]\s+Id: (?<Id>\d{1,10})" nodrop // Pttrn1-vrtn2 | parse regex field=query_block "# User@Host: \S+?\[(?<user>\S*?)\] @ (?<host_name>\S+)\s\[(?<ip_addr>\S*?)\]\s+Id: (?<Id>\d{1,10})" | fields -query_block | count as frequency by user | sort by frequency

ログ タイプ