MySQL Server Exporterを使って、Prometheus × Grafanaでモニタリングする

mysql> CREATE USER 'exporter'@'%' IDENTIFIED BY 'password' WITH MAX_USER_CONNECTIONS 3;
Query OK, 0 rows affected (0.13 sec)

mysql> GRANT PROCESS, REPLICATION CLIENT, SELECT ON *.* TO 'exporter'@'%';
Query OK, 0 rows affected (0.08 sec)

このユーザーを使用して、MySQL Server Exporterがメトリクスをエクスポートすることになります。

MySQL側の準備は、これだけです。

MySQL Server Exporterで、MySQLのメトリクスをエクスポートできるようにする

では、MySQL Server Exporterをインストールして、起動します。

MySQL Server Exporterのダウンロード。GitHubのreleasesから取得すればOKです。

$ wget https://github.com/prometheus/mysqld_exporter/releases/download/v0.11.0/mysqld_exporter-0.11.0.linux-amd64.tar.gz
$ tar xvf mysqld_exporter-0.11.0.linux-amd64.tar.gz
$ cd mysqld_exporter-0.11.0.linux-amd64

Building and running / Running

MySQLへの接続情報を環境変数に設定して、起動。

$ export DATA_SOURCE_NAME='exporter:password@(172.17.0.2:3306)/'
$  ./mysqld_exporter

9104ポートでListenするみたいですね。

INFO[0000] Listening on :9104                            source="mysqld_exporter.go:232"

なお、今回は使いませんが、起動時にフラグを付けて収集する内容をコントロールすることもできるようです。

Building and running / Running

Building and running / Collector Flags

Building and running / Setting the MySQL server's data source name

Prometheusで、MySQL Server Exporter経由でMySQLのメトリクスを収集する

Prometheusは、scrape_configsにジョブを設定して起動します。targetsに、先ほど起動したMySQL Server Exporterを設定。

scrape_configs:
  - job_name: 'mysql'
    static_configs:
    - targets: ['172.17.0.3:9104']

これで、MySQLのメトリクスが収集できるようになりました。

Grafanaで取得したメトリクスを可視化する

最後は、Grafanaです。

とりあえず、Data SourceとしてPrometheusは設定されているものとします。

ダッシュボードは、すでに作成済みのものを使ってみることにしましょう。

左のメニューから「Create」→「Import」を選択します。

f:id:Kazuhira:20181218214947p:plain

表示された画面で、インポートするダッシュボードのIDを入力して「Load」します。

f:id:Kazuhira:20181218215008p:plain

ここでは、こちらのダッシュボードを使用しています。

Mysql - Prometheus dashboard for Grafana | Grafana Labs

下の方で、現在Data Sourceとして設定しているPrometheusを選択して、「Import」を押します。

f:id:Kazuhira:20181218215036p:plain

すると、ダッシュボードができ、収集したMySQLのメトリクスが表示されることが確認できます。

f:id:Kazuhira:20181218215146p:plain

ここで、sysbenchを使ってちょっと負荷をかけてみましょう。
※負荷をかけるのに使用しているMySQLのユーザーやデータベースは、あらかじめ作成済みのものです

## 準備
$ sysbench oltp_read_write \
  --db-driver=mysql --table-size=1000000 \
  --mysql-host=172.17.0.2 \
  --mysql-db=sbtest \
  --mysql-user=myuser \
  --mysql-password=password \
  prepare


## ベンチマーク実行
$ sysbench oltp_read_write \
  --threads=8 \
  --time=120 \
  --db-driver=mysql \
  --table-size=1000000 \
  --mysql-host=172.17.0.2 \
  --mysql-db=sbtest \
  --mysql-user=myuser \
  --mysql-password=password \
  run

グラフに、変化があったことが確認できます。

f:id:Kazuhira:20181218215358p:plain