ISUCONへの道~プロファイリングツール編~

こんばんは。
早速ISUCONに向けてプロファイリングツールを試して行きたいと思います。

# alpの導入
github.com

alp is Access Log Profile

alpとはAccess Log Profileの略なんですね。
とりあえず導入していきます。

// alpをダウンロード
$ wget https://github.com/tkuchiki/alp/releases/download/v0.0.4/alp_linux_amd64.zip
// zipを解凍するためにunzipをインストール
$ sudo apt install unzip
$ unzip alp_linux_amd64.zip
$ sudo mv alp /usr/local/bin/alp
$ sudo chown root:root /usr/local/bin/alp

これでalpの準備は万端です。

次にnginxの設定を修正指定いきます。

/etc/nginx/conf.d/log_format.confを新規に作り、下記を入力します。
下記では、access.logをalpが読み込めるフォーマットに整える設定です。

log_format ltsv "time:$time_local"
                "\thost:$remote_addr"
                "\tforwardedfor:$http_x_forwarded_for"
                "\treq:$request"
                "\tstatus:$status"
                "\tmethod:$request_method"
                "\turi:$request_uri"
                "\tsize:$body_bytes_sent"
                "\treferer:$http_referer"
                "\tua:$http_user_agent"
                "\treqtime:$request_time"
                "\tcache:$upstream_http_x_cache"
                "\truntime:$upstream_http_x_runtime"
                "\tapptime:$upstream_response_time"
                "\tvhost:$host";
access_log /var/log/nginx/access.log ltsv;

次に、これを読み込むためにnginx.confを修正します。
httpタグの中にincludeすることにより、log_format.confを展開してくれます。

http {
    ...
    include       /etc/nginx/conf.d/*.conf;
    ...
}

nginxを再起動します。

$ sudo nginx -s reload

これでnginxの設定も完了しました。

alpを実行してみます。

$ sudo alp -f /var/log/nginx/access.log

こんな感じで出力されます。
f:id:kazuki229_dev:20170928225053p:plain

# alpの使い方
これでalpを使ったログの解析ができましたが、これらのデータをどうみていけば良いか考えて行きましょう。
alpではアクセスされたエントリポイントごとに集計を行います。
したがって、列で表されているデータはエントリポイントごとの値となります。

名前	概要	備考
max	最長レスポンスの時間
min	最短レスポンスの時間
avg	全レスポンス時間の平均
sum	全レスポンス時間の合計
cnt	アクセス数
uri	URI
method	メソッド
max-body	最大のボディサイズ
min-body	最少のボディサイズ
avg-body	平均のボディサイズ
sum-body	合計ボディサイズ
p1	1パーセンタイルのレスポンス時間	小さい方から1%目の時間
p50	50パーセンタイルのレスポンス時間	中央値
p99	99パーセンタイルのレスポンス時間	小さい方から99%目の時間
stddev	レスポンス時間の標準偏差