更新履歴

• 2014/2/17 コメント頂いた内容を反映、誤字を修正

なぜELBの負荷テストはJMeterクライアント（GUI）１台からではだめか。

当初、ELB配下に、AZ-Aに2台、AZ-Cに2台の合計4インスタンスがある構成で、自分の開発マシンでJMeter(GUI)を動かして負荷テストをしていたのですが、なぜか、AZ-Aの2台にしか負荷が入っていない。

ググっていたら、AWS Japanの公式スライドを発見
http://www.slideshare.net/AmazonWebServicesJapan/20130612-aws-meisterregenerateelbpublic

↑のp49に、 「都度DNS解決を行うツールが望ましい」 とあります。

なるほど確かに、JMeterはDNSキャッシュしてしまっているようです。↓
https://twitter.com/just_do_neet/status/331804161379270656

「SpotInstanceとJMeterを使って400万req/minの負荷試験を行う」

↑を参考に、JMeterサーバーを複数個立ち上げて負荷試験することにします。

構成

クライアント

サーバのコントローラ（クライアントと呼びます）は、開発マシンなど手元のマシンで良いです。
複数コントローラはこの手元のクライアントのGUIより操作できます。

サーバ

サーバはAWS上に構築します。実際にテスト対象に負荷をかける人たちです。
注意点として、これらのサーバからの通信をクライアントが受け付ける（クライアント側のInBound）ネットワーク設定が必要です。
（クライアント→サーバ　だけでなく、クライアント←サーバも必要ということ）
多分、VPCおよびVPN構築するのが手っ取り早いと思います。
VPNの構築は、VPCに対するハードウェアVPNと、VPC内にVPNサーバを立てるソフトウェアVPNの選択肢があると思いますが、好きな方でどうぞ。

このサーバのInBoundは、22(ssh)、1099、40000を開けてください。

テスト対象

ELB配下に複数台マシンがぶら下がっている状態で準備してください。

サーバの構築

$ mkdir ~/src
$ cd ~/src
$ wget http://ftp.riken.jp/net/apache//jmeter/binaries/apache-jmeter-2.11.tgz
$ tar zxvf apache-jmeter-2.11.tgz
$ cd apache-jmeter-2.11

server.rmi.localport=40000

最後の方のJava起動スクリプトを、以下に修正

${DIRNAME}/jmeter ${RMI_HOST_DEF} -Dsun.net.inetaddr.ttl=0 -Dserver_port=${SERVER_PORT:-1099} -s -j jmeter-server.log "$@"

また、クライアント名の解決がなぜかIPアドレスだとうまくいかなかったので、hostsにクライアントのIPアドレスと名前を付けています。

[クライアントのIPアドレス] jmeter-client

クライアントの構築

クライアントはMacで実行しましたが、
Windows等でも変わらないと思います。Java必須です。

apache-jmeter-2.11をダウンロードして解凍してください。

#
#上は省略
#

#この行を追加。↓サーバ側に設定した名前と一致させる
JVM_ARGS="-Djava.rmi.server.hostname=jmeter-client"

ARGS="$SERVER $DUMP $HEAP $NEW $SURVIVOR $TENURING $EVACUATION $PERM"

java $ARGS $JVM_ARGS -jar "`dirname "$0"`/ApacheJMeter.jar" "$@"

以下、サーバの数だけ、「,」で区切ってアクセスIPとポートを指定してください。

#163行目付近
remote_hosts=[サーバ1のIPアドレス]:1099,[サーバ2のIPアドレス]:1099,...

テスト実行

クライアント準備

クライアントで、JMeterを起動します

$ sh /path/to/jmeter_dir/bin/jmeter

↑によってGUIが立ち上がります。

「実行」メニューの、「開始（リモート）」にサーバのIPアドレスが羅列されているのを確認してください。

テスト計画を普通に作って下さい。
注意点として、スレッドグループで定義したリクエストは、各サーバ毎に実行されます。

たとえば、サーバを4台で実行するとします。
スレッドグループでスレッド数を10、ループを20とすると、合計のリクエスト数は、以下の計算式になります。

4(サーバ) × 10(スレッド数) × 20(ループ) = 800(リクエスト)

サーバ準備

$ cd ~/src/apache-jmeter-2.11/bin
$ sh jmeter-server

テスト実行

クライアント側の、「実行」メニュー→「全て開始(リモート)」にて実行します。

余談編：あれ？負荷がかかってない？

いざ負荷をかけてみると、なにやら途中で負荷が抜けている模様

↓ CPU使用率

↓ リクエスト数

@understeer よりコメント頂きました。ありがとうございます。

ELBはエンドポイントとマッピングするIPアドレスが負荷に応じて変わりますから、JMeter サーバを起動するときにも注意が必要です。
http://wiki.apache.org/jmeter/JMeterAndAmazon
にも書いていますが、JVMの起動パラメータ -Dsun.net.inetaddr.ttl　を適切に設定してください。

ELB自体が負荷に応じてスケールIn・Outするため、このようなことがおきるんですね。

リンクの通り、JMeterServerの起動時のオプションで、
-Dsun.net.inetaddr.ttl=0を設定します。

$ cd ~/src/apache-jmeter-2.11

#最後の方のJava起動スクリプトを、以下に修正

${DIRNAME}/jmeter ${RMI_HOST_DEF} -Dsun.net.inetaddr.ttl=0 -Dserver_port=${SERVER_PORT:-1099} -s -j jmeter-server.log "$@"

結果どうなったか

負荷が抜けてない！

お疲れ様でした。