RDS Aurora Cluster 自動起動停止簡易版（Lambda不使用版）

7340 ワード
lambda RDS aws-cli AWS Aurora AWS テキストリンク

概要

  • AuroraClusterの停止機能がリリースされていた
  • 開発環境の費用節約のために夜間休日などAuroraを停止したい
  • Lambda+CloudWatchなどの組み合わせでもよい手間がかかる
  • AWS上でLambda実行環境を構築するのが面倒な場合おすすめ
  • シンプルにawscliとcronだけで動かす
  • 環境はCentsOS7系(AmazonLinux2)
  • AWS公式参考

事前準備

  • AWSCLIは最新である必要がある（この時点でaws-cli/1.16.264）
  • 少しでも古いとAuroraClusterに関する制御系が存在しない
  • Pythonは最新である必要がある（この時点でPython3.6系と3.7系）
  • Pyenvなどは最新にしておくこと

詳細

Pythonアップデート

  • 新しいPythonを入れてセットしておく
$ python --version
$ pyenv install --list
$ pyenv install 3.6.4
$ pyenv global 3.6.4
$ python --version
Python 3.6.4

古いCliがあれば削除

  • 古いawscliの削除
  • 必ずしも必要ではないかも
  • 私の場合複数(1.14と1.16)のawscliが入っている状態だったので（なぜかは不明）一旦全削除
$ sudo yum list installed | grep awscli
$ pip3 list
Package         Version
--------------- --------
awscli          1.16.264
boto3           1.10.0
botocore        1.13.0
colorama        0.4.1
docutils        0.15.2
jmespath        0.9.4
pip             9.0.1
pyasn1          0.4.7
python-dateutil 2.8.0
PyYAML          5.1.2
rsa             3.4.2
s3transfer      0.2.1
setuptools      28.8.0
six             1.12.0
urllib3         1.25.6
$ pip uninstall awscli ※必要に応じて
$ pip3 uninstall awscli
：
Successfully uninstalled awscli-1.16.264

awscliをインストール

  • 新しいawscliを入れる
  • awsコマンドのパスが通ってない場合がある。その場合はフルパスで実行
$ sudo pip3 install awscli --upgrade
：
Successfully installed awscli-1.16.266 botocore-1.13.2
$ aws --version
aws-cli/1.16.264 Python/3.7.4 Linux/4.9.85-47.59.amzn2.x86_64 botocore/1.13.0
$ pip3 list
Package         Version
--------------- --------
awscli          1.16.266
boto3           1.10.0
botocore        1.13.2
colorama        0.4.1
docutils        0.15.2
jmespath        0.9.4
pip             9.0.1
pyasn1          0.4.7
python-dateutil 2.8.0
PyYAML          5.1.2
rsa             3.4.2
s3transfer      0.2.1
setuptools      28.8.0
six             1.12.0
urllib3         1.25.6

権限設定

  • 実行するにあたり権限を設定しておく必要がある

ポリシー設定

  • 実行ユーザには起動停止のみ実行させたい
  • その場合既存のポリシーではなく要件にマッチしたポリシーを作成する
  • IAMから以下のポリシーを作成し任意の名前で保存
{
    "Version": "2012-10-17",
    "Statement": [
        {
            "Effect": "Allow",
            "Action": [
                "logs:CreateLogGroup",
                "logs:CreateLogStream",
                "logs:PutLogEvents",
                "logs:GetLogEvents"
            ],
            "Resource": [
                "*"
            ]
        },
        {
            "Effect": "Allow",
            "Action": [
                "rds:DescribeDBClusters",
                "rds:ListTagsForResource",
                "rds:StartDBCluster",
                "rds:StopDBCluster"
            ],
            "Resource": [
                "*"
            ]
        }
    ]
}

グループ

  • 作成したポリシーを任意のグループに関連付ける
  • 画面例に見えるEC2の起動停止ポリシーはここでは直接関係ないので無視してください

ユーザ

  • 処理を実行させる専用ユーザを作成する
  • この例の場合startstop_userを作成

アクセスキー

  • 処理を実行させるユーザのアクセスキーを発行する
  • この例の場合startstop_userのアクセスキーを発行

動作確認

  • まずhelpが動くか確認
  • DB停止を周知して停止コマンドを実行してみる
$ aws rds stop-db-cluster help
$ aws rds stop-db-cluster --db-cluster-identifier <cluster_name>
$ aws rds start-db-cluster --db-cluster-identifier <cluster_name>

cron設定

  • 環境内で適当なホストのCRON内に以下の処理を記述
$ sudo vi /etc/cron.d/startRdsAuroraCluster
30 9 * * 1-5 appuser /usr/local/bin/aws rds start-db-cluster --db-cluster-identifier <cluster_name>
$ sudo vi /etc/cron.d/stopRdsAuroraCluster
0 23 * * 1-5 appuser /usr/local/bin/aws rds stop-db-cluster --db-cluster-identifier <cluster_name>

遭遇したエラー１

  • 適切なポリシーが設定できていない場合以下のエラーとなる
  • RDSのインスタンスではなくクラスターに対する権限が必要
$ aws rds start-db-cluster --db-cluster-identifier <cluster_name>

An error occurred (AccessDenied) when calling the StartDBCluster operation: User: arn:aws:iam::**********:user/stopstart_user is not authorized to perform: rds:StartDBCluster on resource: arn:aws:rds:ap-northeast-1:**********:cluster:<cluster_name>

遭遇したエラー2

$ aws rds start-db-cluster --db-cluster-identifier <cluster_name>
You must specify a region. You can also configure your region by running "aws configure".

$ aws configure
AWS Access Key ID [None]: *******************
AWS Secret Access Key [None]:*******************
Default region name [None]: ap-northeast-1
Default output format [None]: json

$ aws configure list
      Name                    Value             Type    Location
      ----                    -----             ----    --------
   profile                <not set>             None    None
access_key     ****************YUOM shared-credentials-file
secret_key     ****************zrkd shared-credentials-file
    region           ap-northeast-1      config-file    ~/.aws/config
  • 必要であればaws configureをしておく
  • 私の場合デフォルトリージョンを設定してなかったのでawsコマンド実行時エラーで警告された
  • この際のユーザもRDSの起動停止のポリシーだけ作成し、それをセットしたユーザのアクセスキーを使用する事が望ましい
  • 面倒であればRDSFullAccessでも