redisプライマリスレーブ+keepalivedによる高可用性の実現
11936 ワード
Redisの概要:
Redisは、ANSI C言語を使用して作成され、ネットワークをサポートし、メモリベースで持続可能なログ型、Key-Valueデータベースであり、複数の言語のAPIを提供しています.2010年3月15日から、Redisの開発作業はVMwareが主宰している.
redisはkey-valueストレージシステムです.Memcachedと同様に、string(文字列)、list(チェーンテーブル)、set(セット)、zset(sorted set–秩序化セット)、hash(ハッシュタイプ)など、格納されたvalueタイプが相対的に多くサポートされています.これらのデータ型は、push/pop、add/remove、および交差および差セット、およびより豊富な操作をサポートし、これらの操作は原子的である.これに基づいて、redisは様々な方法のソートをサポートします.memcachedと同様に、効率を保証するために、データはメモリにキャッシュされます.違いはredisが更新したデータを定期的にディスクに書き込むか、修正操作を追加の記録ファイルに書き込むか、それに基づいてmaster-slave同期を実現することである.
keepalivedの概要:
Keepalivedソフトウェアは、主にVRRPプロトコルによって高可用性機能を実現します.VRRPはVirtual Router RedundancyProtocol(仮想ルータ冗長プロトコル)の略で、VRRPの目的は静的ルーティングの単一の障害問題を解決することであり、個別のノードがダウンタイムした場合、ネットワーク全体が間欠的に動作することを保証することができる.
基本手順:
1.keepalived+redis高可用性redis主従ソリューション
2.2台のテストホストにredisサービスをインストール
3.Master redisとSlave redisにKeepalivedをインストールする
4.Master redisとSlave redisでプロファイルを作成する
5.Master redisとSlave redisでそれぞれ必要な監視スクリプトを作成
6.redisプロファイルとモニタスクリプトが正常かどうかをテストします.
一:keepalived+redis高可用性redis主従ソリューション
環境紹介:Master:192.168.1.110 Slave:192.168.1.117 Virtural IP Address(VIP):192.168.113
設計構想:
MasterとSlaveが正常に動作している場合、Masterはサービスを担当し、SlaveはStandbyを担当する.Masterが停止し、Slaveが正常である場合、Slaveはサービスを引き継ぎ、同時に主従複製機能を閉じる.Masterが正常に回復すると、Slaveからデータを同期し、データを同期した後、マスタコピー機能をオフにし、Masterアイデンティティを回復し、同時にSlaveはMaster同期データが完了するのを待ってからSlaveアイデンティティを回復する.そして順番にループします.このようにするには、MasterとSlaveの両方でローカライズポリシーをオンにする必要があります.そうしないと、互いに自動的に切り替える過程で、ローカライズをオンにしていない側が他方のデータを空にし、データが完全に失われます.
二:2台のテストホストがredisサービスをインストールする
1.redisインストールパッケージのダウンロードとインストール
2.関連書類及びサービスコマンドの追加
3.起動スクリプトの追加
以下は完全なスクリプトです.コピーは使用可能です(注:shellで書くこともできますが、判断方法はたくさんあります).
4.サービスの起動とredis状態ログの作成
三:Master redisとSlave redisにKeepalivedを取り付ける
1.インストールパッケージを取得してインストールする
2.プロファイルの追加と構成(重要ですが、サービス起動にはこれらのファイルが必要です)
3.起動の追加
四:Master redisとSlave redis上にプロファイルを作成する
1)Master redisでプロファイルを作成する
2)Slave redisでプロファイルを作成する
五:Master redisとSlave redisにそれぞれ必要な監視スクリプトを作成する
1).マスタースクリプトファイルの構成(オンラインからコピーして変更可能)
スクリプトディレクトリ/usr/local/keepalived/scripts
Redisを監視するスクリプトは次のとおりです.
次の重要なスクリプトを実行します.
notify_master/usr/local/keepalived/scripts/redis_master.sh
notify_backup/usr/local/keepalived/scripts/redis_backup.sh
notify_fault/usr/local/keepalived/scripts/redis_fault.sh
notify_stop/usr/local/keepalived/scripts/redis_stop.sh
動作原理:
Keepalivedはステータスを変換するときにステータスに従って呼び出すからです.
Master状態になるとnotify_が呼び出されますmaster
Backup状態に入るとnotify_が呼び出されますbackup
異常が検出された場合はFaultステータスコールnotify_fault
Keepalivedプログラムが終了するとnotify_を呼び出すstop
2)まず、Redis Masterにnotity_を作成するmasterとnotify_backupスクリプト:
注意:Redis Slaveでnotity_を作成masterとnotify_backupスクリプト、masterと一致
[root@www scripts]# vim redis_master.sh
notify_backupスクリプト:
[root@www scripts]# vim redis_backup.sh
3)MasterとSlaveはさらに2つのスクリプトredis_を作成するfault.shとredis_stop.sh
[root@www scripts]# vim redis_fault.sh
[root@www scripts]# vim redis_stop.sh
主従記憶にスクリプト権限を追加するには、次の手順に従います.
chmod +x/usr/local/keepalived/scripts/*.sh
環境変数の設定:
echo 'export PATH=$PATH:/usr/local/redis/bin' >>/root/.bash_profile
source/root/.bash_profile
サービスの開始:
/etc/init.d/keepalived restart
/etc/init.d/redis restart
六:redisプロファイルとモニタリングスクリプトが正常かどうかをテストする
1.主従のkeepalivedとredisサービスの起動
けんさ
/etc/init.d/keepalived restart
redis-server&redis起動方式特殊、バックグラウンドで実行
netstat -tnlp | grep redis
ps -ef | grep keepalived
ps-ef|grep redis|awk'{print$2}'|xargs kill-9殺redisプロセス
redis-server/etc/redis.conf &
2.VIPでRedisを接続してみます.
redis-cli -h 192.168.1.10
redis-cli -h 192.168.1.17
redis-cli -h 192.168.1.13
192.168.1.113:6379>これは正しいヒントに入ります
3.いくつかのデータを挿入してみます.
redis-cli -h 192.168.1.13 SET Hello Redis
OK
VIPからデータを読み込む
redis-cli -h 192.168.1.13 GET Hello
"Redis"
Masterからデータを読み込む
redis-cli -h 192.168.1.10 GET Hello
"Redis"
Slaveからデータを読み込む
redis-cli -h 192.168.1.17 GET Hello
"Redis"
4.シミュレーション障害発生:keepalivedが正常に切り替わるかどうかを確認する
マスター上のRedisプロセスを殺す:
killall -9 redis-server
MasterのKeepalivedログの表示
tailf/var/log/keepalived-redis-state.log
同時にSlaveのログが表示されます.
tailf/var/log/keepalived-redis-state.log
その後、Slaveはサービスを引き継ぎ、Masterの役割を果たしていることがわかります.
redis-cli -h 192.168.1.13 INFO
redis-cli -h 192.168.1.17 INFO
role:master
そしてMasterのRedisプロセスを復元します
/etc/init.d/redis start
MasterのKeepalivedログの表示
tailf/var/log/keepalived-redis-state.log
同時にSlaveのログが表示されます.
tailf/var/log/keepalived-redis-state.log
Redisは、ANSI C言語を使用して作成され、ネットワークをサポートし、メモリベースで持続可能なログ型、Key-Valueデータベースであり、複数の言語のAPIを提供しています.2010年3月15日から、Redisの開発作業はVMwareが主宰している.
redisはkey-valueストレージシステムです.Memcachedと同様に、string(文字列)、list(チェーンテーブル)、set(セット)、zset(sorted set–秩序化セット)、hash(ハッシュタイプ)など、格納されたvalueタイプが相対的に多くサポートされています.これらのデータ型は、push/pop、add/remove、および交差および差セット、およびより豊富な操作をサポートし、これらの操作は原子的である.これに基づいて、redisは様々な方法のソートをサポートします.memcachedと同様に、効率を保証するために、データはメモリにキャッシュされます.違いはredisが更新したデータを定期的にディスクに書き込むか、修正操作を追加の記録ファイルに書き込むか、それに基づいてmaster-slave同期を実現することである.
keepalivedの概要:
Keepalivedソフトウェアは、主にVRRPプロトコルによって高可用性機能を実現します.VRRPはVirtual Router RedundancyProtocol(仮想ルータ冗長プロトコル)の略で、VRRPの目的は静的ルーティングの単一の障害問題を解決することであり、個別のノードがダウンタイムした場合、ネットワーク全体が間欠的に動作することを保証することができる.
基本手順:
1.keepalived+redis高可用性redis主従ソリューション
2.2台のテストホストにredisサービスをインストール
3.Master redisとSlave redisにKeepalivedをインストールする
4.Master redisとSlave redisでプロファイルを作成する
5.Master redisとSlave redisでそれぞれ必要な監視スクリプトを作成
6.redisプロファイルとモニタスクリプトが正常かどうかをテストします.
一:keepalived+redis高可用性redis主従ソリューション
環境紹介:Master:192.168.1.110 Slave:192.168.1.117 Virtural IP Address(VIP):192.168.113
設計構想:
MasterとSlaveが正常に動作している場合、Masterはサービスを担当し、SlaveはStandbyを担当する.Masterが停止し、Slaveが正常である場合、Slaveはサービスを引き継ぎ、同時に主従複製機能を閉じる.Masterが正常に回復すると、Slaveからデータを同期し、データを同期した後、マスタコピー機能をオフにし、Masterアイデンティティを回復し、同時にSlaveはMaster同期データが完了するのを待ってからSlaveアイデンティティを回復する.そして順番にループします.このようにするには、MasterとSlaveの両方でローカライズポリシーをオンにする必要があります.そうしないと、互いに自動的に切り替える過程で、ローカライズをオンにしていない側が他方のデータを空にし、データが完全に失われます.
二:2台のテストホストがredisサービスをインストールする
1.redisインストールパッケージのダウンロードとインストール
mkdir -p /home/ywxi/tools/
cd /home/ywxi/tools/
wget http://download.redis.io/releases/redis-3.2.0.tar.gz
tar -xf redis-3.2.0.tar.gz
cd redis-3.2.0
make
echo $?2.関連書類及びサービスコマンドの追加
mkdir /usr/local/redis/bin/ -p
cd src/
cp redis-benchmark redis-check-aof redis-check-rdb redis-cli redis-server redis-sentinel /usr/local/redis/bin/
cd ../
cp redis.conf /etc/3.起動スクリプトの追加
以下は完全なスクリプトです.コピーは使用可能です(注:shellで書くこともできますが、判断方法はたくさんあります).
echo '#chkconfig: 2345 10 90
#description: Start and Stop redis
REDISPORT=6379
EXEC=/usr/local/redis/bin/redis-server
REDIS_CLI=/usr/local/redis/bin/redis-cli
PIDFILE=/var/run/redis.pid
CONF="/etc/redis.conf"
case "$1" in
start)
if [ -f $PIDFILE ]
then
echo "$PIDFILE exists, process is already running or crashed"
else
echo "Starting Redis server..."
$EXEC $CONF
fi
if [ "$?"="0" ]
then
echo "Redis is running..."
fi
;;
stop)
if [ ! -f $PIDFILE ]
then
echo "$PIDFILE does not exist, process is not running"
else
PID=$(cat $PIDFILE)
echo "Stopping ..."
$REDIS_CLI -p $REDISPORT SHUTDOWN
while [ -x ${PIDFILE} ]
do
echo "Waiting for Redis to shutdown ..."
sleep 1
done
echo "Redis stopped"
fi
;;
restart|force-reload)
${0} stop
${0} start
;;
*)
echo "Usage: /etc/init.d/redis {start|stop|restart|force-reload}" >&2
exit 1
esac
' > /etc/init.d/redis4.サービスの起動とredis状態ログの作成
chmod +x /etc/init.d/redis
chkconfig --add redis
chkconfig redis on
chkconfig --list| grep redis
mkdir /var/log/redis/ -p
touch /var/log/redis/redis.log三:Master redisとSlave redisにKeepalivedを取り付ける
1.インストールパッケージを取得してインストールする
cd /home/ywxi/tools
wget http://www.keepalived.org/software/keepalived-1.2.20.tar.gz
tar zxf keepalived-1.2.20.tar.gz
cd keepalived-1.2.20
yum -y install openssl openssl-devel
./configure && make && make install
echo $?2.プロファイルの追加と構成(重要ですが、サービス起動にはこれらのファイルが必要です)
mkdir /etc/keepalived
mkdir /usr/local/keepalived/scripts/ -p
cp /usr/local/etc/keepalived/keepalived.conf /etc/keepalived/
cp /usr/local/etc/rc.d/init.d/keepalived /etc/init.d/
cp /usr/local/sbin/keepalived /usr/sbin
cp /usr/local/etc/sysconfig/keepalived /etc/sysconfig/3.起動の追加
chmod +x /etc/init.d/keepalived
chkconfig --add keepalived
chkconfig keepalived on四:Master redisとSlave redis上にプロファイルを作成する
1)Master redisでプロファイルを作成する
cd /etc/keepalived/
cp keepalived.conf keepalived.conf.bnk
echo '! Configuration File for keepalived
global_defs {
notification_email{
[email protected]
}
router_id redis140
}
vrrp_script chk_redis
{
script "/usr/local/keepalived/scripts/redis_check.sh 127.0.0.1 6379" #
interval 2 #
timeout 2 #
fall 3
}
vrrp_instance redis {
state BACKUP # master set to SLAVE also
interface eth0
lvs_sync_daemon_interface eth0
virtual_router_id 202
priority 150 #
nopreempt # no seize,must add
advert_int 1
authentication { #all node must same
auth_type PASS #
auth_pass 1111 #
}
virtual_ipaddress {
192.168.1.13 #VIP
}
track_script {
chk_redis
}
notify_master "/usr/local/keepalived/scripts/redis_master.sh 127.0.0.1 192.168.1.17 6379" # redis ip
notify_backup "/usr/local/keepalived/scripts/redis_backup.sh 127.0.0.1 192.168.1.17 6379" # redis ip
notify_fault /usr/local/keepalived/scripts/redis_fault.sh
notify_stop /usr/local/keepalived/scripts/redis_stop.sh
}' > /etc/keepalived/keepalived.conf2)Slave redisでプロファイルを作成する
cd /etc/keepalived/
cp keepalived.conf keepalived.conf.bnk
echo'! Configuration File for keepalived
global_defs {
notification_email{
[email protected]
}
router_id redis141
}
vrrp_script chk_redis
{
script "/usr/local/keepalived/scripts/redis_check.sh 127.0.0.1 6379" #
interval 2
timeout 2
fall 3
}
vrrp_instance redis {
state BACKUP
interface eth0
lvs_sync_daemon_interface eth0
virtual_router_id 202
priority 100
nopreempt # no seize,must add
advert_int 1
authentication { #all node must same
auth_type PASS
auth_pass 1111
}
virtual_ipaddress {
192.168.186.143
}
track_script {
chk_redis
}
notify_master "/usr/local/keepalived/scripts/redis_master.sh 127.0.0.1 192.168.1.10 6379"
notify_backup "/usr/local/keepalived/scripts/redis_backup.sh 127.0.0.1 192.168.1.10 6379"
notify_fault /usr/local/keepalived/scripts/redis_fault.sh
notify_stop /usr/local/keepalived/scripts/redis_stop.sh
}' >/etc/keepalived/keepalived.conf五:Master redisとSlave redisにそれぞれ必要な監視スクリプトを作成する
1).マスタースクリプトファイルの構成(オンラインからコピーして変更可能)
スクリプトディレクトリ/usr/local/keepalived/scripts
Redisを監視するスクリプトは次のとおりです.
mkdir -p /usr/local/keepalived/scripts
cd /usr/local/keepalived/scripts
echo '#!/bin/bash
ALIVE=`/usr/local/redis/bin/redis-cli -h $1 -p $2 PING`
LOGFILE="/var/log/keepalived-redis-check.log"
echo "[CHECK]" >> $LOGFILE
date >> $LOGFILE
if [ $ALIVE == "PONG" ]; then :
echo "Success: redis-cli -h $1 -p $2 PING $ALIVE" >> $LOGFILE 2>&1
exit 0
else
echo "Failed:redis-cli -h $1 -p $2 PING $ALIVE " >> $LOGFILE 2>&1
exit 1
fi' >/usr/local/keepalived/scripts/redis_check.sh次の重要なスクリプトを実行します.
notify_master/usr/local/keepalived/scripts/redis_master.sh
notify_backup/usr/local/keepalived/scripts/redis_backup.sh
notify_fault/usr/local/keepalived/scripts/redis_fault.sh
notify_stop/usr/local/keepalived/scripts/redis_stop.sh
動作原理:
Keepalivedはステータスを変換するときにステータスに従って呼び出すからです.
Master状態になるとnotify_が呼び出されますmaster
Backup状態に入るとnotify_が呼び出されますbackup
異常が検出された場合はFaultステータスコールnotify_fault
Keepalivedプログラムが終了するとnotify_を呼び出すstop
2)まず、Redis Masterにnotity_を作成するmasterとnotify_backupスクリプト:
注意:Redis Slaveでnotity_を作成masterとnotify_backupスクリプト、masterと一致
[root@www scripts]# vim redis_master.sh
#!/bin/bash
REDISCLI="/usr/local/redis/bin/redis-cli -h $1 -p $3"
LOGFILE="/var/log/keepalived-redis-state.log"
echo "[master]" >> $LOGFILE
date >> $LOGFILE
echo "Being master...." >> $LOGFILE 2>&1
echo "Run SLAVEOF cmd ... " >> $LOGFILE
$REDISCLI SLAVEOF $2 $3 >> $LOGFILE 2>&1
#echo "SLAVEOF $2 cmd can't excute ... " >> $LOGFILE
sleep 10 # 10
echo "Run SLAVEOF NO ONE cmd ..." >> $LOGFILE
$REDISCLI SLAVEOF NO ONE >> $LOGFILE 2>&1notify_backupスクリプト:
[root@www scripts]# vim redis_backup.sh
#!/bin/bash
REDISCLI="/usr/local/redis/bin/redis-cli"
LOGFILE="/var/log/keepalived-redis-state.log"
echo "[BACKUP]" >> $LOGFILE
date >> $LOGFILE
echo "Being slave...." >> $LOGFILE 2>&1
echo "Run SLAVEOF cmd ..." >> $LOGFILE 2>&1
$REDISCLI SLAVEOF $2 $3 >> $LOGFILE
sleep 100 # 100
exit(0)3)MasterとSlaveはさらに2つのスクリプトredis_を作成するfault.shとredis_stop.sh
[root@www scripts]# vim redis_fault.sh
#!/bin/bash
LOGFILE="/var/log/keepalived-redis-state.log"
echo "[fault]" >> $LOGFILE
date >> $LOGFILE[root@www scripts]# vim redis_stop.sh
#!/bin/bash
LOGFILE="/var/log/keepalived-redis-state.log"
echo "[stop]" >> $LOGFILE
date >> $LOGFILE主従記憶にスクリプト権限を追加するには、次の手順に従います.
chmod +x/usr/local/keepalived/scripts/*.sh
環境変数の設定:
echo 'export PATH=$PATH:/usr/local/redis/bin' >>/root/.bash_profile
source/root/.bash_profile
サービスの開始:
/etc/init.d/keepalived restart
/etc/init.d/redis restart
六:redisプロファイルとモニタリングスクリプトが正常かどうかをテストする
1.主従のkeepalivedとredisサービスの起動
けんさ
/etc/init.d/keepalived restart
redis-server&redis起動方式特殊、バックグラウンドで実行
netstat -tnlp | grep redis
ps -ef | grep keepalived
ps-ef|grep redis|awk'{print$2}'|xargs kill-9殺redisプロセス
redis-server/etc/redis.conf &
2.VIPでRedisを接続してみます.
redis-cli -h 192.168.1.10
redis-cli -h 192.168.1.17
redis-cli -h 192.168.1.13
192.168.1.113:6379>これは正しいヒントに入ります
3.いくつかのデータを挿入してみます.
redis-cli -h 192.168.1.13 SET Hello Redis
OK
VIPからデータを読み込む
redis-cli -h 192.168.1.13 GET Hello
"Redis"
Masterからデータを読み込む
redis-cli -h 192.168.1.10 GET Hello
"Redis"
Slaveからデータを読み込む
redis-cli -h 192.168.1.17 GET Hello
"Redis"
4.シミュレーション障害発生:keepalivedが正常に切り替わるかどうかを確認する
マスター上のRedisプロセスを殺す:
killall -9 redis-server
MasterのKeepalivedログの表示
tailf/var/log/keepalived-redis-state.log
同時にSlaveのログが表示されます.
tailf/var/log/keepalived-redis-state.log
その後、Slaveはサービスを引き継ぎ、Masterの役割を果たしていることがわかります.
redis-cli -h 192.168.1.13 INFO
redis-cli -h 192.168.1.17 INFO
role:master
そしてMasterのRedisプロセスを復元します
/etc/init.d/redis start
MasterのKeepalivedログの表示
tailf/var/log/keepalived-redis-state.log
同時にSlaveのログが表示されます.
tailf/var/log/keepalived-redis-state.log