Linux環境でのRedis分散クラスタの構築の構成

21649 ワード

以前、redisクラスタサービスの構築を遊んだことがあります.その哨兵モードはデータベースの読み書き分離に似ていますが、業務の書き込みデータはすべて論理的なmasterが負担しています.具体的な方法は「哨兵」です.今日はRedisの公式説明に基づいて、複数のmasterを16384個のhash slotに分けることができ、異なるhash keyを異なるmasterノードに落とすことができ、本当の意味の分布式を配置することができます.
本明細書の導入環境はubuntu 16である.04, redis-3.2.8

導入シナリオおよび環境


この例では、6ノード、3つのmaster、および3つのslavesの2つのグループを用いて、ストレージサービスを外部に提供する分散クラスタを共同で形成する.

redisの取得


redisをダウンロードして、ソースコードを得るべきで、先に解凍して、それからmakeでいいです;

redis構成の概要

# redis               ,                     ,     
bind 127.0.0.1
#        ,       
port 7000
#   redis   ,  pid    
pidfile /disk/develop/redis/cluster/7000/redis.pid
# redis       
logfile "/disk/develop/redis/cluster/7000/log.txt"
#          
dir /disk/develop/redis/cluster/7000
#       
cluster-enabled yes
#             
cluster-config-file nodes.conf
#              
cluster-node-timeout 5000
#          
appendonly yes

クラスタディレクトリの作成


例えば、ダウンロードしたredisソースコードを'/disk/develop/redis/cluster/redis-3.2.8'に解凍し、他の6つのノードディレクトリを作成しました.
cd /disk/develop/redis/cluster/
mkdir 7000 7001 7002 7003 7004 7005 

構成の開始


copy元のプロファイル
cp redis-3.2.8/redis.conf 7000/
cp redis-3.2.8/redis.conf 7001/
cp redis-3.2.8/redis.conf 7002/
cp redis-3.2.8/redis.conf 7003/
cp redis-3.2.8/redis.conf 7004/
cp redis-3.2.8/redis.conf 7005/

プロファイルを修正し、それぞれ上の6つの新しいフォルダに入り、上のプロファイル紹介のサンプルに従って対応修正を行います.
サービスの開始
cd /disk/develop/redis/cluster/redis-3.2.8
src/redis-server ../7000/redis.conf
src/redis-server ../7001/redis.conf
src/redis-server ../7002/redis.conf
src/redis-server ../7003/redis.conf
src/redis-server ../7004/redis.conf
src/redis-server ../7005/redis.conf

サービスを確認しますか?
ps -ef|grep redis-server
hinsteny 21971  2242  0 22:48 ?        00:00:02 src/redis-server 127.0.0.1:7000 [cluster]
hinsteny 22062  2242  0 22:50 ?        00:00:02 src/redis-server 127.0.0.1:7001 [cluster]
hinsteny 22149  2242  0 22:53 ?        00:00:02 src/redis-server 127.0.0.1:7002 [cluster]
hinsteny 22226  2242  0 22:55 ?        00:00:02 src/redis-server 127.0.0.1:7003 [cluster]
hinsteny 22257  2242  0 22:57 ?        00:00:02 src/redis-server 127.0.0.1:7004 [cluster]
hinsteny 22280  2242  0 22:58 ?        00:00:02 src/redis-server 127.0.0.1:7005 [cluster]
hinsteny 23831 11259  0 23:35 pts/10   00:00:00 grep --color=auto redis-server

6つのサービスが起きたが,このとき彼らの間にはお互いの存在が分からず,クラスタを構成してサービスを提供することができなかった.
src/redis-cli -c -p 7000
127.0.0.1:7000> cluster info
cluster_state:fail   //      
cluster_slots_assigned:0 // hash          
cluster_slots_ok:0
cluster_slots_pfail:0
cluster_slots_fail:0
cluster_known_nodes:1
cluster_size:0
cluster_current_epoch:0
cluster_my_epoch:0
cluster_stats_messages_sent:0
cluster_stats_messages_received:0
127.0.0.1:7000> 

次にツール‘redis-trib.rb’は上の6つのノードを接続する
挿入、redis-tribはruby環境が必要で、その環境の下で対応するredisプラグインをインストールします
#    ruby  
apt-get install ruby
#    redis     
gem install redis

関連クラスタの作成

src/redis-trib.rb create --replicas 1 127.0.0.1:7000 127.0.0.1:7001 127.0.0.1:7002 127.0.0.1:7003 127.0.0.1:7004 127.0.0.1:7005 >>> Creating cluster >>> Performing hash slots allocation on 6 nodes... Using 3 masters: 127.0.0.1:7000 127.0.0.1:7001 127.0.0.1:7002 Adding replica 127.0.0.1:7003 to 127.0.0.1:7000 Adding replica 127.0.0.1:7004 to 127.0.0.1:7001 Adding replica 127.0.0.1:7005 to 127.0.0.1:7002 M: dc5da8bfce379f9cc2c11966709d7d9f275d06b1 127.0.0.1:7000 slots:0-5460 (5461 slots) master M: 2b22012f983698f504b9e61d0958fc645112c805 127.0.0.1:7001 slots:5461-10922 (5462 slots) master M: df396e45f08019525bf668ff4704d626014db2d6 127.0.0.1:7002 slots:10923-16383 (5461 slots) master S: 90740536f6e5b191300253b84fb4d9b908d48d54 127.0.0.1:7003 replicates dc5da8bfce379f9cc2c11966709d7d9f275d06b1 S: 52ba80c45ffd165b9cec01c8409c605386d1a8b2 127.0.0.1:7004 replicates 2b22012f983698f504b9e61d0958fc645112c805 S: 888848820f300331a76803755dc1c15302f2ce98 127.0.0.1:7005 replicates df396e45f08019525bf668ff4704d626014db2d6 Can I set the above configuration? (type 'yes' to accept): yes >>> Nodes configuration updated >>> Assign a different config epoch to each node >>> Sending CLUSTER MEET messages to join the cluster Waiting for the cluster to join... >>> Performing Cluster Check (using node 127.0.0.1:7000) M: dc5da8bfce379f9cc2c11966709d7d9f275d06b1 127.0.0.1:7000 slots:0-5460 (5461 slots) master 1 additional replica(s) M: 2b22012f983698f504b9e61d0958fc645112c805 127.0.0.1:7001 slots:5461-10922 (5462 slots) master 1 additional replica(s) S: 90740536f6e5b191300253b84fb4d9b908d48d54 127.0.0.1:7003 slots: (0 slots) slave replicates dc5da8bfce379f9cc2c11966709d7d9f275d06b1 S: 52ba80c45ffd165b9cec01c8409c605386d1a8b2 127.0.0.1:7004 slots: (0 slots) slave replicates 2b22012f983698f504b9e61d0958fc645112c805 M: df396e45f08019525bf668ff4704d626014db2d6 127.0.0.1:7002 slots:10923-16383 (5461 slots) master 1 additional replica(s) S: 888848820f300331a76803755dc1c15302f2ce98 127.0.0.1:7005 slots: (0 slots) slave replicates df396e45f08019525bf668ff4704d626014db2d6 [OK] All nodes agree about slots configuration. >>> Check for open slots... >>> Check slots coverage... [OK] All 16384 slots covered. 

クラスタ構成の検証


クラスタの構成に成功したことが示されており、ノード[7000,700,17002]は3つのマスターであり、残りの[700,00370047005]はそれぞれ上位3つのレプリケーションノードであり、16384個のスロットポイントがすべて上書き分布されていることがわかり、クラスタ状態を確認します.
src/redis-cli -c -p 7000127.0.0.1:7000> cluster info
cluster_state:ok
cluster_slots_assigned:16384
cluster_slots_ok:16384
cluster_slots_pfail:0
cluster_slots_fail:0
cluster_known_nodes:6
cluster_size:3
cluster_current_epoch:6
cluster_my_epoch:1
cluster_stats_messages_sent:487
cluster_stats_messages_received:487

最後にsetとget操作で検証します.
src/redis-cli -c -p 7000
127.0.0.1:7000> set hisoka welcome
-> Redirected to slot [9822] located at 127.0.0.1:7001
OK
127.0.0.1:7001> get hisoka
"welcome"
127.0.0.1:7001> set hinsteny 'love sing'
OK
127.0.0.1:7001> get hinsteny
"love sing"
127.0.0.1:7001> set k3 k3_val
-> Redirected to slot [4576] located at 127.0.0.1:7000
OK
127.0.0.1:7000> set k5 k5_val
-> Redirected to slot [12582] located at 127.0.0.1:7002
OK
127.0.0.1:7002> 

That’s all, Thanks!