実験ドキュメント2:dubboマイクロサービスをkubernetesクラスタに実戦で提供

17630 ワード

インフラストラクチャ
ホスト名
ロール＃ロール＃
ip
HDSS7-11.host.com
k 8 sエージェントノード1,zk 1
10.4.7.11
HDSS7-12.host.com
k 8 sエージェントノード2,zk 2
10.4.7.12
HDSS7-21.host.com
k 8 s演算ノード1,zk 3
10.4.7.21
HDSS7-22.host.com
k 8 s演算ノード2,jenkins
10.4.7.22
HDSS7-200.host.com
k 8 s運転次元ノード(docker倉庫)
10.4.7.200
zookeeperの配備
jdk 1をインストールする.8(zkロールホスト3台)
jdkダウンロードアドレスjdk 1.6jdk1.7jdk1.8
コピー/opt/src

[root@hdss7-11 src]# ls -l|grep jdk
-rw-r--r-- 1 root root 153530841 Jan 17 17:49 jdk-8u201-linux-x64.tar.gz
[root@hdss7-11 src]# mkdir /usr/java
[root@hdss7-11 src]# tar xf jdk-8u201-linux-x64.tar.gz -C /usr/java
[root@hdss7-11 src]# ln -s /usr/java/jdk1.8.0_201 /usr/java/jdk
[root@hdss7-11 src]# vi /etc/profile
export JAVA_HOME=/usr/java/jdk
export PATH=$JAVA_HOME/bin:$JAVA_HOME/bin:$PATH
export CLASSPATH=$CLASSPATH:$JAVA_HOME/lib:$JAVA_HOME/lib/tools.jar

zookeeperのインストール(zkロールホスト3台)
zkダウンロードアドレスzookeeper
展開、構成
コピー/opt/src

[root@hdss7-11 src]# ls -l|grep zoo
-rw-r--r-- 1 root root 153530841 Jan 17 18:10 zookeeper-3.4.14.tar.gz
[root@hdss7-11 src]# tar xf /opt/src/zookeeper-3.4.14.tar.gz -C /opt
[root@hdss7-11 opt]# ln -s /opt/zookeeper-3.4.14/ /opt/zookeeper
[root@hdss7-11 opt]# mkdir -pv /data/zookeeper/data /data/zookeeper/logs
[root@hdss7-11 opt]# vi /opt/zookeeper/conf/zoo.cfg
tickTime=2000
initLimit=10
syncLimit=5
dataDir=/data/zookeeper/data
dataLogDir=/data/zookeeper/logs
clientPort=2181
server.1=zk1.od.com:2888:3888
server.2=zk2.od.com:2888:3888
server.3=zk3.od.com:2888:3888

注意:各ノードzkの構成は同じです.
myid HDSS7-11.host.com:
コピー/data/zookeeper/data/myid

HDSS7-12.host.com:
コピー/data/zookeeper/data/myid

HDSS7-21.host.com:
コピー/data/zookeeper/data/myid

dns解析をするHDSS7-11.host.comコピー/var/named/od.com.zone

1
2
3

zk1	60 IN A 10.4.7.11
zk2	60 IN A 10.4.7.12
zk3	60 IN A 10.4.7.21

順次起動
コピー

[root@hdss7-11 opt]# /opt/zookeeper/bin/zkServer.sh start
ZooKeeper JMX enabled by default
Using config: /opt/zookeeper/bin/../conf/zoo.cfg
Starting zookeeper ... STARTED

配置jenkins
ミラーの準備
Jenkins公式サイトjenkinsミラー
运维ホスト下载官网上的安定版(ここでは2.164.1をダウンロード)
コピー

[root@hdss7-200 ~]#  docker pull jenkins/jenkins:2.164.1
2.164.1: Pulling from jenkins/jenkins
22dbe790f715: Pull complete 
0250231711a0: Pull complete 
6fba9447437b: Pull complete 
c2b4d327b352: Pull complete 
cddb9bb0d37c: Pull complete 
b535486c968f: Pull complete 
f3e976e6210c: Pull complete 
b2c11b10291d: Pull complete 
f4c0181e1976: Pull complete 
924c8e712392: Pull complete 
d13006b7c9dd: Pull complete 
fc80aeb92627: Pull complete 
36a6e96ba1b5: Pull complete 
f50f33dc1d0a: Pull complete 
b10642432117: Pull complete 
850c260511d8: Pull complete 
47f95e65a629: Pull complete 
3b33ce546dc6: Pull complete 
051c7665e760: Pull complete 
fe379aecc538: Pull complete 
Digest: sha256:12fd14965de7274b5201653b2bffa62700c5f5f336ec75c945321e2cb70d7af0
Status: Downloaded newer image for jenkins/jenkins:2.164.1

[root@hdss7-200 ~]# docker tag 256cb12e72d6 harbor.od.com/public/jenkins:v2.164.1
[root@hdss7-200 ~]# docker push harbor.od.com/public/jenkins:v2.164.1

カスタムDockerfile
カスタムdockerfileをメンテナンスホストHDSS7-200.host.comで編集する
コピー/data/dockerfile/jenkins/Dockerfile

FROM harbor.od.com/public/jenkins:v2.164.1
USER root
RUN /bin/cp /usr/share/zoneinfo/Asia/Shanghai /etc/localtime &&\ 
    echo 'Asia/Shanghai' >/etc/timezone
ADD id_rsa /root/.ssh/id_rsa
ADD config.json /root/.docker/config.json
ADD get-docker.sh /get-docker.sh
RUN echo " StrictHostKeyChecking no" >> /etc/ssh/sshd_config &&\
 /get-docker.sh

このDockerfileでは主に以下のことをしました

コンテナユーザをroot

とする.

容器内のタイムゾーン

を設ける.

ssh秘密鍵(gitコードを使用する場合に使用する、ペアの公開鍵はgitlabに構成されるべき)

に追加する.

は、自作harbor倉庫に登録されたconfigファイル

に加入している.

sshクライアントの

を変更

dockerをインストールするクライアント

ssh鍵ペアを生成するには、次の手順に従います.
コピー

[root@hdss7-200 ~]# ssh-keygen -t rsa -b 2048 -C "[email protected]" -N "" -f /root/.ssh/id_rsa

config.json
コピー

{
    "auths": {
        "harbor.od.com": {
            "auth": "YWRtaW46SGFyYm9yMTIzNDU="
        }
 }
}

get-docker.sh
コピー

solrcloud,solrはクラスタ内でインデックスを確立する

kubeadm新加nodeノードエラーthere is no JWS signed token in the cluster-info ConfigMap