CircleCIのmachine Executorでbuildジョブからdeployジョブへとファイルの受け渡しを行う(Workspace)
概要
CircleCIのmachine Executor
を使用して「Dockerビルド〜デプロイ」を行なっているプロジェクトにおいて、build jobで生成したファイル/ディレクトリをdeploy jobに渡す手順をメモ書きします。
方法(結論)
job間にWorkspaceを介してdeployに必要なファイル/ディレクトリを共有します。
persist_to_workspace
後続のdeploy jobへ提供したいファイル/ディレクトリをWorkspaceへアップロードします。
具体的には、build jobの最後のstepでpersist_to_workspace
を実行します。
- persist_to_workspace:
root: .
paths:
- ./app/build
- ./app/deps
-
root:
- ルートにしたいコンテナ上のディレクトリ。
- 絶対パス(もしくは
working_directory
からの相対パス)の形で指定します。
-
paths:
- 上記rootからの相対パスで、jobs間で共有したいファイル/ディレクトリを指定します。
attach_workspace
Workspaceに保存されたデータをattach_workspace
で取得します。
- attach_workspace:
at: .
-
at:
- 絶対パス(もしくは
working_directory
からの相対パス)の形で指定します。
- 絶対パス(もしくは
補足説明
CircleCIのjobs
は隔離されている個々の環境で実行される仕様になっています。
# 例:build jobで生成されたファイルは、そのままではdeploy jobには渡らない
jobs:
build:
...: ...
deploy:
...: ...
そのため、特定のjobの結果を別のjobで使うためには、こういった「Workspaceでデータ共有する」などの方法で受け渡しを行う処理が必要となります。
(画像引用:CircleCI / Jobs overview)
例
実行環境
- macOS
- GitHub(CircleCIと連携済)
シチュエーション
.
├── .circleci/
│ └── config.yml
├── app
│ ├── Dockerfile
│ ├── (build/)
│ ├── (deps/)
│ └── moge.json
└── docker-compose.yml
- (build)
build job中、docker-compose build
により生成されたビルドファイル群を格納しています
- (deps)
擬似コード moge deps.get
の実行により、app/moge.jsonへ記述した依存パッケージ群が生成されてdepsディレクトリに格納します
-
npm install
でpackage.json記述パッケージをnode_modules/に格納するのと同じイメージです
コード
.circleci/config.yml
version: 2.1
orbs:
# 擬似Orb
deploy-orb: deploy-orb/deploy-orb@latest
executors:
machine-executor:
machine:
image: ubuntu-1604:202010-01
workflows:
version: 2
build-deploy:
jobs:
- build
- deploy:
requires:
- build
jobs:
build:
executor:
name: machine-executor
steps:
- checkout
- run:
name: Build Docker container
command: |
set -x
docker-compose build
- run:
name: Moge deps.get
command: |
set -x
# 擬似コード(依存パッケージ取得)
docker-compose run --rm app bash -c "moge deps.get"
- run:
name: Up Docker container
command: docker-compose up -d
- run:
name: Moge test
command: |
set -x
# 擬似コード(テスト実行)
docker-compose exec app bash -c "moge test"
- persist_to_workspace:
root: .
paths:
- ./app/build
- ./app/deps
- run:
name: Finish build
command: echo "Finish build"
deploy:
executor:
name: machine-executor
steps:
- checkout
- attach_workspace:
at: .
- run:
name: Check files/directories
command: |
set -x
pwd && ls -a && ls app
- run:
name: Container push and release
working_directory: app
command: |
# 擬似コード(本番環境へビルドコンテナをデプロイ)
deploy-orb/install-and-push-release -a $YOUR_APP_NAME
- run:
name: Finish deploy
command: echo "Finish deploy"
(参考)
- CircleCI
- Using Workflows to Schedule Jobs
https://circleci.com/docs/2.0/workflows/
- Orbs, Jobs, Steps, and Workflows
https://circleci.com/docs/2.0/jobs-steps/
- Choosing an Executor Type
https://circleci.com/docs/2.0/executor-types/
.
├── .circleci/
│ └── config.yml
├── app
│ ├── Dockerfile
│ ├── (build/)
│ ├── (deps/)
│ └── moge.json
└── docker-compose.yml
build job中、
docker-compose build
により生成されたビルドファイル群を格納しています擬似コード
moge deps.get
の実行により、app/moge.jsonへ記述した依存パッケージ群が生成されてdepsディレクトリに格納します
-
npm install
でpackage.json記述パッケージをnode_modules/に格納するのと同じイメージです
version: 2.1
orbs:
# 擬似Orb
deploy-orb: deploy-orb/deploy-orb@latest
executors:
machine-executor:
machine:
image: ubuntu-1604:202010-01
workflows:
version: 2
build-deploy:
jobs:
- build
- deploy:
requires:
- build
jobs:
build:
executor:
name: machine-executor
steps:
- checkout
- run:
name: Build Docker container
command: |
set -x
docker-compose build
- run:
name: Moge deps.get
command: |
set -x
# 擬似コード(依存パッケージ取得)
docker-compose run --rm app bash -c "moge deps.get"
- run:
name: Up Docker container
command: docker-compose up -d
- run:
name: Moge test
command: |
set -x
# 擬似コード(テスト実行)
docker-compose exec app bash -c "moge test"
- persist_to_workspace:
root: .
paths:
- ./app/build
- ./app/deps
- run:
name: Finish build
command: echo "Finish build"
deploy:
executor:
name: machine-executor
steps:
- checkout
- attach_workspace:
at: .
- run:
name: Check files/directories
command: |
set -x
pwd && ls -a && ls app
- run:
name: Container push and release
working_directory: app
command: |
# 擬似コード(本番環境へビルドコンテナをデプロイ)
deploy-orb/install-and-push-release -a $YOUR_APP_NAME
- run:
name: Finish deploy
command: echo "Finish deploy"
- CircleCI
- Using Workflows to Schedule Jobs
https://circleci.com/docs/2.0/workflows/ - Orbs, Jobs, Steps, and Workflows
https://circleci.com/docs/2.0/jobs-steps/ - Choosing an Executor Type
https://circleci.com/docs/2.0/executor-types/
- Using Workflows to Schedule Jobs
Author And Source
この問題について(CircleCIのmachine Executorでbuildジョブからdeployジョブへとファイルの受け渡しを行う(Workspace)), 我々は、より多くの情報をここで見つけました https://qiita.com/im_miolab/items/cd16e59fd51bd4f1805d著者帰属:元の著者の情報は、元のURLに含まれています。著作権は原作者に属する。
Content is automatically searched and collected through network algorithms . If there is a violation . Please contact us . We will adjust (correct author information ,or delete content ) as soon as possible .