バックエンド側 node.js AWS環境デプロイ（CodeBuild/テスト/RDS/マイグレーション）

2024-01-07

2か月前のことなんて全然覚えてないぞパクリ25発目！

Contents

1. パクリ元
2. 内容
3. 雑感

パクリ元

RDSのテーブル確認方法 #RDS - Qiita

手順EC2インスタンスにSSHで入る。$ ssh -i [鍵ファイルへのパス] ec2-user@[EC2のパブリックIP]AWSのR ...

https://qiita.com/itoo/items/6fee44e219a0b6051220

AWS CodeBuildのコンテナから、RDSへ直接マイグレーションを実行する方法 #Docker - Q

概要サービスを全部ECS + Fargateで行うサービスで、簡単かつCoolにマイグレーション実行する方法を記 ...

https://qiita.com/Mister_K/items/428e6bb61d9299bff83c

[AWS CodePipeline] デプロイ時にCodeBuildを用いてDBマイグレーションを行う方法

[AWS CodePipeline] デプロイ時にCodeBuildを用いてDBマイグレーションを行う方法 Zenn Yuma Ito 👏 [AW ...

https://zenn.dev/yuma_ito_bd/articles/20210612-code-build-fo...

AWS NATGATEWAY(NATゲートウェイ)を使ってプライベートサブネットからインターネット

AWS資格取得に向けて実際にAWSを利用してみるシリーズの投稿です。今回はAWSを使っていてVPCのプライベ ...

https://qiita.com/fkooo/items/a474db0f3c2e72448d36

NATゲートウェイの作成に失敗する - ablog

事象 NATゲートウェイを作成すると、Failed となり、状態メッセージに "Network vpc-****** has n ...

https://yohei-a.hatenablog.jp/entry/20210131/1612076951

VPC内のLambdaからインターネットにアクセスする #AWS - Qiita

VPC内にLambdaを配置すると、VPC内のサービスへの接続はとても簡単だけど、インターネットに疎通させよ ...

https://qiita.com/kojiisd/items/a15c1807c5c6bb08add0

内容

以下一覧を完了させて ECS リリースさせることでバックエンド側を終わりとする。順序は適宜入れ替える。

開発環境構築
プロジェクト作成・最適なフォルダ構成
認証チェック（含めた前処理）　
ログ処理
APIによってはIPチェックやHeaderチェック
バリデーション
環境ファイルによる振り分け
DB参照・更新
外部API呼び出し
外部API呼び出し待ち合わせ
認証・認可
SPA における CSRF CORS
長時間処理を非同期処理で
メール送信
画像アップロード
画像ダウンロード
~~EXCEL/PDF作成~~
テスト
(AWS環境デプロイ)
Docker 化確認
CodePipeline　　　　←←←　今回まだココ
RDS 対応
CloudFront
cdk

前々回料金超過のおかげで溜まっていたテストとマイグレーションを試す。しかし全く覚えてないので思い出すまでに毛布を洗濯して乾燥させるぐらいの時間を要す。

テスト

CodePipeline 上に専用のステージを追加してもいいのかもしれないが、簡単に済ませるために以前 Dockerfile 内で実行しているものをそのまま実行するようにする。
pre_build の最後に Dockerfile 内の test ステージ実行を追加する。

buildspec.yml

version: 0.2
phases:
  pre_build:
・・・
      - docker build -t $IMAGE_REPO_NAME:$IMAGE_TAG --target test .
 ・・・

テストコードでエラーが出るように修正してビルド実行。

pre_build で止まることを確認。テストコードをちゃんと修正して再ビルド。

OK。

マイグレーション

こっちも簡単に済ませるために CodePipeline 上ステージでなく、Dockerfile 内で実行しているものをそのまま呼び出すこととする。テスト後にマイグレーションを実行するように buildspec.yml に追加する。

buildspec.yml

version: 0.2
phases:
  pre_build:
・・・
      - docker build -t $IMAGE_REPO_NAME:$IMAGE_TAG --target test .
      - docker build -t $IMAGE_REPO_NAME:$IMAGE_TAG --target migration .
 ・・・

RDS

テスト内でDBを使用しているのでRDSにて無料利用枠のMariaDBを作成する。

ほぼデフォルト設定。マイグレーションのテスト用なので VPC 等も何も気にしない。出来上がったら「接続とセキュリティ」タブにあるエンドポイントとポートを Dockerfile 内の環境変数としてDB接続先を直書きしているので変更する。本来ならCodeBuild の環境変数として定義するところだろうが。ビルドしてみる。

どうもつながらない様子。パクリ元1つ目を参考につなげようとすると、、止まる。これはセキュリティグループのポート空いてないパターンだな。ポート開けて ssh 上で接続できることを確認。再度 CodeBuild やってもつながらなかったが、データベースは作っておかないといけないパターンだっけか？

MariaDB [(none)]> create database dbtest;
Query OK, 1 row affected (0.00 sec)

データベース作ってから再ビルド。やっぱ繋がらない。ハマったか。
パクリ元2つ目3つ目を見ると、、どうやら CodeBuild から RDS へは VPC を使用しないといけないらしく、CodeBuild では CodeCommit や ECR 等と接続しているので全てその配下に置く必要がありそうだ。これはコトだな、、ここからかなりの時間四苦八苦してパクリ元4つ目5つ目6つ目ぐらいまででVPCの設定が大事だとやっと気づいたので、とりあえず先ほどのRDSは削除してVPCから作成しなおし。