2024/12 48

CI/CD - GitLab으로 AWS Cloud로의 지속적인 배포 (CD) - (4) / ECS로 Docker Application 배포 (Automation by GitLab - AWS CLI) /

GitLab-runner 가 배포를 하게 될 것이다.Gitlab-runner가 배포하는 방식은 gitlab-runner에서 aws 명령어를 실행하게 될 것이다.aws cli, 설치를 안 했으면 하면 된다.aws cli 명령 중에서는 ecs를 컨트롤할 수 있는 명령을 제공한다.ecs의 cluster를 만들거나 service를 새로 실행(running)하거나 하는 등의 작업을 수행할 수 있다.ECR에 새로운 어플리케이션이 올라가있는데, 거기에 코드 내용을 수정하고 새로운 버전의 docker image를 올리고그리고 service를 새로 실행(running)하게 될 것이다.service를 새로 실행하게 되면은 새로 만들어진 docker image를 가지고 와서 service가 올라오게 될 것이다.이 과정을 테..

CI/CD - GitLab으로 AWS Cloud로의 지속적인 배포 (CD) - (3) / 다음 단계로 넘어가기 전 간단하게 새로나왔던 개념 공부

1. Application Load Balancer2. Target Group3. Listener AWS Cloud 위에 VPC (Virtual Private Cloud)를 만들었다.VPC는 account를 만들때 기본으로 만들어졌던 네트워크VPC는 가상 네트워크, 거대한 가상 네트워크이다.이 네트워크(VPC) 위에 어플리케이션을 구축하는 것.이 네트워크 위에 ECS Cluster를 만들었고그리고 Service 를 하나 만들었다.이 Service는 2개의 Container, task로 구성이 되어 있다. task 1, task2.이 2개의 task는 target group으로 묶었다.그렇게 묶은 이유는, 사용자 클라이언트 요청이 80번으로 들어왔을때,Listener가 연결된 target group으로 사..

CI/CD - GitLab으로 AWS Cloud로의 지속적인 배포 (CD) - (2) / ECS로 Docker Application 배포 (Manually) /

일단, AWS ECS로 가보자. 클러스터를 만들어야 한다.일단은 AWS Fargate (serverless) 로 만든다  이제 컨테이너를 실행하기 위해서는 task definition 이 필요하다.왼쪽 바에 보면 정의할 수 있는 버튼이 있다.새로운 task definition을 생성해야 한다.그런데, task role 을 선택할 때 ecsTaskExecutionRole 을 선택해야 하는데 나오지 않는다. 뭐지? AWS ECS에서 ecsTaskExecutionRole을 선택할 수 없는 경우는 보통 해당 역할이 AWS 계정에 아직 생성되지 않았거나, 필요한 권한이 제대로 설정되지 않았기 때문입니다. 아래는 이 문제를 해결하는 단계별 가이드입니다.1. ecsTaskExecutionRole이 무엇인가요?ecsT..

CI/CD - GitLab으로 AWS Cloud로의 지속적인 배포 (CD) - (1) / AWS Elastic Container Service (ECS) / Task & Task definition

GitLab pipeline 에서 make build, make push 까지 했었다. (make test 의 경우에는 그냥 스테이지만 넣었고 실질적인 test를 넣은 건 아니었다.)ECR까지 docker image가 등록이 된 상태다. 지속적인 통합 과정, CI 과정은 끝이 난 것. 이제 make deploy,그러니까 AWS Cloud로의 배포까지 추가해서 사용자들이 사용할 수 있도록 하면 된다.CI 까지 만들었으니까 CD 를 만든다는 것. 1. GitLab을 이용해서 프로젝트를 만들고2. Docker Image를 빌드해서 ECR에 Push 했고3. 이제 인터넷 사용자가 서비스를 사용할 수 있도록 Docker Image를 배포해야 한다.4. AWS ECS 를 이용해서 우리가 개발한 어플리케이션을 AWS..

CI/CD - CI/CD Pipeline 구성하기 / Makefile & make /

파이프라인을 작성을 해봤고 어떻게 작동하는지도 확인해봤다. 이제는 test-app을 직접 CI/CD Pipeline 배포하는 것을 해봐야 한다.실제 빌드를 할 수 있게 해야 한다. 현재 .gitlab-ci.yml 파일(pipeline)에는 stages가 만들어져있다.- build / test / deploy지금은 각각의 stages 에서 echo를 실행하고 있는데,직접 build를 할 수 있도록,docker image를 build 하고 push하고 test 하고 deploy 를 할 수 있도록 수정을 해야 한다. 여러가지 방법 중에 여기서 선택할 방법은, 소스 코드에 make build / make push / make test ... 스크립트를 함께 집어넣을 것이다. 그래서 make build 를 하게 ..

CI/CD - GitLab Pipeline 구성 / 파이프라인 문제 발생, 문제 해결 /

gitlab runner를 구축했었다.gitlab cicd pipeline을 구성을 해볼 것이다.pipeline 이라는 건, 컨베이어 벨트 같은것이다. 각각의 스테이지가 있는데그 스테이지는 컨베이어 벨트로 연결이 되어 있고,각각 스테이지에서 어떤 결과물들을 다음 스테이지로 컨베이어 벨트를 통해서 넘기는 것.최종적으로는 완성된 제품이 튀어나오는 것.GitLab Pipeline도 stages 를 이용해서 관리한다.stages:- build- test- deploy 빌드 스테이지에서는 도커 이미지를 만들고테스트 스테이지에서는 도커 이미지 기반으로 해서 여러 가지 테스트를 수행하고테스트가 끝나면 ECR에 push를 하고,최종적으로 Deploy.  스테이지는 하나 이상의 job 으로 구성된다.스테이지는 각각의 공..

CI/CD - Build push/pull (Docker Image 저장소 : AWS ECR) + (GitLab을 이용한 자동화 : GitLab Runner)

만들었고, 아직 아무런 image가 없다. No images.이 오른쪽 위에, View push commands 를 봐야 한다.이 저장소를 사용하기 위한 다양한 명령어들이 있다.당연히 이것도 마찬가지로, ECR에 대한 접근 권한이 있어야 한다.접근 권한을 생성해줘야 한다.이 명령어를 사용하기 전에 접근 권한을 먼저 설정하는 일을 해봐야 한다. Docker Image는 회사의 중요한 자산이다.Docker Image는 사실상 제품에 대한 정보를 가지고 있는 것이니까.그러니 그걸 저장하고 있는 ECR은 아무나 접근하게 두어선 안 된다.그래서 권한 관리를 해줘야 한다.AWS에서는 IAM 이라는 서비스를 이용해서 권한을 관리를 할 수 있다.IAM을 통해서 access key, secret key 를 가지고 key..

CI/CD - 프로젝트 코드 작업 (AWS ECR push 하기 전 Dockerfile, Docker Image, container까지)

우선, Group 을 만들고, 거기서 project (test-app) 을 생성하는데, 그 안에는 Dockerfile, Makefile 이 있을 것이다.Docker Image가 만들어지고 나면, push 를 해서 AWS ECR에 저장될 것이고 Docker Container를 실행할 수 있게 된다.일단 지금은, AWS ECR 에 push 하기 전까지의 단계까지만 진행해볼 것.GitLab 기반 Docker 이미지 생성 및 AWS ECR 푸시 워크플로--------------------------------------------------1. 그룹 생성: - GitLab에서 새로운 그룹(Group)을 생성. └── 그룹 이름: [그룹 이름]2. 프로젝트 생성: - 그룹 안에 새로운 프로젝트(Pr..

CI/CD - GitLab과 Docker Application 빌드 / GitLab 가입 후 Git 저장소 생성 /

1. GitLab 소개와 가입- Gitlab 은 기본적으로 AWS 클라우드처럼 인터넷 서비스다. 그래서 인터넷 서비스라서 가입을 해야 사용가능함.- GitLab 은 세계에서 가장 널리 사용하는 CI/CD 툴 중 하나. GitLab 프로젝트를 만들고 Git 기반으로 소스코드를 관리하고, 자동으로 Docker 어플리케이션을 빌드하게 된다. 2. Gitlab 프로젝트 설정3. Gitlab 을 이용한 Docker 어플리케이션 빌드- Docker 어플리케이션 빌드를 해서 나오는 결과로 Docker Image가 만들어짐. 4. Docker Image 를 ECR 저장소에 push- 만들어진 Docker Image를 사용하기 위해서는 저장소에 저장을 해야 하는데, ECR 이라고 하는 Docker 저장소에 push를 하..

CI/CD - Docker란? / Docker vs. VM / Docker 설치 후 사용 / Docker Hub / Docker 명령

Docker란 무엇인가?Docker는 애플리케이션을 실행할 때 필요한 모든 것(코드, 라이브러리, 설정)을 하나의 컨테이너라는 "상자"에 담아두는 기술이에요. 이 상자는 개발, 테스트, 배포 등 어디로 가든 동일하게 작동해요. 그러니까 개발 환경과 배포 환경이 달라서 "왜 여기선 작동 안 하지?" 하는 고민이 사라지는 마법 같은 도구예요.한마디로 Docker는?"내 컴퓨터에서 잘 돌아가는 걸, 어디서든 잘 돌아가게 해주는 도구!"왜 Docker를 써야 할까요?과거의 문제개발자들이 Docker 없이 개발하던 시절엔 이런 문제가 많았어요:"왜 개발 환경에선 되는데 서버에선 안 돼?"개발자는 Windows를 쓰고, 서버는 Linux라서 설정이나 의존성 충돌로 문제가 생김.배포는 너무 복잡했어요.운영팀이 직접 ..