Cloud/Docker
원본 글 보기

[Docker] Docker Swarm으로 로드 밸런싱하기

[Docker] Docker Swarm으로 로드 밸런싱하기

[Docker]

Docker Swarm

0) 도커 스웜이란?

컨테이너 오케스트레이션 도구 중의 하나로, 여러 대의 Docker 호스트들을 마치 하나인 것처럼 만들어주는 Orchestration 도구

1) 도커 스웜 사용 이유

- 서버 자원이 부족한 경우, 서버 자원 확장 필요.

- Scale out 확장을 위한 병렬 클러스터 구성 필요.

- 여러 대의 서버를 하나의 풀로 관리 가능.

- 새로운 서버를 추가됐을 때 발견 하고 관리

- 컨테이너를 서버에 할당 할 때 스케줄러와 로드밸런싱 문제 해결

- 대표적인 도커 제공 클러스터 엔진

(2) 도커 스웜 설치 와 노드관리

1) 스웜 확인



docker info | grep -i swarm

* errors pretty printing info 나올 시, systemctl restart docker.

2) 매니저에서 스웜 클러스터 시작



docker swarm init --advertise-addr [매니저 IP]

결과에서 아래 부분 복사해 둔다.



docker swarm join --token SWMTKN-1-0tsxxorj5kgdo7lcxw74pd9a6ipqqvh6zg7z6wvpg8kx3camv3-25s14pz3cvjahpxl41i4wkik7 192.168.1.124:2377

3) 노드 추가

매니저 노드 설정했을 때 나오는 명령어 확인 후 워커에서 실행 추가

[manager]



docker swarm join --token SWMTKN-1-0tsxxorj5kgdo7lcxw74pd9a6ipqqvh6zg7z6wvpg8kx3camv3-25s14pz3cvjahpxl41i4wkik7 192.168.1.124:2377

4) 노드 확인



docker node ls

# 노드 추가

#추가한 노드 확인.

5) 노드 추가를 위한 토큰 확인 및 변경



docker swarm join-token manager
docker swarm join-token worker

docker swarm join-token --rotate manager

6) 워커 노드 제거

워커에서 docker swarm leave

매니저에서 확인후 down 상태가 되면 docker node rm [호스트 명]

7) 워커 및 매니저 변경

워커 -> 매니저 : docker node promote [호스트 명]

매니저 -> 워커 : docker node demote [호스트 명]

(3) 도커 스웜 서비스 관리

1) 서비스

도커 명령어의 제어 단위는 컨테이너.

스웜 모드의 제어 단위는 서비스 (Service).

서비스는 1개 이상의 컨테이너 집합이다.

서비스 내의 컨테이너를 태스크 (Task) 라고 명칭하며

컨테이너들은 워커 노드와 매니저 노드에 할당된다.

* 레플리카

노드 다운 발생시 서비스에 정의된 리플리카의 수만큼 컨테이너 생성.

컨테이너 중 일부가 작동을 멈춰 정지한 경우 리플리카 수만큼 컨테이너 생성.

스웜 매니저는 클러스터에서 컨테이너를 감시, 리플리카 수만큼 컨테이너 생성.

[1] 서비스 생성

서비스 : 컨테이너의 집합.



docker service create \
	--name [서비스 이름]
ubuntu:14.04 \
	/bin/sh -c "while true; do echo hello world; sleep 1; done"
[ 예시 ]
docker service create --name web -p 8080:8080 tomcat

[2] 서비스 리스트 확인

생성된 서비스가 정상적으로 실행이 되었는지는 아래 명령으로 확인.



docker service ls

REPLICAS 필드가 1/1 로 변경이 되면 컨테이너가 정상적으로 실행이 된 것으로 확인 할 수 있다.

또 해당 필드를 통해 컨테이너가 문제가 생겼는지 정상 작동 중인지 확인이 가능하다.

[3] 서비스 상세 정보 확인

각 서비스 별로 자세한 정보를 확인하는 명령은 아래와 같다.



docker service ps [서비스 이름]

서비스 정보를 확인해보니, manager : Running이 표시된다.

docker ps -a 로 컨테이너도 확인해본다.

서비스는 컨테이너 그룹이니까 컨테이너가 하나 만들어진다.

서비스 스웜에 연결되어 있던 다른 노드 아이피로도 접속이 된다.

도커 네트워크 리스트를 살펴보자.

ingress overlay network

오버레이 네트워크 중 ingress 네트워크는 호스트(노드)에서 서비스로의 포워딩을 담당한다. 외부에 포트를 공개한 서비스를 스웜에 배포하면 ingress 네트워크에 서비스를 참여시키고 다음의 두 IP를 할당한다.

- 서비스에 대한 가상 IP

- 서비스의 각 컨테이너에 대한 IP

각 노드는 외부에 개시된 서비스 포트로 요청이 오면 ingress 네트워크의 가상 IP로 전달한다. 가상 IP는 ingress 네트워크에서 서비스에 접근할 때 사용할 IP이다. 가상 IP에 전달된 요청은 다시 컨테이너의 IP로 전달된다. ingress 네트워크에 참여한 서비스의 각 컨테이너는 ingress 네트워크 내에서 고유 IP를 갖는다.

docker network inspect ingress 명령어 실행하면 ingress 네트워크 내에 생성된 서비스의 VIP와 각 컨테이너에 할당된 IP를 확인할 수 있다.

[4] Docker Swarm Service Scale-out

생성된 서비스를 복제하여 분산 서비스를 할 수 있도록 해보자.



docker service scale web=3

시간이 좀 걸린다..

스케일을 준 후,



docker service ps web2

명령어로 확인해보면, 스케일을 주기 전에는 본체 정보만 등록되어 있었는데

스케일을 준 후에는 등록된 도커 노드 2개의 정보도 나온다.

도커 노드1 에서도 확인해보자.

manager 노드가 스케일을 부여하기 전, docker service ps web2로 컨테이너가 있는지 확인해 본다.

없다.

스케일 부여 후 확인:

컨테이너가 생겼다.

이제 이 컨테이너에 각각 노드들의 IP로 접속해 볼건데,

구별을 위해 디렉터리와 간단한 check.jsp을 만들어 주겠다.

[manager]



docker exec -it web2.1.o6mntycmfqmvvkis9ewdial7e bash



cd webapps



mkdir minji



cd minji/



echo manager > check.jsp



cat check.jsp 
 manager

위 과정을 각 노드에서도 작업한다.

그리고 브라우저로 접속해보자.

접속한 브라우저 환경은 크롬, 크롬 시크릿모드, 사파리이다.

( 한번 접속하면 세션 값이 저장되기 때문에, 한 페이지에서 새로고침을 하는 것은 의미가 없다!)

[5] Docker Swarm Service 제거

생성한 서비스의 제거 및 종료는 아래 명령어를 사용한다.



docker service rm web
web

docker service ls
ID NAME MODE REPLICAS IMAGE

docker service ps web
Error: No such service: web

[6] 스웜 모드 장애 복구

컨테이너 정지 발생시 중지된 컨테이너와 새로 생성된 컨테이너 확인.

강제로 아무 컨테이너 삭제



docker rm -f [컨테이너 이름]

다시 매니저 노드에서 확인.

로드밸런스 3개로 설정해 줬으니, 노드2에서 컨테이너를 지워도 다른 곳에서 하나가 살아나서 3개를 맞춘다.


💡 아래는 실습하며 알게 된 에러(?) 팁.



systemctl stop firewalld 후에는
systemctl restart docker 재시작 해야함.