Cloud/Kubernetes
원본 글 보기

[Kubernetes] 쿠버네티스란? CentOS 8에 쿠버네티스 설치하기

[Kubernetes] 쿠버네티스란? CentOS 8에 쿠버네티스 설치하기

[ Kubernetes ]

쿠버네티스 환경 구축, CentOs 8 설치

1. 쿠버네티스

쿠버네티스란 컨테이너 런타임을 통해 컨테이너를 다루는 도구를 말한다.

쿠버네티스가 해 주는 일은 여러 서버(노드)에 컨테이너를 분산해서 배치하거나,

문제가 생긴 컨테이너를 교체하거나, 컨테이너가 사용할 비밀번호나 환경 설정을 관리하고 주입해 주는 일 등이 있다.

도커, 쿠버네티스 뭐가 다른가?



쿠버네티스 공식 사이트
https://kubernetes.io/ko/docs/concepts/overview/what-is-kubernetes/

2. 쿠버네티스 설치 환경

[1] 개발 용도의 쿠버네티스

- Minikube

- Docker for Windows에 내장

* 로컬 환경에서 스탠드 얼론 방식으로 동작, 마스터와 노드가 동일한 호스트에 실행,

기본 작동 방식을 이해 하기 유리하지만, 실제 환경에 적용하기 적절치 못함

[2] 서비스 테스트 | 운영 용도의 쿠버네티스

kuberspray (자체 서버)

kubeadm (자체 서버)

EKS,GEK (퍼블릭 클라우드 이용)

쿠버네티스 클러스터 : 하나의 마스터와 최소 두 개 이상의 노드로 구성, 각각 별도의 시스템에서 구동, 필요할 때마다 노드를 추가해 용량을 늘려야하는 실제 환경에서의 구성 방식

3. Centos 8에 설치 진행

1) 방화벽 설정

[master, worker1, worker2] 세 대 다 진행.



firewall-cmd --permanent --add-port=6443/tcp
firewall-cmd --permanent --add-port=2379-2380/tcp
firewall-cmd --permanent --add-port=10250/tcp
firewall-cmd --permanent --add-port=10251/tcp
firewall-cmd --permanent --add-port=10252/tcp
firewall-cmd --permanent --add-port=10255/tcp
firewall-cmd --reload
modprobe br_netfilter
echo '1' > /proc/sys/net/bridge/bridge-nf-call-iptables

setenforce 0
	
sed -i --follow-symlinks 's/SELINUX=enforcing/SELINUX=disabled/g' /etc/sysconfig/selinux
	
init 6

2) 호스트 이름 설정

[master, worker1, worker2] 세 대 다 진행.



vi /etc/hostname

위 파일 내용을

각 노드 별 이름에 맞게 설정한다.



vi /etc/hosts

위 파일 내용을 아래와 같이 수정한다.



[master IP]	master
[worker1 IP] worker1
[worker2 IP] worker2

3) 도커 설치

[master, worker1, worker2] 세 대 다 진행.



dnf config-manager --add-repo=https://download.docker.com/linux/centos/docker-ce.repo
dnf install -y https://download.docker.com/linux/centos/7/x86_64/stable/Packages/containerd.io-1.2.6-3.3.el7.x86_64.rpm
dnf install -y docker-ce

systemctl enable docker
systemctl start docker

4) k8s 설치

[master, worker1, worker2] 세 대 다 진행.

방화벽 설정 추가.



firewall-cmd --add-masquerade --permanent
firewall-cmd --reload

Update Iptables Settings

iptable 설정.



cat <<EOF > /etc/sysctl.d/k8s.conf
net.bridge.bridge-nf-call-ip6tables = 1
net.bridge.bridge-nf-call-iptables = 1
EOF



sysctl --system

💡 net.bridge.bridge-nf-call-iptables = 1 의 의미 :

centOS와 같은 리눅스 배포판은 net.bridge.bridge-nf-call-iptables의 default값이 0이다.

이는 bridge 네트워크를 통해 송수신 되는 패킷이 iptable 설정을 우회한다는 의미.

하지만 컨테이너의 네트워크 패킷이 호스트머신의 iptable 설정에 따라 제어되도록 하는 것이 바람직하며, 이를 위해서는 값을 1로 설정해야한다.



cat <<EOF > /etc/yum.repos.d/kubernetes.repo
[kubernetes]
name=Kubernetes
baseurl=https://packages.cloud.google.com/yum/repos/kubernetes-el7-x86_64
enabled=1
gpgcheck=1
repo_gpgcheck=1
gpgkey=https://packages.cloud.google.com/yum/doc/yum-key.gpg https://packages.cloud.google.com/yum/doc/rpm-package-key.gpg
EOF




dnf install -y kubelet kubeadm kubectl --disableexcludes=kubernetes



systemctl enable kubelet
systemctl start kubelet

5) k8s swap 설정

[master, worker1, worker2] 세 대 다 진행.

kubelet이 제대로 동작하기 위해 SWAP을 disable 시켜준다.



swapoff -a

재부팅하면 다시 스왑이 올라온다.

/etc/fstab 파일에 재부팅 시 자동으로 마운하게 설정되어있기 때문.

그래서 이 부분을 주석처리하여 인식이 안되도록 한다.



/dev/mapper/cl-swap none swap defaults 0 0	
이 부분을 다음처럼 변경, 주석 처리함 !

#/dev/mapper/cl-swap none swap defaults 0 0

6) 마스터 설정

[ master ]



kubeadm init --pod-network-cidr 192.168.1.0/24


조금 기다리면 아래와 같은 결과가 나온다.



kubeadm join 192.168.1.IP:6443 --token 여기의 토큰 값 잘 저장해 두세요

토큰 값은 이따 필요하니 잘 저장해 둔다.



mkdir -p $HOME/.kube
cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
chown $(id -u):$(id -g) $HOME/.kube/config

아래 명령어로 마스터 설정을 확인한다.



kubectl get nodes

calico.yaml 을 받아서 수정한다.



dnf -y install wget 
wget https://docs.projectcalico.org/manifests/calico.yaml



vi calico.yaml

위 파일에서 아래 부분을 찾는다.

보면 #주석과 띄어쓰기 한 칸이 있는데

주석, 띄어쓰기를 지워준다.



 # - name: CALICO_IPV4POOL_CIDR
 #   value: "192.168.0.0/16"
======== 아래와 같이 수정 ========
- name: CALICO_IPV4POOL_CIDR
value: "192.168.2.0/24"



kubectl apply -f calico.yaml

7) 워커 설정 :: Node join

[ worker1, worker2 에서 진행 ]

위에서 Master를 초기화시킬때 복사해둔 kubeadm join~을 사용할 차례.

복사한 명령어를 각 노드로 가서 입력한다.



firewall-cmd --zone=public --permanent --add-port={10250,30000-32767}/tcp
firewall-cmd --reload



kubeadm join - 마스터 설정에서 복사했던 명령어.



[ex]
kubeadm join 192.168.1.124:6443 --token 0lyh6r.658i77edu2xykzbz \
	--discovery-token-ca-cert-hash sha256:ec3c5cdfa8b8dbbbe57b1ee71eebf0e547c9a7a5fd2501f2ba49e2da04cfdf21 

결과가 성공적으로 join 했다는 메시지가 뜨면, 다시 마스터 노드로 가서 확인한다.

[Join 확인]



kubectl get nodes

마스터 하나에 노드 두 개로 클러스터 구성된 것을 볼 수 있다.

* 한 2분 넘게 기다려도 Ready가 뜨지 않는다면 아래 에러기록.2 를 참고해서 재설정 요망..ㅠㅠ

클러스터가 구성이 되었으니 간단한 예제를 하나 실행해보자 !

다음 포스팅 링크 :

🏄🏻‍♀️ Cluster test

☹️ 쿠버네티스 설치 중 에러 기록

1)



unable to connect to the server: x509: certificate signed by unknown authority (possibly because of "crypto/rsa: verification error" while trying to verify candidate authority certificate "kubernetes")




kubectl describe node 

2)



kubernetes warning fileexisting-tc tc not found in system path

원인은 모르겠다..

마스터설정시 복사해 두었던 토큰 값을 잘못써주었던 탓이려나ㅠ



kubeadm reset
rm -rf /etc/cni/net.d
rm -rf $HOME/.kube