설치

Edit This Page

Minikube로 로컬 상에서 쿠버네티스 구동

Minikube는 쿠버네티스를 로컬에서 쉽게 실행하는 도구이다. Minikube는 매일 쿠버네티스를 사용하거나 개발하려는 사용자들을 위해 VM 이나 노트북에서 단일 노드 쿠버네티스 클러스터를 실행한다.

Minikube 특징

설치

Minikube 설치 항목을 보자.

빠른 시작

여기부터는 Minikube 사용에 대한 간단한 데모이다. VM 드라이버를 바꾸기 원하면 적절한 --vm-driver=xxx 플래그를 minikube start에 추가한다. Minikube는 다음의 드라이버를 지원한다.

$ minikube start
Starting local Kubernetes cluster...
Running pre-create checks...
Creating machine...
Starting local Kubernetes cluster...

$ kubectl run hello-minikube --image=k8s.gcr.io/echoserver:1.10 --port=8080
deployment.apps/hello-minikube created
$ kubectl expose deployment hello-minikube --type=NodePort
service/hello-minikube exposed

# We have now launched an echoserver pod but we have to wait until the pod is up before curling/accessing it
# via the exposed service.
# To check whether the pod is up and running we can use the following:
$ kubectl get pod
NAME                              READY     STATUS              RESTARTS   AGE
hello-minikube-3383150820-vctvh   0/1       ContainerCreating   0          3s
# We can see that the pod is still being created from the ContainerCreating status
$ kubectl get pod
NAME                              READY     STATUS    RESTARTS   AGE
hello-minikube-3383150820-vctvh   1/1       Running   0          13s
# We can see that the pod is now Running and we will now be able to curl it:
$ curl $(minikube service hello-minikube --url)


Hostname: hello-minikube-7c77b68cff-8wdzq

Pod Information:
    -no pod information available-

Server values:
    server_version=nginx: 1.13.3 - lua: 10008

Request Information:
    client_address=172.17.0.1
    method=GET
    real path=/
    query=
    request_version=1.1
    request_scheme=http
    request_uri=http://192.168.99.100:8080/

Request Headers:
    accept=*/*
    host=192.168.99.100:30674
    user-agent=curl/7.47.0

Request Body:
    -no body in request-


$ kubectl delete services hello-minikube
service "hello-minikube" deleted
$ kubectl delete deployment hello-minikube
deployment.extensions "hello-minikube" deleted
$ minikube stop
Stopping local Kubernetes cluster...
Stopping "minikube"...

다른 컨테이너 런타임

containerd

containerd를 컨테이너 런타임으로 사용하려면, 다음을 실행한다.

$ minikube start \
    --network-plugin=cni \
    --enable-default-cni \
    --container-runtime=containerd \
    --bootstrapper=kubeadm

혹은 확장 버전을 사용할 수 있다.

$ minikube start \
    --network-plugin=cni \
    --enable-default-cni \
    --extra-config=kubelet.container-runtime=remote \
    --extra-config=kubelet.container-runtime-endpoint=unix:///run/containerd/containerd.sock \
    --extra-config=kubelet.image-service-endpoint=unix:///run/containerd/containerd.sock \
    --bootstrapper=kubeadm

CRI-O

CRI-O를 컨테이너 런타임으로 사용하려면, 다음을 실행한다.

$ minikube start \
    --network-plugin=cni \
    --enable-default-cni \
    --container-runtime=cri-o \
    --bootstrapper=kubeadm

혹은 확장 버전을 사용할 수 있다.

$ minikube start \
    --network-plugin=cni \
    --enable-default-cni \
    --extra-config=kubelet.container-runtime=remote \
    --extra-config=kubelet.container-runtime-endpoint=/var/run/crio.sock \
    --extra-config=kubelet.image-service-endpoint=/var/run/crio.sock \
    --bootstrapper=kubeadm

rkt 컨테이너 엔진

rkt를 컨테이너 런타임으로 사용하려면, 다음을 실행한다.

$ minikube start \
    --network-plugin=cni \
    --enable-default-cni \
    --container-runtime=rkt

이것은 rkt와 Docker와 CNI 네트워킹을 포함하는 대안적인 Minikube ISO 이미지를 이용한다.

드라이버 플러그인

지원하는 드라이버 상세 정보와 설치방법은 드라이버를 살펴보자 꼭 필요하다면 말이다.

Docker 데몬 재사용

쿠버네티스 단일 VM을 사용하면 Minikube에 내장된 Docker 데몬을 재사용하기에 매우 간편하다. 이 경우는 호스트 장비에 Docker 레지스트리를 설치하고 이미지를 푸시할 필요가 없다. 또 로컬에서 빠르게 실행할 수 있는데 이는 Minikube와 동일한 Docker 데몬 안에서 이미지를 빌드하기 때문이다. Docker 이미지를 ‘latest’가 아닌 다른 태그로 태그했는지 확인하고 이미지를 풀링할 때에는 그 태그를 이용한다. 혹시 이미지 태그 버전을 지정하지 않았다면, 기본값은 :latest이고 이미지 풀링 정책은 Always가 가정하나, 만약 기본 Docker 레지스트리(보통 DockerHub)에 해당 Docker 이미지 버전이 없다면 ErrImagePull의 결과가 나타날 것이다.

맥이나 리눅스 호스트의 Docker 데몬에서 이 작업이 가능하게 하려면 docker-env command를 쉘에서 사용해야 한다.

eval $(minikube docker-env)

맥이나 리눅스 호스트에서 Minikube VM안에 Docker 데몬과 통신하도록 Docker를 명령행에서 사용할 수 있어야 한다.

docker ps

Centos 7 에서 Docker는 아래와 같은 오류를 발생한다.

Could not read CA certificate "/etc/docker/ca.pem": open /etc/docker/ca.pem: no such file or directory

해결 방법은 /etc/sysconfig/docker를 Minikube의 환경 변화를 기대한 것대로 바꾸도록 업데이트하는 것이다.

< DOCKER_CERT_PATH=/etc/docker
---
> if [ -z "${DOCKER_CERT_PATH}" ]; then
>   DOCKER_CERT_PATH=/etc/docker
> fi

imagePullPolicy:Always를 꺼야하는 것은 명심하자. 그렇지 않으면 쿠버네티스가 로컬에서 빌드한 이미지를 사용하지 않는다.

클러스터 관리

클러스터 시작

minikube start 명령은 클러스터를 시작하는데 사용할 수 있다. 이 명령은 단일 노드 쿠버네티스 클러스터를 실행하는 가상머신을 생성하고 구성한다. 또한 클러스터와 통신하기 위해 kubectl를 구성한다.

만약 웹 프록시를 사용 중이라면 minikube start 명령에서 이 정보를 포함해야 한다.

https_proxy=<my proxy> minikube start --docker-env http_proxy=<my proxy> --docker-env https_proxy=<my proxy> --docker-env no_proxy=192.168.99.0/24

불행히 환경 설정 변수만으로는 동작하지 않는다.

Minikube는 또한 “minikube” 컨텍스트를 생성하고, kubectl의 기본값으로 설정한다. 나중에 이 컨택스트를 변경하려면, kubectl config use-context minikube 명령을 실행하자.

쿠버네티스 버전 지정

Minikube에서 사용할 쿠버네티스 버전은 --kubernetes-version 문자열을 minikube start 명령에 추가하여 지정할 수 있다. 예를 들어, v1.7.3을 이용한다면 아래처럼 할 수 있다.

minikube start --kubernetes-version v1.7.3

쿠버네티스 구성

Minikube는 사용자가 쿠버네티스 컴포넌트를 다양한 값으로 설정할 수 있도록 하는 ‘설정기’ 기능이 있다. 이 기능을 사용하려면, --extra-config 플래그를 minikube start 명령어에 추가하여야 한다.

이 플래그는 여러번 쓸 수 있어 여러 옵션 설정을 전달 할 수 있다.

이 플래그는 component.key=value형식의 문자열로, 앞에 component는 아래 목록에 하나의 문자열이며 key는 configuration struct의 값이고 value는 설정할 값이다(역주: key는 struct의 맴버명).

올바른 키들은 각 컴포넌트의 쿠버네티스 componentconfigs 문서에서 찾아 볼 수 있다. 다음은 각각의 지원하는 설정에 대한 문서이다.

예제

쿠블렛에서 MaxPods 설정을 5로 바꾸려면 --extra-config=kubelet.MaxPods=5 플래그를 전달하자.

이 기능은 또한 중첩 구조를 지원한다. 스케쥴러에서 LeaderElection.LeaderElect 설정을 true로 하려면, --extra-config=scheduler.LeaderElection.LeaderElect=true 플래그를 전달하자.

apiserver에서 AuthorizationMode를 RBAC으로 바꾸려면, --extra-config=apiserver.authorization-mode=RBAC를 사용할 수 있다.

클러스터 중지

minikube stop 명령어는 클러스터를 중지하는데 사용할 수 있다. 이 명령어는 Minikube 가상 머신을 종료하지만, 모든 클러스터 상태와 데이터를 보존한다. 클러스터를 다시 시작하면 이전의 상태로 돌려줍니다.

클러스터 삭제

minikube delete 명령은 클러스터를 삭제하는데 사용할 수 있다. 이 명령어는 Minikube 가상 머신을 종료하고 삭제한다. 어떤 데이터나 상태도 보존되지 않다.

클러스터와 상호 작용

Kubectl

minikube start 명령어는 Minikube로 부르는 “kubectl 컨텍스트” 를 생성한다. 이 컨텍스트는 Minikube 클러스터와 통신하는 설정을 포함한다.

Minikube는 이 컨텍스트를 자동적으로 기본으로 설정한다. 만약 미래에 이것을 바꾸고 싶다면 kubectl config use-context minikube을 실행하자.

혹은 각 명령어를 kubectl get pods --context=minikube처럼 컨텍스트를 전달하십시오.

대시보드

쿠버네티스 대시보드를 이용하려면, Minikube를 실행한 후 쉘에서 아래 명령어를 실행하여 주소를 확인한다.

minikube dashboard

서비스

노드 포트로 노출된 서비스를 접근하기 위해, Minikube를 시작한 이후 쉘에서 아래 명령어를 실행하여 주소를 확인하자.

minikube service [-n NAMESPACE] [--url] NAME

네트워킹

Minikube VM은 host-only IP 주소를 통해 호스트 시스템에 노출되고, 이 IP 주소는 minikube ip 명령어로 확인할 수 있다. NodePort 서비스 타입은 IP 주소에 해당 노드 포트로 접근할 수 있다.

서비스의 NodePort를 확인하려면 kubectl 명령어로 아래와 같이 하면 된다.

kubectl get service $SERVICE --output='jsonpath="{.spec.ports[0].nodePort}"'

퍼시스턴트 볼륨

Minikube는 퍼시스턴트 볼륨을 hostPath 타입으로 지원한다. 이런 퍼시스턴트 볼륨은 Minikube VM 내에 디렉터리로 매핑됩니다.

Minikube VM은 tmpfs에서 부트하는데, 매우 많은 디렉터리가 재부트(minikube stop)까지는 유지되지 않다. 그러나, Minikube는 다음의 호스트 디렉터리 아래 파일은 유지하도록 설정되어 있다.

이것은 /data 디렉터리에 데이터를 보존하도록 한 퍼시스턴트 볼륨 환경설정의 예이다.

apiVersion: v1
kind: PersistentVolume
metadata:
  name: pv0001
spec:
  accessModes:
    - ReadWriteOnce
  capacity:
    storage: 5Gi
  hostPath:
    path: /data/pv0001/

호스트 폴더 마운트

몇몇 드라이버는 VM 안에 호스트 폴더를 마운트하여 VM과 호스트 사이에 쉽게 파일을 공유할 수 있게 한다. 이들은 지금 설정할 수 없고 사용하는 드라이버나 운영체제에 따라 다르다.

참고: 호스트 폴더 공유는 KVM 드라이버에서 아직 구현되어 있지 않다.
Driver OS HostFolder VM
VirtualBox Linux /home /hosthome
VirtualBox macOS /Users /Users
VirtualBox Windows C://Users /c/Users
VMware Fusion macOS /Users /Users
Xhyve macOS /Users /Users

프라이빗 컨테이너 레지스트리

프라이빗 컨테이너 레지스트리를 이용하려면, 이 페이지의 단계를 따르자.

ImagePullSecrets를 이용하기를 권하지만, Minikube VM 상에서 설정하려 한다면 /home/docker 디렉터리에 .dockercfg를 두거나 /home/docker/.docker 디렉터리에 config.json을 둘 수 있다.

애드온

Minikube에서 커스텀 애드온을 적절히 시작하고 재시작할 수 있으려면, Minikube와 함께 시작하려는 애드온을 ~/.minikube/addons 디렉터리에 두자. 폴더 내부의 애드온은 Minikube VM으로 이동되어 Minikube가 시작하거나 재시작될 때에 함께 실행된다.

HTTP 프록시 환경에서 Minikube 사용

Minikube는 쿠버네티스와 Docker 데몬을 포함한 가상 머신을 생성한다. 쿠버네티스가 Docker를 이용하여 컨테이너를 스케쥴링 시도할 때에, Docker 데몬은 컨테이너 이미지를 풀링하기 위해 외부 네트워크를 이용해야 한다.

HTTP 프록시 내부라면, Docker에서 프록시 설정을 해야 한다. 이를 하기 위해서 요구되는 환경 변수를 minikube start 중에 플래그로 전달한다.

예를 들어:

$ minikube start --docker-env http_proxy=http://$YOURPROXY:PORT \
                 --docker-env https_proxy=https://$YOURPROXY:PORT

만약 가상 머신 주소가 192.168.99.100 이라면 프록시 설정이 kubectl에 직접적으로 도달하지 못할 수도 있다. 이 IP 주소에 대해 프록시 설정을 지나치게 하려면 no_proxy 설정을 수정해야 한다. 다음과 같이 할 수 있다.

$ export no_proxy=$no_proxy,$(minikube ip)

알려진 이슈

설계

Minikube는 VM 프로비저닝을 위해서 libmachine를 사용하고, 쿠버네티스 클러스터를 프로비저닝하기 위해 kubeadm을 사용한다.

Minikube에 대한 더 자세한 정보는, 제안 부분을 읽어보자.

추가적인 링크:

커뮤니티

컨트리뷰션, 질문과 의견은 모두 환영하며 격려한다! Minikube 개발자는 슬랙에 #minikube 채널(초청받으려면 여기)에 상주하고 있다. 또한 kubernetes-dev 구글 그룹 메일링 리스트도 있다. 메일링 리스트에 포스팅한다면 제목에 “minikube: “라는 접두어를 사용하자.

피드백