그거 하고 싶을 때 tips.

개시하다

Minikube에서 땡땡이를 치고 싶다'는 팁을 모은 것이다.
minikube v1.17.1 확인했습니다.

Minikube에서 땡땡이 치고 싶어요.

노드의 CPU/Memory 설정

minikube start --cpus 2 --memory 2G

VM이 아닌 docker로 노드 시작

minikube start --driver docker

사실driver는 많은 것을 선택할 수 있습니다.virtualbox , vmwarefusion , kvm2 , vmware , none , docker , podman (experimental), ssh

로컬 컨테이너 이미지 사용하기

"한 명씩 연락하고 연락하고 Registry 연락하는 거 귀찮아요!"이럴 때 추천해드려요.

eval $(minikube docker-env)

상기 명령을 실행하면docker build 이미지가 미니쿠브의 노드에서 좋아집니다.
하지만 latest 이외의 라벨을 사용하세요.latest를 지정하면 ErrImagePull 외부 참조가 수행됩니다.

여러 노드의 그룹을 만들고 싶습니다

실제로 멀티-노드 클러스터링도 가능합니다.
Taint, NodeSelector, Pod(Anti) Affinity도 확인할 수 있습니다.

minikube start --nodes 3

구축 결과

$ kubectl get nodes
NAME           STATUS   ROLES                  AGE   VERSION
minikube       Ready    control-plane,master   76s   v1.20.2
minikube-m02   Ready    <none>                 42s   v1.20.2
minikube-m03   Ready    <none>                 19s   v1.20.2

Kubbernetes 버전 지정하기

minikube start --kubernetes-version v1.20.2

Loadbalance 스타일의 서비스를 사용하고 싶습니다.

Minikube의 클러스터에서 type: LoadBalancer된 Service Resource를 만들더라도 일반적으로 EXTERNAL-IP는 Pending로 바뀌지만 하위 명령tunnel을 통해 해결할 수 있다.

type:LoadBalancer의 서비스와 이와 관련된 Deployment의 제작

$ kubectl create deployment hello-node --image=k8s.gcr.io/echoserver:1.4
deployment.apps/hello-node created

$ kubectl expose deployment hello-node --type=LoadBalancer --port=8080
service/hello-node exposed

$ kubectl get svc
NAME         TYPE           CLUSTER-IP      EXTERNAL-IP   PORT(S)          AGE
hello-node   LoadBalancer   10.105.111.30   <pending>     8080:30427/TCP   5s
kubernetes   ClusterIP      10.96.0.1       <none>        443/TCP          5m20s

다른 종점에서 운행하다

$ minikube tunnel
Status:	
	machine: minikube
	pid: 23411
	route: 10.96.0.0/12 -> 192.168.49.2
	minikube: Running
	services: [hello-node]
    errors: 
		minikube: no errors
		router: no errors
		loadbalancer emulator: no errors

Service의 EXTERNAL-IP 확인

gashirar:~$ kubectl get svc
NAME         TYPE           CLUSTER-IP      EXTERNAL-IP     PORT(S)          AGE
hello-node   LoadBalancer   10.105.111.30   10.105.111.30   8080:30427/TCP   3m31s
kubernetes   ClusterIP      10.96.0.1       <none>          443/TCP          8m46s

커뮤니케이션

$ curl 10.105.111.30:8080
CLIENT VALUES:
client_address=192.168.49.2
command=GET
real path=/
query=nil
request_version=1.1
request_uri=http://10.105.111.30:8080/

SERVER VALUES:
server_version=nginx: 1.10.0 - lua: 10001

HEADERS RECEIVED:
accept=*/*
host=10.105.111.30:8080
user-agent=curl/7.68.0
BODY:
-no body in request-

노드에 들어가고 싶어요.

minikube ssh

kubelet 프로세스도 확인할 수 있습니다.

$ minikube ssh
docker@minikube:~$ sudo systemctl status kubelet
● kubelet.service - kubelet: The Kubernetes Node Agent
     Loaded: loaded (/lib/systemd/system/kubelet.service; disabled; vendor preset: enabled)
    Drop-In: /etc/systemd/system/kubelet.service.d
             └─10-kubeadm.conf
     Active: active (running) since Tue 2021-02-09 12:02:22 UTC; 20min ago
       Docs: http://kubernetes.io/docs/
   Main PID: 2395 (kubelet)
      Tasks: 21 (limit: 23919)
     Memory: 51.6M
     CGroup: /docker/3914f62704ff9cbd7ea263df7287ac734d30983a5bcf9f1b5127825434093f64/system.slice/kubelet.service
             └─2395 /var/lib/minikube/binaries/v1.20.2/kubelet --bootstrap-kubeconfig=/etc/kubernetes/bootstrap-kubelet.conf --config=/var/lib/kubelet/config.yaml --container-runtime=docker --hostna
me-override=minikube --kubeconfig=/etc/kubernetes/kubelet.conf --network-plugin=cni --node-ip=192.168.49.2

Proxy 환경에서 수행

TBD(구축 완료 후 요약 단계)

metrics-server를 가져오려면

minikube addons enable metrics-server

Istio를 가져오고 싶어요.

minikube addons enable istio-provisioner
minikube addons enable istio

EFK Stack 도입 생각

minikube addons enable efk

키바나의 대시보드를 보고 싶을 때minikube service 명령을 실행하는 것이 좋다.

$ minikube service -n kube-system kibana-logging
|-------------|----------------|-------------|---------------------------|
|  NAMESPACE  |      NAME      | TARGET PORT |            URL            |
|-------------|----------------|-------------|---------------------------|
| kube-system | kibana-logging |        5601 | http://192.168.49.2:30003 |
|-------------|----------------|-------------|---------------------------|
🎉  Opening service kube-system/kibana-logging in default browser...

WEB 브라우저에서도 키바나의 UI를 잘 볼 수 있습니다.

(추가) minikube addons list

metrics-server, efk,istio 외에도 각양각색의 addon을 제공합니다.

$ minikube addons list
|-----------------------------|----------|--------------|
|         ADDON NAME          | PROFILE  |    STATUS    |
|-----------------------------|----------|--------------|
| ambassador                  | minikube | disabled     |
| csi-hostpath-driver         | minikube | disabled     |
| dashboard                   | minikube | disabled     |
| default-storageclass        | minikube | enabled ✅   |
| efk                         | minikube | disabled     |
| freshpod                    | minikube | disabled     |
| gcp-auth                    | minikube | disabled     |
| gvisor                      | minikube | disabled     |
| helm-tiller                 | minikube | disabled     |
| ingress                     | minikube | disabled     |
| ingress-dns                 | minikube | disabled     |
| istio                       | minikube | disabled     |
| istio-provisioner           | minikube | disabled     |
| kubevirt                    | minikube | disabled     |
| logviewer                   | minikube | disabled     |
| metallb                     | minikube | disabled     |
| metrics-server              | minikube | disabled     |
| nvidia-driver-installer     | minikube | disabled     |
| nvidia-gpu-device-plugin    | minikube | disabled     |
| olm                         | minikube | disabled     |
| pod-security-policy         | minikube | disabled     |
| registry                    | minikube | disabled     |
| registry-aliases            | minikube | disabled     |
| registry-creds              | minikube | disabled     |
| storage-provisioner         | minikube | enabled ✅   |
| storage-provisioner-gluster | minikube | disabled     |
| volumesnapshots             | minikube | disabled     |
|-----------------------------|----------|--------------|

끝말

Minikube는 Docker Driver 외에도 Multi-Node Cluster를 지원합니다.
많이 놀아주세요.