ML/DL/CS

핵심만 콕 쿠버네티스를 공부하며 정리하는 시리즈입니다. 사전 지식이 부족하고, 책 내용이 간결한 편이니 부족하거나 틀린 내용이 있으면 지적해주시면 감사하겠습니다. 1. 쿠버네티스의 기본 개념 쿠버네티스는 일반적인 운영체제와 같이 운영체제로서 지원하는 기능들을 비슷하게 제공한다. 사용자가 개별 노드를 직접 제어하지 않고 쿠버네티스라는 추상화된 레이어를 통해 클러스터를 제어할 수 있는 하드웨어 추상화 기능을 제공하고, 컨테이너의 스케쥴링, 자원할당 관리 등의 기능을 제공한다. 1.1 애완동물 vs 가축 애완동물 한 마리를 이름을 붙여 세심하게 키움 세심한 관리를 함 키우던 애완 동물이 아프면 관리하고, 죽으면 매우 슬퍼함 가축 여러 마리를 이름 없이 키움 밥도 한 번에 주는 것처럼 애완동물에 비해 덜 세심한..

MLOps/Kubernetes 2022. 2. 16. 17:14

핵심만 콕 쿠버네티스를 공부하며 정리하는 시리즈입니다. 사전 지식이 부족하고, 책 내용이 간결한 편이니 부족하거나 틀린 내용이 있으면 지적해주시면 감사하겠습니다. 1. 쿠버네티스란? 쿠버네티스(Kubernetes, k8s)는 여러 서버로 구성된 클러스터 환경에서 컨테이너화된 프로세스를 관리하기 위한 오케스트레이션 플랫폼이다. 가상 머신과는 달리 호스트 운영체제를 공유하므로 가상 머신에 비해 훨씬 가벼우면서 실행 환경을 독립적으로 가져갈 수 있는 장점이 있다. 또한, 컨테이너 오케스트레이션이 가능하여 배포, 확장, 스케쥴링을 자동화할 수 있다. 1.1 컨테이너 오케스트레이션 ( Container Ochestration ) 이란? def : 컨테이너 오케스트레이션은 다수의 서버 위에서 컨테이너의 전반적인 라..

MLOps/Kubernetes 2022. 2. 16. 16:03

1. What happend? WSL + ubuntu 환경에서 C 드라이브를 못 찾았겠다. 2. How to solve? How to navigate to C drive in bash on WSL-Ubuntu? 를 참조했다. /mnt/c 가 로컬의 C:\ 이다. 다만 이렇게 하면 매번 경로를 찾기 피곤할 것 같아 심볼릭 링크를 걸어주기로 함. 3. Results

MLOps/Settings 2022. 1. 20. 13:21

회사에서 쓸 일이 있어 Docker를 설치해야 한다. 사내망이어서 안 될 거 같았는데 Kubernetes를 사용하려면 결국 wsl+ubuntu는 갖추어져야 할 것 같아서 세팅을 해보기로 한다. 1. 기본 설정 검색 창에 windows 기능 켜기/끄기 검색 Linux용 Windows 하위 시스템을 체크한 후, 확인을 누르고 재부팅. 2. WSL 관련 기능 활성화 Powershell을 관리자 권한으로 실행. dism.exe /online /enable-feature /featurename:Microsoft-Windows-Subsystem-Linux /all /norestart 입력 후 실행 dism.exe /online /enable-feature /featurename:VirtualMachinePlatfo..

MLOps/Settings 2022. 1. 20. 13:14

What Happend? Docker run 명령어 실행 시 Permission Denied Error 발생. How to solve? sudo groupadd docker : 이미 있을 테지만, 혹시 모르니 넣었다. docker group을 생성한다. sudo usermod -aG docker $USER : docker group에 현재 사용자 추가 newgrp docker : docker 그룹의 그룹 정보를 업데이트해준다. 터미널 종료 없이 바로 도커 명령어를 실행할 수 있다. Result

MLOps/Trouble Shooting 2022. 1. 20. 13:13

환경 linux, ubuntu 16.04.1 LTS 내가 한 거 기록하는 Docker 시리즈 01.도커 설치 02.도커 이미지와 docker hub? 이번에 다룰 내용은 Dockerfile을 이용해 이미지를 만드는 것입니다. "Dockerhub에서 불러오면 되는 거 아니냐?" 하고 생각하실 수 있지만, Dockerfile 을 사용한다면 layer를 쌓을 수 있다는 점에서 유용합니다. 가령 Dockerhub에서 torch 이미지를 불러온 뒤 그냥 사용할 수도 있지만, torch는 1.7로, numpy는 1.1로 설정하고 싶다면 torch1.7을 기반으로 numpy 버전을 변경해준다던가 하는 것들이 가능해집니다. 본인이 수행해야 할 task 에 맞게 이미지를 설계하는 것이 가능해집니다. 이번 포스팅에서는 가..

MLOps 2021. 7. 27. 00:08

환경 linux, ubuntu 16.04.1 LTS 내가 한 거 기록하는 Docker 시리즈 01.도커 설치 이번에 다룰 내용은 도커에서 이미지(image)의 제가 받아들인 의미와(뇌피셜입니다.) Docker Hub에서 도커 이미지를 pull 해오는 방법입니다. 01. 이미지(Image)? 저는 처음에 추후 설명할 개념인 container와 Image의 관계를 Image : Container = Class : Instance 와 같이 이해했습니다. 어떤 의미냐 하면, Image에 앞으로 생성될 container에 필요한 것들을 설치하고 설정해준 뒤, 얼마든지 Image를 이용해 여러 개의 container를 찍어낼 수 있다는 점에서 그렇게 받아들여졌습니다. 그렇게 생긴 container들은 다른 포트를 ..

MLOps 2021. 7. 24. 01:45

00. 환경 linux, ubuntu 16.04.1 LTS 01. 우선 설치 sudo wget -qO- http://get.docker.com/ | sh 하고 입력하면 설치가 됩니다. 설치가 되었는지 확인하는 방법은 docker version 하고 입력하시면 아래와 같은 문구를 확인하게 됩니다. 그런데 설치된 도커의 버전에 대해 잘 설명해주다가 아랠 보니 "Got permission denied while trying ~" 하는 문구를 확인할 수 있습니다. 이는 권한 문제인데요, 02. 도커 권한 문제 해결 위의 문제는 /var/run/docker.sock 에 권한이 없기 때문에 생긴 문제라고 합니다. 현재 사용자를 docker group에 추가해주면 해결되는 문제인데, sudo usermod -a -G..

MLOps 2021. 7. 23. 11:11