ML/DL/CS

핵심만 콕 쿠버네티스를 공부하며 정리하는 시리즈입니다. 사전 지식이 부족하고, 책 내용이 간결한 편이니 부족하거나 틀린 내용이 있으면 지적해주시면 감사하겠습니다. 1. 쿠버네티스란? 쿠버네티스(Kubernetes, k8s)는 여러 서버로 구성된 클러스터 환경에서 컨테이너화된 프로세스를 관리하기 위한 오케스트레이션 플랫폼이다. 가상 머신과는 달리 호스트 운영체제를 공유하므로 가상 머신에 비해 훨씬 가벼우면서 실행 환경을 독립적으로 가져갈 수 있는 장점이 있다. 또한, 컨테이너 오케스트레이션이 가능하여 배포, 확장, 스케쥴링을 자동화할 수 있다. 1.1 컨테이너 오케스트레이션 ( Container Ochestration ) 이란? def : 컨테이너 오케스트레이션은 다수의 서버 위에서 컨테이너의 전반적인 라..

MLOps/Kubernetes 2022. 2. 16. 16:03

41. How to sum a small array faster than np.sum? (★★☆) Z = np.arange(10) np.add.reduce(Z) # test for np.add.reduce import time def check_time(func): def wrapper(*args, **kwargs): start = time.time() func(*args, **kwargs) print("used time:", time.time() - start) return wrapper @check_time def normal_sum(len_array): a = np.arange(len_array) np.sum(a) @check_time def reduced_sum(len_array): a = np...

Python/Numpy 2022. 1. 30. 16:25

numpy 핸들링에 익숙해져야 한다고 생각해서.. 마침 누군가 잘 만들어둔 numpy 100제 문제가 있어 조금씩 풀어보려 한다. 문제 링크 : link 내 코드 : link 31. How to ignore all numpy warnings (not recommended)? (★☆☆) np.setarr(all="ignore") # {'divide': 'warn', 'over': 'warn', 'under': 'ignore', 'invalid': 'warn'} 32. Is the following expressions true? (★☆☆) np.sqrt(-1) == np.emath.sqrt(-..

Python/Numpy 2022. 1. 30. 14:56

1. What happend? WSL + ubuntu 환경에서 C 드라이브를 못 찾았겠다. 2. How to solve? How to navigate to C drive in bash on WSL-Ubuntu? 를 참조했다. /mnt/c 가 로컬의 C:\ 이다. 다만 이렇게 하면 매번 경로를 찾기 피곤할 것 같아 심볼릭 링크를 걸어주기로 함. 3. Results

MLOps/Settings 2022. 1. 20. 13:21

회사에서 쓸 일이 있어 Docker를 설치해야 한다. 사내망이어서 안 될 거 같았는데 Kubernetes를 사용하려면 결국 wsl+ubuntu는 갖추어져야 할 것 같아서 세팅을 해보기로 한다. 1. 기본 설정 검색 창에 windows 기능 켜기/끄기 검색 Linux용 Windows 하위 시스템을 체크한 후, 확인을 누르고 재부팅. 2. WSL 관련 기능 활성화 Powershell을 관리자 권한으로 실행. dism.exe /online /enable-feature /featurename:Microsoft-Windows-Subsystem-Linux /all /norestart 입력 후 실행 dism.exe /online /enable-feature /featurename:VirtualMachinePlatfo..

MLOps/Settings 2022. 1. 20. 13:14

What Happend? Docker run 명령어 실행 시 Permission Denied Error 발생. How to solve? sudo groupadd docker : 이미 있을 테지만, 혹시 모르니 넣었다. docker group을 생성한다. sudo usermod -aG docker $USER : docker group에 현재 사용자 추가 newgrp docker : docker 그룹의 그룹 정보를 업데이트해준다. 터미널 종료 없이 바로 도커 명령어를 실행할 수 있다. Result

MLOps/Trouble Shooting 2022. 1. 20. 13:13

아! 입사 첫 주라 설정해줄 것이 정말 징글징글하게 많다! 전 게시물이 conda + vscode 였다면, 이번엔 CUDA + Torch다! conda 설정 및 python 개발 환경 구축 : link 1. 내 GPU 확인 어렵지 않다. 우선 시작 메뉴 옆의 검색창에서 장치 관리자를 검색한 뒤, 디스플레이 어댑터를 확인한다. 아하, 이 컴퓨터에 달린 그래픽 카드는 GTX 1660이구나. https://www.wikiwand.com/en/CUDA 위의 주소에서 본인의 그래픽 카드명을 검색해보면 순서대로 Compute Capability, Micro-Architecture, GPU, GeForce, Quadro/NVS, Tesla, Tegra.. 라고 한다. 내 그래픽 카드의 Compute Capabilit..

ML, DL/Settings 2022. 1. 7. 13:20

말해 뭐해! 매번 구글링하기 싫어 기록해두려 한다. 1. Anaconda 설치 https://www.anaconda.com/products/individual 위 링크에 접속한 뒤, individual Edition을 설치 후 실행. 그럼 위와 같은 창이 뜰 텐데, 쭉 Yes, Next를 눌러 넘긴다. 그러면 Anaconda 설치는 완료. 시작 폴더의 Anaconda3에서 Anaconda prompt를 실행시킨 뒤, conda를 입력하였을 때 conda 명령어 뒤에 붙을 옵션들의 도움말을 볼 수 있다. 2. VSCode 설치 https://code.visualstudio.com/Download 위 링크에 접속하여 알맞은 버전의 설치 파일을 다운 받는다. 그러면 이런 창이 나온다. "네", "동의" 만 누..

Python/Settings 2022. 1. 6. 15:26