ML/DL/CS

일반통계학(김우철 저)를 공부하며 정리하는 포스팅입니다. 시리즈 더보기 1.1 통계학이란 무엇인가 1.2 단순랜덤추출 단순랜덤추추에서 모집단의 각 추출단위에 동등한 선출 기회를 주는 것은 표본이 모집단의 한 쪽 방향으로 치우치지 않게 하기 위함이다. 그러나 이를 위해선 여러 주의가 필요하다. 1. 모집단의 추출단위에 대한 완전한 리스트가 필요하다. - 하지만 이는 얻기 쉽지 않다. - 전화로 수집한다 하면 감옥에 있거나, 학생이거나 하는 경우 정보 수집 대상에 포함되지 않기 때문이다. - 누락된 추출단위들이 모집단의 다른 추출단이와 상이하다면 표본의 치우침 현상은 피할 수 없다. - 더 심각한 요인은 무응답이다. 조사 가능한 사람들이 무응답자들과 의견이 다르다면 치우침 현상이 발생한다. 2. 응답자 또는..

수학/통계학 2022. 3. 7. 22:41

일반통계학(김우철 저)를 공부하며 정리하는 포스팅입니다. 시리즈 더보기 1.1 통계학이란 무엇인가 일부만으로 전체에 대한 추론을 할 때, 추론이 신빈성을 잃지 않기 위해서는 일부분이 전체의 속성을 잘 대표해야 한다. 추론의 대상이 한국 전체 대학생들의 여론인데, 편의상 조사자의 거주 지역의 학생들에 대해서만 조사한다고 하면 모집단은 한국 전체 대학생들이고, 표본은 실제로 조사된 대학생들이다. 모집단을 잘 대표할 수 있는 표본을 추출하기 위해서는 적절한 표본설계를 해야 한다. 단순랜덤추출법, 단순임의추출법은 모집단의 속성을 잘 대표할 수 있도록 표본을 골고루 뽑는 방법 중 하나이다. 단순랜덤추출법(단순임의추출법) 유한모집단에서 n개의 추출단위로 구성된 모든 부분집합들이 표본으로 선택될 확률이 같도록 설계된..

수학/통계학 2022. 3. 7. 22:29

일반통계학(김우철 저) 를 공부하며 정리하는 포스팅입니다. 여론 조사 기관에서 여론 조사를 수행하며 해결해야 할 문제는 무엇이 있을까 에 대한 이야기로 화두를 연다. 해결해야 할 문제로 세 개를 소개한다. 1. 전체 유권자 중에 어떤 사람을 조사 대상자로 삼는가? - 몇 명의 유권자를 어떻게 뽑는지에 대한 문제가 있다. - 뽑힌 유권자들이 전체 유권자의 성향을 잘 대표할 수 있어야 한다. - 그러려면 지역, 계층별로 '골고루'뽑혀야 한다. 2. 조사한 내용을 어떻게 정리 요약하고, 거기서 어떻게 결론을 내릴 것인가? - 뽑힌 일부의 유권자들의 여론 조사 결과를 신뢰해도 되는가?에 대한 문제가 있다. 3. 그렇다면 이러한 신뢰성은 어떻게 측정하는가? 통계학이란 "주어진 문제에 대하여 합리적인 답을 줄 수 ..

수학/통계학 2022. 3. 7. 22:16

1. What happend? WSL + ubuntu 환경에서 git clone 명령어 실행 시 아래와 같은 에러 발생 Cloning into ''... error: chmod on /mnt/c/Users/Efsta/Code//.git/config.lock failed: Operation not permitted fatal: could not set 'core.filemode' to 'false' 2. How to solve? How to solve 'Operation not permitted' on cloning repository 를 참조했다. 아래의 두 줄의 명령어면 해결할 수 있다. sudo umount /mnt/c sudo mount -t drvfs C: /mnt/c -o metadata C:파..

카테고리 없음 2022. 3. 6. 17:19

git config --global user.name "{user_name}" git config --global user.email "{user_email}"로 계정 정보를 전달. code push를 해주면.. 이런 창이 뜰 것이다. sign in with your browser버튼을 누르고 계정 정보를 입력하면.. 필자의 경우는 2FA로 인증을 하게끔 돼있어 문자가 왔다. 혹은 오른 쪽의 Access Token 버튼을 눌러 Acces Token을 발행 받는 것도 방법이다. link 에 정리가 잘 돼있으니 참고하면 좋을 듯 하다.

Git 2022. 3. 3. 11:19

document 지인의 추천으로 알게 된 Hydra. argparse 대신 사용하기 좋다 하니 사용해보도록 하자. series 1. hydra basic 1. config groups? config groups는 여러 개의 config file을 이용해 인자를 관리하는 것이다. 복잡한 코드를 돌리거나, machine learning, deep learning 에서 인자를 관리할 때, 버전을 관리할 때 사용하면 좋을 것이라 생각한다. 한 파일에서 하나의 버전만 관리하니 가독성이 더 좋아지지 않을까? 2. How to use config groups? 우선, 현재 디렉토리 구조는 아래와 같다. . ├── conf │ └── config.yaml ├── main.py └── outputs 여기서 config...

Python 2022. 2. 20. 20:20

Documents 지인의 추천으로 알게 된 Hydra. argparse 대신 사용하기 좋다 하니 사용해보도록 하자. 1. Installation pip install hydra-core --upgrade 를 입력해 설치한다. 무척 금방 된다. 2. create .py file 우선 docs에 있는 코드를 그대로 따라해보도록 하자. import hydra from omegaconf import DictConfig, OmegaConf @hydra.main(config_path="conf", config_name="config") def my_app(cfg : DictConfig) -> None: print(OmegaConf.to_yaml(cfg)) if __name__ == "__main__": my_app..

Python 2022. 2. 16. 23:56

핵심만 콕 쿠버네티스를 공부하며 정리하는 시리즈입니다. 사전 지식이 부족하고, 책 내용이 간결한 편이니 부족하거나 틀린 내용이 있으면 지적해주시면 감사하겠습니다. 1. 쿠버네티스의 기본 개념 쿠버네티스는 일반적인 운영체제와 같이 운영체제로서 지원하는 기능들을 비슷하게 제공한다. 사용자가 개별 노드를 직접 제어하지 않고 쿠버네티스라는 추상화된 레이어를 통해 클러스터를 제어할 수 있는 하드웨어 추상화 기능을 제공하고, 컨테이너의 스케쥴링, 자원할당 관리 등의 기능을 제공한다. 1.1 애완동물 vs 가축 애완동물 한 마리를 이름을 붙여 세심하게 키움 세심한 관리를 함 키우던 애완 동물이 아프면 관리하고, 죽으면 매우 슬퍼함 가축 여러 마리를 이름 없이 키움 밥도 한 번에 주는 것처럼 애완동물에 비해 덜 세심한..

MLOps/Kubernetes 2022. 2. 16. 17:14