이것저것 기록

0. 도커 이미지란? 이미지는 컨테이너 실행에 필요한 파일과 설정값등을 포함하고 있다. 쉽게 이해하자면 가상환경 세팅을 위한 '레시피'이다. 내가 어떤 코드를 돌리기 위해서, pythondms 3.6버전을 쓰고 Numpy는 xx버전을 쓰고, pandas는 dd버전을 쓰고, 이 모든 것을 적어놓고 다운받으면 그대로 세팅해주는 레시피이다. 이러한 이미지를 여러개 쌓아, 내가 원하는 환경을 구축하는 것이다. 1. 기존에 다운받은 이미지가 있는지 확인 $ docker images REPOSITORY TAG IMAGE ID CREATED SIZE $docker images 명령어 입력 위와 같이 나온다면 기존에 다운받은 이미지가 아무것도 없는 것 2. 도커 내 이미지 검색하기 $ docker search sql ..

0. 사전 체크 윈도우10에서 도커를 사용하기 위해선 다음 두 가지를 사전 체크 해야함 (이 단계를 귀찮아서 패스하면 나처럼 도커를 싹다 지우고 다시 까는 사태가 벌어짐) 작업 관리자 > 성능 > 가상화 : '사용'으로 체크 Hyper-v 활성화: https://forbes.tistory.com/542 참고 설치 후 컴퓨터를 재시작 해야함. 'Y'를 입력하는 순간 자비없이 바로 컴퓨터가 꺼짐... 좀 당황함... 1. 도커 다운받기 https://hub.docker.com/editions/community/docker-ce-desktop-windows/ 링크 클릭 > 우측의 "Get Docker" 클릭 Installer를 다운받으면 컴퓨터를 재시작 해야합니다! 중요한 문서를 작업 중이라면 미리 저장하는 ..

한동안 데이터 분석 쪽을 엄청 파다가, 요즘은 머신러닝을 공부하고 있다. 머신러닝은 이미 엄청나게 성능이 좋은 프레임워크가 많이 개발 돼 있고, 또 이것들이 사용하기 편하게 라이브러리로 전부 제공하고 있다. (그래서 나는 생각보다 쉽게 쉽게 배우고 있다. 적어도 딥러닝 처음 배울 때만큼 막막하진 않은 듯?) 머신러닝 모델은 사이킷런에서 그냥 함수 갖다쓰듯이 사용하면 되기 때문에, 사실 머신러닝을 적용할 때에 가장 중요한 부분은 '데이터 전처리'인 것 같다. 그래서 오늘은 내가 강의를 들으면서 배운 머신러닝 모델에 데이터를 넣기 전, 전처리를 도와주는 함수와 내용들을 포스팅 해보려고 한다. 내 돈 주고 공부 중인데 까먹을까봐 이렇게 기록해두려는 목적도 있고...ㅋㅋㅎ 공부하면서 작성한 코드와 샘플 데이터는..

데이터 간 거리를 측정하는 방법에는 여러 가지 방법이 있다. 거리를 측정하는 이유는, 데이터 간 거리가 '유사도'를 나타내기 때문이다. 오늘은 다음 링크에서 소개하는 데이터 유사성 측정방법을 나열해보려고 한다. towardsdatascience.com/9-distance-measures-in-data-science-918109d069fa 9 Distance Measures in Data Science The advantages and pitfalls of common distance measures towardsdatascience.com 머신러닝 (혹은 딥러닝)을 다루게 된다면 데이터들 간 유사도 측정은 거의 필수이기 때문에 이렇게 정리 해놓으면 내가 (혹은 누군가가) 언젠가 유용하게 쓰게 될 거라 믿..

graph2vec의 근간이 된 doc2vec와 word2vec에 대해 조금 더 자세히 기록해보려고 한다. Word2Vec 1. word2vec 개요 word2vec은 비슷한 문맥(context)를 지니는 단어를 비슷한 벡터로 표현하는 distributed word representation 방법이다. 여기서 비슷한 문맥이란, 내가 임베딩 하고자 하는 단어 근처의 단어를 뜻한다. '사랑'이라는 단어를 '사랑'이라는 단어의 사전적 의미가 아닌, '사랑'이라는 단어와 함께 쓰여지는 단어(문맥)들로 사랑의 임베딩 벡터를 만드는 것이다. 살짝 문과적 감성을 섞어보자면 나는 이 방법론에 굉장한 감동을 느꼈다. 사랑, 우정, 의리와 같은 감정을 나타내거나 눈에 보이지 않는 현상을 의미하는 단어들은 사전적 정의로 그것..