KEEP GOING

Tips 1. dir과 help 함수 이용하기 help(list.append) help(pandas) dir(pandas) 2. 어떤 모델을 선택할지 모르겠을 때 랜덤포레스트 사용 from sklearn.ensemble import RandomForestClassifier from sklearn.ensemble import RandomForestRegressor pandas 1. 데이터 불러오기(read_csv) / 저장하기(to_csv) import pandas as pd train = pd.read_csv('train.csv') test = pd.read_csv('test.csv') submission = pd.read_csv('submission.csv') submission.to_csv('subm..

강의: https://www.youtube.com/watch?v=BS6O0zOGX4E&list=PLlMkM4tgfjnLSOjrEJN31gZATbcj_MpUm 소스코드: https://github.com/hunkim/DeepLearningZeroToAll/tree/master/tf2

개요 sklearn의 tfidfVectorizer를 통해 tfidf matrix를 생성하고 행렬 간 코사인 유사도를 구해 문서 간 유사도를 산출할 수 있습니다. 하지만 문제가 되는 점은 문서가 대용량 dataset일 경우입니다. 단일 서버로는 감당하기 힘들 정도로 매우 느린 속도로 지연이 발생합니다. 이때 브로드캐스트와 parallelize라는 spark의 분산 처리 기능을 활용하여 대규모 dataset에 대한 처리 속도를 개선할 수 있습니다. tfidftfidf는 단어 빈도 tf(term frequency)를 역문서빈도 idf(inverse document frequency)로 곱한 값입니다.tfidf는 문장 내에서 중요한 단어에 높은 가중치를 주기 위한 방법입니다. 우리가 적는 말들은 컴퓨터가 이해할..

얼마 전 방문했던 정비소 사장님께서 겨울이 가기 전 타이어를 갈아야 한다고 말씀해주셨습니다. 셀프로 타이어를 구매하고 타이어를 교체하기 위해 타이어 규격을 알아 보겠습니다. 타이어 옆에 적혀 있는 영문과 숫자를 통해 타이어 규격을 확인할 수 있습니다. 제 차량인 그랜저 HG 타이어를 촬영해 봤습니다. 앞쪽은 한국 타이어, 뒷쪽은 넥센 타이어였는데 타이어 옆구리를 확인해보니 적혀있는 글자는 'P225/55R17 95V' 네요. 그럼 각각 어떤 의미를 가지는지 한 번 알아볼까요? 대한타이어산업협회 사이트에서 가져온 자료입니다. 타이어에 적힌 규격 표시는 국제표준화기구(ISO)에서 정한 표기법을 따른다고 하네요. 그래서 타이어 회사에 관계없이 같은 형식으로 규격이 적혀 있었나 봅니다. 정리하면 P225/55R..

"움직이지 않는 열정은 단지 뜨거운 열 덩어리에 불과하다" 열정이 무엇인지 삶을 통해 보여준 김태원 님의 인생사를 다루고 있는 책입니다. 구글에서 Creative Maximizer로 일하고 있으며 대학생 시절 참여한 여러 공모전 활동들과 기자활동, 인턴, 해외 활동들을 나열하면서 대학 시절을 더 찬란하게 보낼 방법들을 소개합니다. 도서관에서 우연히 가장 끝 칸에 놓여있는 책 가운데 'Google'이라는 키워드가 눈에 띄어 집어 들었습니다. 2007년 발행되어 제법 헤져 있었는데요. 현재에도 구글에서 전무로 근무하면서 고려대학교 겸임 교수로 활동하시는 듯 합니다. 책 속에서는 갓 학부를 졸업한 1년 차 신입사원이었던 분이 교수직을 맡고 있는걸 보면서 세월의 흐름도 체감하지만, 아직도 작가님의 열정은 아직 ..

무소유라는 책의 저자로 유명하신 법정스님의 책을 읽어봤습니다. '스스로 행복하라'는 법정 스님의 대표 수필 29편을 묶어낸 책입니다. 뜨락에 철쭉, 라일락, 자목련 등 여러 가지 꽃들이 한창 피어 있습니다. 더러 꽃구경 안 가십니까. 세상 사는 데 바쁘다고 해서 모른체하지 말고 일 년에 한두 차례씩 피어나는 꽃들 앞에 서 보세요. 법정 스님은 꽃은 저마다의 모습을 하고 있으며 서로 닮으려는 일이 없다고 말합니다. 그렇게 자기 내면의 아름답고 향기로운 요소들을 마구 발산하는 꽃을 보며, 그러한 꽃을 정면교사로 삼아야 한다고 얘기합니다. 사람들은 저마다 자기 그릇과 개성이 다르지만 남의 그릇을 탐하고 비교하면서 남처럼 살길 바랍니다. 스스로 남의 그림자가 되길 자처하면서 말이죠. 내 삶을 지키기 위해서는 나..

서버 보안 정책에 의해 몇 개월마다 계정 비밀번호를 변경해야 한다. 변경할 때마다 정말 귀찮은 점은 최근에 사용했던 비밀번호여서도 안되고 대문자를 최소 한글자 입력해야 하는 등 변경 방식이 너무 까다롭다는 점이다 (;;) 그래서 비밀번호를 별다른 조건 없이 강제로 변경할 수 있는 방법을 찾아봤다. 1. 패스워드 강제 변경하기 echo '비밀번호' | passwd --stdin 계정명 물론 이 방식을 사용하기 위해서는 root 계정으로 접근해야 한다.

영감을 주는 책을 읽으면 꼭 독서 후기를 쓰고 싶다. 레버리지라는 책도 딱 그런 책이었다. 책에서 말하는 레버리지란 부의 지렛대를 만드는 것을 의미한다. 자본주의는 레버리지를 하는 사람과 레버리지를 당하는 사람으로 나뉜다고 한다. 처음엔 이게 무슨 말인지 잘 와닿지 않았지만 책에서 담긴 내용들을 통해 레버리지를 하는 게 무슨 의미인지 깨달았다. 봅은 최고의 소프트웨어 개발자이다. 그는 탁월한 업무 능력을 인정받아 1억 8천만 원의 연봉을 받았다. 그런데 그의 인터넷 기록을 살펴보니 그가 근무시간에 이베이나 페이스북을 하며 시간을 보냈다는 사실이 발견됐다. 봅의 회사는 조사관을 고용해 봅의 불규칙한 근무 태도와 온라인 사용 기록을 조사했고, 그 결과 그가 중국에 있는 아웃소싱 업체에 자신의 모든 업무를 의..