인기글
-
[딥러닝] 에폭(epoch) & 배치 사이즈(batch size) & 반복(iteration) 개념 정리
https://link.coupang.com/a/rGMRQ 경사하강법(gradient descent)을 통해 결과를 내기 위해서 여러번의 최적화 과정을 거쳐야 하는 알고리즘을 iterative 하다고 한다. 아래 그림과 같이 반복해서 많은 양의 데이터 학습을 진행할 때, 보통 한번에 최적화된 값을 찾기는 힘듭니다. 그렇기에 머신러닝에서 최적화(optimization)를 하기 위해 여러번의 학습 과정을 거칩니다. 또한 한번에 모든 양의 데이터를 넣지 않고 데이터를 나눠서 학습시키는데 이때 등장하는 개념이 batch size , epoch , iteration 입니다. 1. 에폭(epoch) : One Epoch is when an ENTIRE dataset is passed forward and backw..
더보기
-
[Git-hub 오류해결] remote : Write access to repository not granted , git the requested URL returend error : 403 해결방법(CLI Token 연결, Organization)
안녕하세요~!28년차 진로탐색꾼 조녁입니다!! 오늘은 새로운 노트북에서 CLI로 깃헙을 사용하다가, 작년에 만났던 토큰방식 로그인의 필요성을 만났습니다. 잊고 있었던 토큰방식 접근방법을 한번 정리해놓으면 좋을 것 같아서 글 작성했습니다. 0. 시작하기 전에 까먹었던 것들 정리를 먼저 해볼까합니다. 우선 깃헙의 글로벌 변수를 확인합니다. 만약 name과 email이 등록안되어있다면 등록해줍니다. (만약 잘못등록했다면 아래 방법으로 삭제후 다시 등록) # git config 확인git config --list# git config 설정git config --global user.name "user-name"git config --global user.email abcd@naver.com# 잘못등록한 co..
더보기
-
[알쓸신잡]DS_STORE 이란?
안녕하세요~ 27년차 진로탐색꾼 조녁입니다!! 오늘은 개인프로젝트를 진행하면서 알게된 것들을 정리해볼까합니다.그중에서 내 디렉토리에 자꾸 생기는 DS_STORE 에 대해 알아보고 , 삭제방법까지 함께 알아봤습니다. 1. .DS_STORE 란? Desktop Services Store 의 약자로 , 애플에서 정의한 파일 포맷입니다. 애플의 맥OS X 시스템이 폴더에 접근할 때 생기며, 해당 폴더에 대한 메타데이터를 저장하는 파일입니다.즉, mac의 finder로 폴더에 접근하면 자동으로 생기는 파일입니다. 여기서 메타데이터는 해당 디렉토리의 특성, 구조 등에 관한 내용을 말합니다. .DS_store 파일은 프로젝트와 하등 관련없는 파일로 ,윈도우의 thumb.db 파일과 비슷하다고 볼 수 있습니다.맥에서 ..
더보기
-
읽어봐야할 논문 리스트(feat. NLP , Recsys)
안녕하세요~! 27년차 진로탐색꾼 조녁입니다! 마음속으로 숫자 100을 세면서 최대한 미루다가 드디어 정리를 합니다.. 앤드류 응 선생님께서 논문을 읽기전에 읽을 리스트를 적어보라고 하셨고, 부캠 멘토님께서 읽어보고 싶은 논문 -> 정통 논문 -> 최신 논문 순으로 흥미 붙이며 읽어보라고 하셔서 우선 그렇게 리스트업 해보고자합니다. [22.02.25 (금)] 그러나 어느새 28년차가 되면서 내가 멘토가 되어있구나 .. 맞아 .. 이때라도 리스트 만들고 읽었어야하는데 ㅠㅠ 하지만 이제부터라도 읽으면 되니까!! (합리화) 다시 리스트 적어놓고 읽기 시작하자!! 이제는 법률 도메인이라는 내 도메인도 정해졌으니 관련 논문과 NLP 및 Recsys 번갈아 가면서 읽자!! 원칙 : 일주일에 1편은 최소한 읽기 , ..
더보기
-
[진로탐색] ML/DL 분야 과제테스트 및 코딩테스트 후기 1탄
안녕하세요~!28년차 진로탐색꾼 조녁입니다! 일전에는 계속해서 진행했던 면접과 관련하여 기록하였는데, 이번에 진로탐색하면서 과제테스트를 많이 진행하다보니 제 스스로 제가 본 과제들에 대한 회고를 적고 싶어서, 과제테스트와 AI분야 코딩테스트에 대한 진로탐색 일기를 적어볼까합니다! (반성일기입니다 흑흑) 받은 과제 : 리플에이아이(코딩테스트, 복합어 추출 과제, 당뇨예측 과제), 보이스루(코테), 클래스101(코테), 원티드랩(사전면접) 후기는 개인적인 회고에 가깝습니다!1. 리플에이아이 머신러닝 엔지니어 : 코딩테스트와 과제테스트를 동시에 보내준다(프로그래머스 진행). 최근에 딥러닝을 쓰지 않아도 되면 안쓰는게 낫다는 생각이 있어서 안쓰고 풀었더니 다시 딥러닝으로 풀라고 과제테스트를 다시 보내주셨다...
더보기
-
구글클라우드(GCP)에서 최신 GPU(V100) 인스턴스 할당받기 (vs-code, ssh, gcp)
안녕하세요~ 29년차 진로탐색꾼 조녁입니다. 오늘은 클라우드에서 고성능 GPU 인스턴스를 할당받아서 사용해보는 방법을 정리해볼까합니다. 최대한 차근차근 작성했지만 혹시 따라하시다 잘 안되시는 부분은 댓글로 남겨주세요. 1. 구글 클라우드 프로젝트 세팅하기 0 - 구글 클라우드 플랫폼(GCP) 가입하기 우선 구글 클라우드 플랫폼에 가입하지 않으신 분들은 가입을 해주셔야합니다. 가입하는 내용은 구글 계정 (유튜브 보는 분들이라면 한개씩 있으시겠죠!)으로 간편히 할 수 있으니 스킵하겠습니다. 추가로 처음 가입하실떄 무료 크레딧 300 달러를 받게 됩니다. 이때 회사 계정(이메일)인증을 하게되면, 다른 이메일에서 가입하실떄도 100 달러를 추가로 받아 총 400달러 크레딧을 받게됩니다. 1 - 프로젝트 생성 및..
더보기
-
[U-NLP] 1일차 회고 : 노력에 대한 낭만을 믿자. 그리고 기록이 중요하다.
안녕하세요~! 27년차 진로탐색꾼 조녁입니다!! 어느덧 P-stage가 끝나고 Level-2 U stage-NLP가 시작됐습니다. 오늘은 새로운 피어세션 캠퍼분들을 만난 날이기도 하지만, 1기 선배님들이 오셔서 "Meet-up : 부캠에서 살아남기" 시간을 너무 풍성하게 해주셔서 기억에 많이 남는다. 1. 오늘 새롭게 배운 내용 1. Word2Vec 같은 문장에서 인접한 단어들 간에 의미 비슷할 것이라는 가정하에 시작한다. e.g) The cat purrs & This cat hunts mice Idea of w2v : 한 단어가 주변의 단어를 통해 유추될 수 있다. Window & sliding window : 각 문장의 중심단어 & 주변단어 쌍으로 구성되는 학습데이터 추출 관계를 벡터화하여 빼고 더하..
더보기
-
[P-모델최적화] 3일차 회고 : 개발자는 개발말고도 많이 하는구나
안녕하세요~! 27년차 진로탐색꾼 조녁입니다. 오늘은 졸리니 각설하고 .. 얼른쓰고 자야겠다. 나중에 이걸보면 오늘의 기억이 날까? ㅋㅋㅋㅋㅋ 웃는게 일류다!!! ㅎㅎㅎ 0. To Do [ ] 강의 4-5강듣기 [x] 2시 특강 듣기 [ ] 스페셜 미션 할 수있는 것 해보기 [x] 요약 대회 pre-training 돌리기 [ ] 최종 프로젝트 올라온 자료들 읽어보기 1. 오늘의 발자취 To Do 공유 및 pre-training논의 독서 토론 모임 (목적이 이끄는 삶) 2시 특강 듣기 - 아트랩 좋은 회사인듯 , 그러나 지금은 프론트엔드 뽑는다고함 요약 대회 nsml 에서 pre-training 돌림 서버에서 프리트레인 돌리고 싶은데 벌레(버그)들이 너무 많다. 벌레 모음 (디버깅) pretrain 하는데..
더보기
