인기글
-
[오류해결] UnicodeDecodeError: 'utf-8' codec can't decode byte 0xc0 in position 0: invalid start byte
안녕하세요~! 28년차 진로탐색꾼 조녁입니다! 오늘은 pandas에서 csv 파일을 불러올때 만났던 간단한 에러에 대해 기록해 두려고 합니다. 1. 상황 - 대회용 데이터 샘플을 csv 파일로 전달받았는데 pandas.read_csv 함수 사용했을때 위와 같은 에러메시지 발생 UnicodeDecodeError: 'utf-8' codec can't decode byte 0xc0 in position 0: invalid start byte 2. 해결 - 인코딩 과정에서의 에러이므로, pandas.read_csv 함수의 파라미터로 "encoding='cp949'"를 포함시켜준다. df = pd.read_csv(PATH , encoding='cp949') 3. 다른에러 ParserError: Error toke..
더보기
-
[Git-hub 오류해결] remote : Write access to repository not granted , git the requested URL returend error : 403 해결방법(CLI Token 연결, Organization)
안녕하세요~! 28년차 진로탐색꾼 조녁입니다!! 오늘은 새로운 노트북에서 CLI로 깃헙을 사용하다가, 작년에 만났던 토큰방식 로그인의 필요성을 만났습니다. 잊고 있었던 토큰방식 접근방법을 한번 정리해놓으면 좋을 것 같아서 글 작성했습니다. 0. 시작하기 전에 까먹었던 것들 정리를 먼저 해볼까합니다. 우선 깃헙의 글로벌 변수를 확인합니다. 만약 name과 email이 등록안되어있다면 등록해줍니다. (만약 잘못등록했다면 아래 방법으로 삭제후 다시 등록) # git config 확인 git config --list # git config 설정 git config --global user.name "user-name" git config --global user.email abcd@naver.com # 잘못등록..
더보기
-
[진로탐색] ML/DL 분야 과제테스트 및 코딩테스트 후기 1탄
안녕하세요~! 28년차 진로탐색꾼 조녁입니다! 일전에는 계속해서 진행했던 면접과 관련하여 기록하였는데, 이번에 진로탐색하면서 과제테스트를 많이 진행하다보니 제 스스로 제가 본 과제들에 대한 회고를 적고 싶어서, 과제테스트와 AI분야 코딩테스트에 대한 진로탐색 일기를 적어볼까합니다! (반성일기입니다 흑흑) 받은 과제 : 리플에이아이(코딩테스트, 복합어 추출 과제, 당뇨예측 과제), 보이스루(코테), 클래스101(코테), 원티드랩(사전면접) 후기는 개인적인 회고에 가깝습니다! 1. 리플에이아이 머신러닝 엔지니어 : 코딩테스트와 과제테스트를 동시에 보내준다(프로그래머스 진행). 최근에 딥러닝을 쓰지 않아도 되면 안쓰는게 낫다는 생각이 있어서 안쓰고 풀었더니 다시 딥러닝으로 풀라고 과제테스트를 다시 보내주셨다...
더보기
-
[Librosa] 음성인식 기초 및 음악분류 & 추천 알고리즘
https://link.coupang.com/a/NS8jv Apple 2022 아이패드 에어 5세대 COUPANG www.coupang.com 안녕하세요~ 27년차 진로탐색꾼 조녁입니다!! 오늘은 음성파일을 인식하고 거기서 특징추출하는 기초적인 내용부터 추출한 특징들을 통해 노래의 장르를 분류하는 모델과 비슷한 장르의 노래를 추천해주는 알고리즘을 살펴보겠습니다! Tensorflow Dev 공부할 때, 텍스트를 LSTMs 로 학습시켜서 시를 작성해본 적이 있는데 음성파일을 다루는 건 처음이네요! * 오늘의 과제 : 노래 장르 분류 알고리즘 & 간단한 추천 알고리즘 구현해보기! 1. 데이터셋 다운로드 : 우선 저는 kaggle 데이터 셋을 사용하였고, 직접 다운로드 받아 사용할 수도 있지만, kaggle 과..
더보기
-
[알쓸신잡]DS_STORE 이란?
안녕하세요~ 27년차 진로탐색꾼 조녁입니다!! 오늘은 개인프로젝트를 진행하면서 알게된 것들을 정리해볼까합니다. 그중에서 내 디렉토리에 자꾸 생기는 DS_STORE 에 대해 알아보고 , 삭제방법까지 함께 알아봤습니다. 1. .DS_STORE 란? Desktop Services Store 의 약자로 , 애플에서 정의한 파일 포맷입니다. 애플의 맥OS X 시스템이 폴더에 접근할 때 생기며, 해당 폴더에 대한 메타데이터를 저장하는 파일입니다. 즉, mac의 finder로 폴더에 접근하면 자동으로 생기는 파일입니다. 여기서 메타데이터는 해당 디렉토리의 특성, 구조 등에 관한 내용을 말합니다. .DS_store 파일은 프로젝트와 하등 관련없는 파일로 ,윈도우의 thumb.db 파일과 비슷하다고 볼 수 있습니다. 맥..
더보기
-
[딥러닝] 에폭(epoch) & 배치 사이즈(batch size) & 반복(iteration) 개념 정리
https://link.coupang.com/a/rGMRQ 경사하강법(gradient descent)을 통해 결과를 내기 위해서 여러번의 최적화 과정을 거쳐야 하는 알고리즘을 iterative 하다고 한다. 아래 그림과 같이 반복해서 많은 양의 데이터 학습을 진행할 때, 보통 한번에 최적화된 값을 찾기는 힘듭니다. 그렇기에 머신러닝에서 최적화(optimization)를 하기 위해 여러번의 학습 과정을 거칩니다. 또한 한번에 모든 양의 데이터를 넣지 않고 데이터를 나눠서 학습시키는데 이때 등장하는 개념이 batch size , epoch , iteration 입니다. 1. 에폭(epoch) : One Epoch is when an ENTIRE dataset is passed forward and backw..
더보기
-
구글클라우드(GCP)에서 최신 GPU(V100) 인스턴스 할당받기 (vs-code, ssh, gcp)
안녕하세요~ 29년차 진로탐색꾼 조녁입니다. 오늘은 클라우드에서 고성능 GPU 인스턴스를 할당받아서 사용해보는 방법을 정리해볼까합니다. 최대한 차근차근 작성했지만 혹시 따라하시다 잘 안되시는 부분은 댓글로 남겨주세요. 1. 구글 클라우드 프로젝트 세팅하기 0 - 구글 클라우드 플랫폼(GCP) 가입하기 우선 구글 클라우드 플랫폼에 가입하지 않으신 분들은 가입을 해주셔야합니다. 가입하는 내용은 구글 계정 (유튜브 보는 분들이라면 한개씩 있으시겠죠!)으로 간편히 할 수 있으니 스킵하겠습니다. 추가로 처음 가입하실떄 무료 크레딧 300 달러를 받게 됩니다. 이때 회사 계정(이메일)인증을 하게되면, 다른 이메일에서 가입하실떄도 100 달러를 추가로 받아 총 400달러 크레딧을 받게됩니다. 1 - 프로젝트 생성 및..
더보기
-
[진로탐색] ML/DL 분야 스스로 다녀본 중소기업(스타트업) 탐방후기 5탄
안녕하세요~! 28년차 진로탐색꾼 조녁입니다!! 제가 28년차가 되고는 당분간 진로탐색 일기를 올릴 일은 없을 줄 알았는데 .. 생각보다 빠르게 찾아왔네요!!! 저는 로앤컴퍼니를 뒤로하고 새로운 둥지를 찾고 있습니다!! (아마 이 글이 올라갈때쯤엔 온보딩 후기도 올라와있겠죠?!) 이미 합격까지 한 사이클 돌아본 경험이 있어서 그런지, 이번 진로탐색은 조금 더 수월했던 것 같아요!! 다만 이번엔 유독 과제/코테가 많았어서 조만간 고민해보고 과제 후기도 올려볼까합니다. 다닌 곳 : 버블콘, 세이지리서치, 라이앤캐처스, 포자랩스, 쿤텍, 엘리스 면접 후기 1. 버블콘 NLP 개발자 1차 면접 : 대표님과 1대1 대면 면접으로 90분 가량 진행, 백엔드 & 서버 사이드 이야기를 많이 나눔 - 느낀점 나만의 믿거..
더보기
