일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | |||
5 | 6 | 7 | 8 | 9 | 10 | 11 |
12 | 13 | 14 | 15 | 16 | 17 | 18 |
19 | 20 | 21 | 22 | 23 | 24 | 25 |
26 | 27 | 28 | 29 | 30 | 31 |
- NLP
- naver movie review
- sentiment analysis
- Classification Task
- 수기
- CUDA
- 전처리
- word embedding
- 자연어처리
- 품사태깅
- Word2Vec
- 인공지능
- 우울증
- 대학원
- 석사
- pytorch
- Today
- Total
목록전체 글 (144)
슬기로운 연구생활
2024년은 매니저로서 큰 성장을 한 의미있는 한해이다. 조직, 회사, 문화, 팀원, 성과, 업무 등에 대한 이렇게 깊게 파고들고 생각했던 적이 있얼을까 싶다. 이전에는 문제 해결력을 기르거나, 제품을 만드는데서 순수한 희열을 느꼈던 것 같다. IC로서 충실하려 했고, 항상 목표가 2인분 이상을 하는 개발자가 되는 것이였다. 올해 3월부터 팀장을 하게 되었는데, IC로서 했던 고민과는 정말 방향이 달랐다. 나도 몰랐던 내 모습과 생각들을 알게되었고, 엄청난 스트레스를 받았다. 나도 몰랐는데, 내가 컨트롤할 수 없는 일에 대한 스트레스에 취약한 것 같다. 1월에는 스터디를 참여하고 클라이밍을 주로 했다. 스터디는 가짜연구소에서 진행했던 임베딩 관련된 스터디였다. 너무 회사에 매몰되어 있었던 것 같아, 외부..
[Problem] git clone할 때, 발생하는 에러 [Solution] 문제 해결 방법은 간단하다. vscode에서 terminal을 껏다 키며 된다.
2달만 지나면 2023년이 끝나기 때문에 좀 빠르게 회고를 적어보고자 한다.2022년에는 안 적인 것 같은데 올해는 좀 빨리 적어서 잊지 말고 적어야겠다. 1월에는 이사를 했다. 청담에서 자취하다가 수원 부모님 집으로 돌아왔는데 출퇴근 적응 하느라 힘들었던 기억이 난다. 서울살때는 30분 이내로 출근을 끝냈던 것 같은데 수원으로 이사하고 나서는 1시간 좀 더 걸렸던 것 같다. 그리고 12월에 태국으로 회사 워크샵을 가고 캠핑을 가면서 재미있게 2022년을 마무리했던 기억이 난다.1월에 가장 큰 일은 OpenAI에서 text-davinci-003을 오픈했다는 것이다. 굉장히 충격적이였다. 왜냐하면 이전에는 안되던 일들이 가능해졌기 때문이다. 말이 안된다고 생각했던게 다양한 주제의 질문들에 대해서 너무나도 ..
PubTables 데이터를 다운 받아 finetuning할 일이 있었다. 문제는 해당 데이터가 azure에 업로드되어 있고 azcopy를 통해 다운 받을 수 있다는 것이다. 1. azcopy 아래의 명령어를 통해 azcopy를 실행시킬 수 있다. 세번째 명령어인 기존 azcopy 삭제하는 것은 미리 설치한 사람만 하면 되고 처음 설치하면 하지 않아도 된다. 네번째 명령어를 실행시켜야 경로 설정이 디ㅗ고 azcopy 명령어를 실행할 수 있다. #Download AzCopy wget https://aka.ms/downloadazcopy-v10-linux #Expand Archive tar -xvf downloadazcopy-v10-linux #(Optional) Remove existing AzCopy ve..
에러 메시지 : -------------------------------------- C++ Traceback (most recent call last): -------------------------------------- No stack trace in paddle, may be caused by external reasons. ---------------------- Error Message Summary: ---------------------- FatalError: `Segmentation fault` is detected by the operating system. [TimeInfo: *** Aborted at 1678089101 (unix time) try "date -d @167808910..
에러 메시지 : AttributeError: 'ParallelEnv' object has no attribute '_device_id' 에러 원인 : GPU 환경이 구축되지 않아서 생기는 오류이다. CPU 환경에서 fine-tune을 하는데 use_gpu를 true로 하면 에러가 발생한다. 해결 방법 : config.yml에서 use_gpu: false로 변경한다.
에러 메시지 : Missing or invalid credentials. error: src refspec master does not match any. 에러 원인 : 기존의 git repo를 clone하고 다른 새로운 repo에 push 하려고 하니 에러가 발생했다. git remote 원격 주소를 삭제하고 email과 password를 다시 등록했는데도 에러가 발생했다. 해결 방법 : 확인해보니 터미널을 껏다 키면 해결이 되는 문제였다. 너무 사소한 문제라서 어이가 없었다. git remote remove origin git remote add origin [주소] git remote -v git config --global user.name [아이디] git config --global user...
에러 메시지 : If this call came from a _pb2.py file, your generated code is out of date and must be regenerated with protoc >= 3.19.0. 에러 원인 : PaddleOCR fine-tune 하다가 에러가 발생했다. protoc 에러였고 상대적으로 쉽게 해결했다. 해결 방법 : 라이브러리 설치 다시 해주면된다. pip install protobuf==3.20.*