일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | |||||
3 | 4 | 5 | 6 | 7 | 8 | 9 |
10 | 11 | 12 | 13 | 14 | 15 | 16 |
17 | 18 | 19 | 20 | 21 | 22 | 23 |
24 | 25 | 26 | 27 | 28 | 29 | 30 |
- 대학원
- 전처리
- naver movie review
- 자연어처리
- 인공지능
- 품사태깅
- word embedding
- 석사
- CUDA
- 수기
- Word2Vec
- 우울증
- sentiment analysis
- Classification Task
- NLP
- pytorch
- Today
- Total
목록전체 글 (143)
슬기로운 연구생활
[Problem] git clone할 때, 발생하는 에러 [Solution] 문제 해결 방법은 간단하다. vscode에서 terminal을 껏다 키며 된다.
2달만 지나면 2023년이 끝나기 때문에 좀 빠르게 회고를 적어보고자 한다. 2022년에는 안 적인 것 같은데 올해는 좀 빨리 적어서 잊지 말고 적어야겠다. 1월에는 이사를 했다. 청담에서 자취하다가 수원 부모님 집으로 돌아왔는데 출퇴근 적응 하느라 힘들었던 기억이 난다. 서울살때는 30분 이내로 출근을 끝냈던 것 같은데 수원으로 이사하고 나서는 1시간 좀 더 걸렸던 것 같다. 그리고 12월에 태국으로 회사 워크샵을 가고 캠핑을 가면서 재미있게 2022년을 마무리했던 기억이 난다. 1월에 가장 큰 일은 OpenAI에서 text-davinci-003을 오픈했다는 것이다. 굉장히 충격적이였다. 왜냐하면 이전에는 안되던 일들이 가능해졌기 때문이다. 말이 안된다고 생각했던게 다양한 주제의 질문들에 대해서 너무나..
PubTables 데이터를 다운 받아 finetuning할 일이 있었다. 문제는 해당 데이터가 azure에 업로드되어 있고 azcopy를 통해 다운 받을 수 있다는 것이다. 1. azcopy 아래의 명령어를 통해 azcopy를 실행시킬 수 있다. 세번째 명령어인 기존 azcopy 삭제하는 것은 미리 설치한 사람만 하면 되고 처음 설치하면 하지 않아도 된다. 네번째 명령어를 실행시켜야 경로 설정이 디ㅗ고 azcopy 명령어를 실행할 수 있다. #Download AzCopy wget https://aka.ms/downloadazcopy-v10-linux #Expand Archive tar -xvf downloadazcopy-v10-linux #(Optional) Remove existing AzCopy ve..
에러 메시지 : -------------------------------------- C++ Traceback (most recent call last): -------------------------------------- No stack trace in paddle, may be caused by external reasons. ---------------------- Error Message Summary: ---------------------- FatalError: `Segmentation fault` is detected by the operating system. [TimeInfo: *** Aborted at 1678089101 (unix time) try "date -d @167808910..
에러 메시지 : AttributeError: 'ParallelEnv' object has no attribute '_device_id' 에러 원인 : GPU 환경이 구축되지 않아서 생기는 오류이다. CPU 환경에서 fine-tune을 하는데 use_gpu를 true로 하면 에러가 발생한다. 해결 방법 : config.yml에서 use_gpu: false로 변경한다.
에러 메시지 : Missing or invalid credentials. error: src refspec master does not match any. 에러 원인 : 기존의 git repo를 clone하고 다른 새로운 repo에 push 하려고 하니 에러가 발생했다. git remote 원격 주소를 삭제하고 email과 password를 다시 등록했는데도 에러가 발생했다. 해결 방법 : 확인해보니 터미널을 껏다 키면 해결이 되는 문제였다. 너무 사소한 문제라서 어이가 없었다. git remote remove origin git remote add origin [주소] git remote -v git config --global user.name [아이디] git config --global user...
에러 메시지 : If this call came from a _pb2.py file, your generated code is out of date and must be regenerated with protoc >= 3.19.0. 에러 원인 : PaddleOCR fine-tune 하다가 에러가 발생했다. protoc 에러였고 상대적으로 쉽게 해결했다. 해결 방법 : 라이브러리 설치 다시 해주면된다. pip install protobuf==3.20.*
에러메시지 : error: command 'x86_64-linux-gnu-gcc' failed with exit status 1 에러원인 : Docker에서 Polygon3를 설치하려고 했는데 계속 알 수 없는 에러가 났다. 의존성 문제인 것 같았는데 에러메시지를 자세히 보니 gcc가 보였다. 그래서 c관련 기본 패키지가 없다고 생각했고 기본 환경 세팅 부분을 체크했다. ubuntu 18.04 이미지를 끌어와서 내 환경을 세팅하는데.. python 관련 설정이 부족하게 세팅되어 있었나보다. 해결방법 : 자신의 python 버전에 맞는 dev 환경을 세팅해준다. (python3-dev로도 하니까 안되서 구체적인 버전을 명시했다.) apt-get -y install python3.8-dev