| 일 | 월 | 화 | 수 | 목 | 금 | 토 |
|---|---|---|---|---|---|---|
| 1 | 2 | 3 | 4 | 5 | ||
| 6 | 7 | 8 | 9 | 10 | 11 | 12 |
| 13 | 14 | 15 | 16 | 17 | 18 | 19 |
| 20 | 21 | 22 | 23 | 24 | 25 | 26 |
| 27 | 28 | 29 | 30 |
- 석사
- Word2Vec
- 자연어처리
- 전처리
- word embedding
- CUDA
- pytorch
- Classification Task
- sentiment analysis
- 우울증
- 수기
- 품사태깅
- NLP
- 대학원
- 인공지능
- naver movie review
- Today
- Total
목록전체 글 (144)
슬기로운 연구생활
1. CMAKE 환경 설정 - 카카오 형태소 분석기를 사용하려면 cmake가 설치되어 있어야 한다. - 주의해햐 할 점은 cmake 3.10 이상의 버전을 설치해야 하기 때문에 update를 해주어야 한다. sudo -E apt-get update sudo apt-get install cmake - 만약에 위에 명령어로 설치가 안 될 경우에는 pip로 설치해보자. pip install cmake 2. Khaiii 설치 - 아래의 명령어를 쭉 따라하면 khaiii가 설치된다. git clone https://github.com/kakao/khaiii cd khaiii mkdir build cd build cmake .. make package_python cd package_python pip instal..
[Pytorch] Pytorch Window 설치 (CUDA)
window에 CUDA와 CuDNN 설정되어 있다고 가정. * 설치 1. window의 CUDA 버전확인 - window CMD 창에서 입력. nvcc --version - 명령어를 입력하면 9점대 버전인 것을 확인할 수 있다. 2. 해당 버전에 맞는 Pytorch 설치 - pytorch는 anaconda에서 설치하는 것이 편하다. - anaconda prompt 창에서 입력. (설치하고 싶은 가상환경 activate후 입력) conda install pytorch torchvision cudatoolkit=9.0 -c pytorch * 설치 확인 torch를 불러오고 device_name을 확인한다. import torch torch.cuda.get_device_name(0)
[VScode] VScode SFTP 연결 방법
1. Extensions에서 SFTP 설치 - VSCODE 확장기능 TAB에서 SFTP를 설치한다. 2. sftp.json 파일을 설정한다. - F1을 누르고 sftp.json를 입력한다. - sftp.json의 서버 접속하는데 필요한 정보를 입력한다. { "name": "My Server", "host": "IP주소 입력", "protocol": "sftp", "port": 22, "username": "Username 입력", "password": "비밀번호 입력", "remotePath": "/var/www/html/MyResume/", "uploadOnSave": true } 3. 서버에서 폴더를 다운로드 한다. - SFTP: Download Project를 하면 서버에 저장되어 있던 파일이 로컬..
[Hexo] Hexo 블로그 테마 적용
github에 hexo 블로그에 icarus 테마 입히기. [ 적용 방법 ] 1. icarus 테마 git에서 다운. cd myblog git clone https://github.com/ppoffice/hexo-theme-icarus.git themes/icarus 2. 실행 결과 3. theme을 바꿔준다. - /myblog/_config.yml 에 들어가서 변경해준다. # Extensions ## Themes: https://hexo.io/themes/ theme: icarus [ 주의 사항 ] - _config.yml은 두개가 있다. - 첫번째로 /myblog/_config.yml이 있고 hexo 블로그의 전반적인 사항을 관리한다. - 두번째로 /themes/icarus/_config.yml이 있..
* 에러 메세지 : NotImplementedError: Layers with arguments in _∈it_ must override ≥tconfig * 에러 원인 : callback 함수를 사용해 모델을 저장하려 하는데 위에 에러가 발생하였다. callback 함수를 사용하지 않고 model.fit을 하는 경우에는 위에 에러가 발생하지 않았다. * 해결 방법 : BERT Layer Class 안에 get_config 함수를 추가해주니 문제가 해결되었다. class BertLayer(tf.keras.layers.Layer): def __init__(self, n_fine_tune_layers=10, **kwargs): self.n_fine_tune_layers = n_fine_tune..
[Hexo] Github Hexo 블로그 만들기
* 초기 설정 1. node.js 설치 - Download : https://javacpro.tistory.com/62 - 여기서 사용할 hexo는 node 기반이라 node.js가 설치되어 있어야 한다. 2. git 설치 - Download : https://git-scm.com/downloads - Github과 연동시키기 위해서는 git이 기본적으로 설치되어 있어야 한다. 3. hexo 설치 - hexo를 설치한다. npm install -g hexo-cli 4. 블로그 설정 - 블로그 폴더를 설치하고 hexo를 초기화한다. hexo init myblog cd myblog npm install - 완료되면 아래와 같이 구조가 생성된다. . ├── _config.yml ├── package.json ..
[ Tensorflow ] tensorflow version error
에러 메세지 : batch() got an unexpected keyword argument ‘drop_remainder’ 에러 원인 : Tensorflow 버전이 업그레이드 되면서 run_classifier.py의 drop_remainder 파라미터가 없어졌다. 해결 방법 : runclassifier.py 파일에서 drop_remainder 코드를 제거해줘야 한다.
* Error Message : RuntimeError: cuDNN error: CUDNN_STATUS_EXECUTION_FAILED * Problem pytorch의 GPU가 문제가 발생했다. 최근의 GPU를 2080TI로 변경했는데 이게 문제였다. GPU 2080TI로 하고 CUDA 9점대 버전을 사용하면 Pytorch가 제대로 인식을 못하는 에러가 발생한다. * Solution 해결방법은 간단한다. 1. CUDA를 10점대 버전으로 업데이트 한다. 2. Pytorch를 업데이트 한다. conda install pytorch torchvision cudatoolkit=10.0 -c pytorch