슬기로운 연구생활

* 에러 원인 : h5py 버전이 맞지 않아 생기는 문제이다. * 해결 방법 : h5py 버전을 2.10.0으로 맞추니 해결되었다. pip install h5py==2.10.0

* 에러 원인 : numpy 버전과 keras 버전이 맞지 않아 생기는 문제이다. * 해결 방법 : numpy 버전은 1.19.5로 맞추니 해결되었다. pip install numpy==1.19.5

* 에러 원인 : keras에서 bert를 사용하기 위해서는 bert-tensorflow를 설치해주어야 한다. 하지만 이때 bert-tensorflow의 버전이 다를 경우 에러가 발생할 수 있다. * 해결 방법 : 버전을 1.0.1로 맞춰서 다시 설치하면 위의 에러가 발생하지 않을 것 이다. bert-tensorflow==1.0.1

* Problem : pycharm에서 textacy를 설치하다가 에러가 발생하였다. * Answer : 1. 비쥬얼 스튜디오 C++ 설치를 했다. 2. Spacy의 버전을 낮추었다.

* 에러 메세지 : NotImplementedError: Layers with arguments in `__init__` must override `get_config` * 에러 원인 : callback 함수를 사용해 모델을 저장하려 하는데 위에 에러가 발생하였다. callback 함수를 사용하지 않고 model.fit을 하는 경우에는 위에 에러가 발생하지 않았다. * 해결 방법 : BERT Layer Class 안에 get_config 함수를 추가해주니 문제가 해결되었다. class BertLayer(tf.keras.layers.Layer): def __init__(self, n_fine_tune_layers=10, **kwargs): self.n_fine_tune_layers = n_fine_tune..

에러 메세지 : batch() got an unexpected keyword argument ‘drop_remainder’ 에러 원인 : Tensorflow 버전이 업그레이드 되면서 run_classifier.py의 drop_remainder 파라미터가 없어졌다. 해결 방법 : runclassifier.py 파일에서 drop_remainder 코드를 제거해줘야 한다.

* Error Message : RuntimeError: cuDNN error: CUDNN_STATUS_EXECUTION_FAILED * Problem pytorch의 GPU가 문제가 발생했다. 최근의 GPU를 2080TI로 변경했는데 이게 문제였다. GPU 2080TI로 하고 CUDA 9점대 버전을 사용하면 Pytorch가 제대로 인식을 못하는 에러가 발생한다. * Solution 해결방법은 간단한다. 1. CUDA를 10점대 버전으로 업데이트 한다. 2. Pytorch를 업데이트 한다. conda install pytorch torchvision cudatoolkit=10.0 -c pytorch

* Error Message ImportError: cannot import name ‘imresize’ from ‘scipy.misc’ * Solution Scipy를 1.1버전으로 downgrade 하면 된다. 버전 에러였다.