본문 바로가기

DeepLearning Framework & Coding/De-bugging12

[Colab] 사용 가능한 RAM을 모두 사용한 후 세션이 다운되었습니다. 시계열데이터를 주로 다루다가 최근 Anomaly Detection분야 코드를 짜면서 이미지도 간혹 다루게되었는데요 시계열데이터에서는 몇만개씩 데이터를 다루어도 Feature수가 적을뿐 아니라 2D-CNN을 쓸일이 거의없기에 저에게는 다소 생소한 문제였습니다. Google Colaboratory사용시 발생하는 문제로, Conv2D 혹은 Weighting, bias를 너무 많이 사용하는 모델을 사용시 발생하는 문제였습니다. 저는 Conv2D를 Filter Size를 32개씩 3개 Layer정도로 구성했고, 100X100X3 이미지를 학습하고자했는데요 이미지도 몇장 안됬는데 왜 RAM 최대치 초과가 뜰까.. 고민하다보니 MNIST데이터는 6만장임에도 이런문제가 발생하지 않는것을보고, 혹시 이미지 사이즈에 의해.. 2022. 6. 11.
[Tensor 오류] RuntimeError : expected scalar type Double but found Float RuntimeError : expected scalar type Double but found Float 파이토치를 쓰다보면 종종 자주 등장하는 경고문구인데.. Pytorch는 Tensor연산시 Float32를 기준으로 진행하기에 본인이 학습시키고자 하는 데이터의 형식이 double이거나, Float64, int같은 다른 형태일때 발생하는 오류입니다.. DataFrame이나 numpy로 그냥 불러오면 double인 경우도 있는데요 이럴때는 하기와 같이 data type을 Float32로 바꿔주면 정상 연산 됩니다. ex) tran_gan_window_X라는 데이터의 타입을 변형할시 코드 train_gan_window_X = torch.tensor([train_gan_window_X], dtype = to.. 2022. 6. 5.
ModuleNotFoundError: No module named 'tensorflow_addons' tensorflow 2.X 사용중, InstanceNormalization을 쓰기위해 from tensorflow_addons를 선언했으나 이런에러가 떳는데요 ModuleNotFoundError: No module named 'tensorflow_addons' 이때는 간단하게 코드 한줄만 실행해주시면 해결됩니다. pip install tensorflow-addons 2022. 3. 4.
[python] AttributeError: 'numpy.ndarray' object has no attribute 'numpy' AttributeError: 'numpy.ndarray' object has no attribute 'numpy' Numpy에 왜 numpy array 관련 함수가 없지? 라고 생각하실 수 있습니다. 하지만, 자세히 코드를 뜯어보면 이미 numpy array인 함수를 to_numpy로 다시 또 변경하고자 할때 해당 에러가 발생합니다. to_numpy()를 하는 변수가 이미 어떤 data type인지 확인해보시면 좋습니다. https://discuss.pytorch.org/t/attributeerror-numpy-ndarray-object-has-no-attribute-numpy/42062 AttributeError: 'numpy.ndarray' object has no attribute 'numpy' @.. 2021. 12. 25.
[Github] Google Colab파일 Github로 push하기 개인 GPU가 없는관계로(저가 노트북만 사용), Google Colab을 자주사용하는데요 Google Colab에서 짠 코드를 Github에 올리기위한 방법을 정리해보고자합니다. 구글 코랩의 좌측 상단에 보면 "파일" 이 있는데요 여기서 "Github에 사본저장"을 클릭해주시면 됩니다. 그러면 다음과 같은 창이 뜨는데요 바로 "OK" 하면 바로 만들어놓은 Repository로 Commit이 완료됩니다. 그런데, 문제는 브랜치가 없는 하기와 같은 경우입니다. 이렇게 된 경우 아무리 OK를 누르고 반복해도 Repository에 변화가없더라구요 그래서 엄청 해매다보니.. 하기와 같은 해결책을 찾았습니다. 1. Google Colab 코드를 다운로드 후, 로컬 PC의 본인이 원하는 경로에 저장 2. cmd를 키.. 2021. 12. 21.