오늘은 코드의 Pytorch와 현재 환경의 Pytroch의 버전 차이로 인해 발생하는 오류에 대해 알아보고자 한다. Pytroch의 버전에 따라 당연하게도 함수가 새로 도입되거나 변경되는 경우가 있는데 이번 경우가 이에 해당한다.AttributeError: module 'torch' has no attribute 'frombuffer'위 오류에서 나타난 torch.frombuffer는 Pytorch 2.0 이상에서 도입된 함수이다. 따라서 당연하게도 해당 오류를 해결하기 위해서는 현재 환경의 Pytorch를 업그레이드 시키는 것이 가장 간단한 해결책이다.그러나, 종종 현재 상황에 따라 Pytroch 업그레이드가 불가능한 경우가 있는데 그럴 경우 아래와 같이 코드를 수정하여 frombuffer 함수를 대..

오늘은 NVIDIA driver와 CUDA의 버전이 일치하지 않을 때 발생하는 오류 중 하나에 대해 알아보겠다. 매번 발생하는 것은 아니나, CUDA와 NVIDIA driver의 버전이 일치하지 않을 때 아래의 오류가 발생하는 경우가 있다.RuntimeError: r.nvmlDeviceGetNvLinkRemoteDeviceType_ INTERNAL ASSERT FAILED at "../c10/cuda/driver_api.cpp":27, please report a bug to PyTorch. Can't find nvmlDeviceGetNvLinkRemoteDeviceType: /lib/x86_64-linux-gnu/libnvidia-ml.so.1: undefined symbol: nvmlDeviceGet..

오늘은 docker에서 container 만들고 git을 당연히 설치했다고 방심하면 바로 발견되는 오류에 대해 알아보고자한다.git은 항상 있다고 방심하는 경우가 많아, 종종 git을 설치하지 않고 사용하면 아래의 오류 메시지가 발생할 때가 있다.bash: git: command not found 이럴 때는 당황 하지말고 우선 리눅스 패키지 관리 도구인 apt를 update해준 후, git을 설치해주면 된다.apt updateapt install -y git 여기서 -y 옵션은 설치 시 사용자에게 묻는 부분에 대해 모두 yes로 답하겠다는 옵션이다.해당 옵션을 사용하면, 설치가 끊기지 않고 한 번에 처리되어 편리하니 사용하는 것을 추천드린다.

오늘은 자주 발생하지만 간단한 오류인  오류에 대해 알아보고자 한다. 한글 파일을 데이터 프레임으로 불러오려다 보면 다음과 같은 오류가 발생하는 경우가 있다. 해당 오류는 한글 파일을 utf-8 형식으로 decoding하지 못해 발생하는 오류로 해결 방법은 간단하다.다음 코드처럼 파일을 불러올 때, encoding을 utf-8이 아닌 cp949로 변경해주면 된다.import pandas as pdpd.read_csv("./서울특별시 은평구_원룸 및 오피스텔 현황_20240704.csv", encoding='cp949')

Trasformer를 사용 중에 마주한 뜬금 없는 Internet connection 오류 "Connection error, and we cannot find the requested files in the cached path." ValueError: Connection error, and we cannot find the requested files in the cached path. Please try again or make sure your Internet connection is on. 다음 Github 답변을 통해 해결하였다.https://github.com/huggingface/transformers/issues/10067 "Connection error, and we cannot find..

당연하게도, 연구를 할 때 가장많이 쓰는 것 중 하나는 바로 Git clone이다. 그래야, 다른 연구자들의 코드를 내 환경에 copy해 직접 돌려보고, 이를 기반으로 새로운 실험도 할 수 있기 때문이다. 오늘의 오류는 이 git clone 과정에서 발생하는 오류이다. 평소와같이 git clone을 통해 repository를 복사했다. 복사 후 zip파일이 있어 unzip을 통해 압축을 풀려고 하는데 오류가 발생했다. file zip파일이름 명령어를 통해 zip파일 내용을 살펴보니 원래 있어야 할 파일들이 전부 다운로드 되지 못한 것을 알 수 있었다. 원인을 찾아보니 zip파일의 내용이 대용량이기 때문이었다. (50MB 이상 warning, 100MB 이상 Erorr 발생) 해결 방법은 고로 간단하다. ..