UnicodeDecodeError 'utf-8'
Errors2024. 7. 7. 14:41UnicodeDecodeError 'utf-8'

오늘은 자주 발생하지만 간단한 오류인  오류에 대해 알아보고자 한다. 한글 파일을 데이터 프레임으로 불러오려다 보면 다음과 같은 오류가 발생하는 경우가 있다. 해당 오류는 한글 파일을 utf-8 형식으로 decoding하지 못해 발생하는 오류로 해결 방법은 간단하다.다음 코드처럼 파일을 불러올 때, encoding을 utf-8이 아닌 cp949로 변경해주면 된다.import pandas as pdpd.read_csv("./서울특별시 은평구_원룸 및 오피스텔 현황_20240704.csv", encoding='cp949')

Transformer Error - Internet connection
Errors2024. 2. 26. 16:02Transformer Error - Internet connection

Trasformer를 사용 중에 마주한 뜬금 없는 Internet connection 오류 "Connection error, and we cannot find the requested files in the cached path." ValueError: Connection error, and we cannot find the requested files in the cached path. Please try again or make sure your Internet connection is on. 다음 Github 답변을 통해 해결하였다.https://github.com/huggingface/transformers/issues/10067 "Connection error, and we cannot find..

git-lfs 설치 Error
Errors2024. 2. 18. 22:05git-lfs 설치 Error

당연하게도, 연구를 할 때 가장많이 쓰는 것 중 하나는 바로 Git clone이다. 그래야, 다른 연구자들의 코드를 내 환경에 copy해 직접 돌려보고, 이를 기반으로 새로운 실험도 할 수 있기 때문이다. 오늘의 오류는 이 git clone 과정에서 발생하는 오류이다. 평소와같이 git clone을 통해 repository를 복사했다. 복사 후 zip파일이 있어 unzip을 통해 압축을 풀려고 하는데 오류가 발생했다. file zip파일이름 명령어를 통해 zip파일 내용을 살펴보니 원래 있어야 할 파일들이 전부 다운로드 되지 못한 것을 알 수 있었다. 원인을 찾아보니 zip파일의 내용이 대용량이기 때문이었다. (50MB 이상 warning, 100MB 이상 Erorr 발생) 해결 방법은 고로 간단하다. ..

image