분류 전체보기209 RuntimeError: cuDNN error: CUDNN_STATUS_INTERNAL_ERROR PyTorch lightning 런타임 에러 (해결) 에러 상황 darts 라는 시계열 데이터를 위한 라이브러리에서 RNN 모델을 사용하기 위해 model.fit을 했는데 에러가 발생함 - 아무리 생각해도, cuda-cudnn이 꼬였다면 pytorch, tensorflow로 모델을 만들어 학습했을 때도 안될 거 같은데 잘 되었다. 그래서 이건 아닌 것 같다는 결론 - torch는 gpu를 인식하는가? 너무 잘 한다. 확인 방법은 여기에 기존 라이브러리 버전 $ pip list | grep torch pytorch-lightning 2.0.6 torch 2.0.1 torchmetrics 1.0.2 $ pip list | grep cuda nvidia-cuda-cupti-cu11 11.7.101 nvidia-cuda-nvrtc-cu11 11.7.99 nvidi.. 2023. 8. 21. pip install 설치 가능한 버전 찾기 라이브러리명 뒤에 버전을 잘못 명시해주면 찾아준다 pip install nvidia-cudnn-cu11==? ERROR: Could not find a version that satisfies the requirement nvidia-cudnn-cu11==? (from versions: 0.0.1.dev5, 8.5.0.96, 8.6.0.163, 8.7.0.84, 8.8.0.121, 8.8.1.3, 8.9.0.131, 8.9.1.23, 8.9.2.26, 8.9.4.25) ERROR: No matching distribution found for nvidia-cudnn-cu11==? 2023. 8. 21. OpenAI API에서 사용하는 jsonl 파일 읽고 쓰기 OpenAI의 Fine-tuning API를 사용하려면 jsonl 확장자로 데이터를 준비해야 한다. 간단히 말하면 jsonl은 key, value 형태의 json을 개행문자(\n)로 구분해놓은 파일이다. openai 파인 튜닝 예제 데이터를 보면, prompt, completion이라는 key, value로 구성된 json이 하나의 샘플이며, 이 샘플을 나열할 때에는 개행문자를 통해 구분되게끔 하였다. {"prompt": "", "completion": ""} {"prompt": "", "completion": ""} {"prompt": "", "completion": ""} ... from openai platform 위와 같은 파일을 읽고 쓰려면, python의 I/O와 json 라이브러리를 적절히 .. 2023. 8. 17. conda 가상환경명 재설정 (rename) conda rename -n 참고: https://stackoverflow.com/questions/42231764/how-can-i-rename-a-conda-environment 2023. 8. 16. [도서리뷰] AI 엔지니어가 읽은 "직장인의 교양 데이터 과학" 목차 도서 정보 제목: 직장인의 교양 데이터 과학 저자: 타카하시 이치로 대상: 전문적인 데이터 과학자..가 아닌 일반적인 비즈니스맨 내용 왜 지금 시점에 데이터 과학이 필요한지, 데이터 과학이 무엇인지 데이터 과학의 장단점, 실현 과정 데이터 과학 사례 데이터 과학이 만드는 미래 느낀점 추천 대상 그간 나는 "비전공자"의 입장에서 데이터 과학에 가까이 다가가기 위해서, 부족한 기초 이론들과 새롭게 등장하는 기술을 따라가려 부단히 노력하였다. 하지만, 막상 데이터로 어떤 문제를 해결할 수 있을지에 대해서는 많이 생각해보지 못한 것 같다. 나와 비슷한 시각으로 데이터 과학을 접해온 사람이라면, 한 번쯤은 읽어보아도 좋을 것 같다. 걸린 시간 자기전에 잠깐 짬내 읽었더니 약 4일 정도 걸렸다. 시간을 좀 더.. 2023. 8. 12. [논문리뷰] NCF, 2017 이 글은 2017 발표된 Neural Collaborative Filtering 논문을 리뷰한 글입니다. 논문 구현이 궁금하다면 논문 구현 포스팅을 참고하시길 바랍니다. 목차 💡 Paper Information. 원제: Neural Collaborative Filtering 발행 연도: 2017 저자 정보: National University of Singapore, Columbia University, Shandong University, and Texas A&M University 저널 정보: WWW '17, Perth, Australia, April 03-07, 2017. 인용수: 5262회 (23.08.10 기준) 논문 링크: https://arxiv.org/abs/1708.05031 소스코드: .. 2023. 8. 10. 이전 1 ··· 6 7 8 9 10 11 12 ··· 35 다음
