pytorch 기반으로 간단한 MLP 모델을 만들었고 가장 손실함수값이 적은 모델을 저장하는 파일 경로를 설정한 뒤 저장할 수 있도록 만들었다. N 크기의 데이터에 대해서 100000 epochs 를 학습하는 과정을 k번 반복했는데 임의의 k번째 n epoch 에서 자꾸 모델이 저장된 파일을 열 수 없다는 runtimeerror 가 발생했다. 아래 에러 메세지를 검색했고 다행히 비슷한 문제를 겪은 경우를 발견할 수 있었다. RuntimeError: File MODEL_SAVE_PATH.pth cannot be opened. https://stackoverflow.com/questions/74925031/runtime-error-while-saving-a-pytorch-model-file-path-to-b..
sudo란? superuser do 에서 유래되었으며, 유닉스/리눅스 계열 운영 체제에서 다른 사용자의 보안 권한(보통 슈퍼유저)로서 프로그램을 구동할 수 있도록 하는 프로그램 window에서 sudo 설치하는 방법 1. chocolately 설치 2. choco install sudo https://whitepro.tistory.com/622 [TIL]Windows Chocolatey, sudo 명령어 1. 필요성 apt-get 등 Mac OS에서 사용하는 패키지 설치 등을 할 수 있도록 해주는 '패키지 관리자' 프로그램이 'Chocolatey'이다. sudo는 windows의 '관리자 권한으로 실행' 이다. 예를 들어 cmd 창을 그냥 실 whitepro.tistory.com 과제 진행 중 문제점 :..
MLOps 1) 머신러닝 이론 및 알고리즘 모델 학습과 서빙 모델 최적화 2) 데이터 엔지니어링 데이터 전처리 대용량 데이터 처리 데이터 파이프라인 3) DevOps CI/CD 구성 쿠버네티스/컨테이너 고가용성 운영 전략 데이터 파이프라인의 유형 a. 일괄처리(batch processing) b. 스트리밍 데이터(streaming data) CI / CD Continuous Integration / Continuous Delivery 데이터 파이프라인이란? | IBM 데이터 파이프라인이 단순 분석과 복잡한 분석 모두를 위한 기반을 어떻게 제공하는지 알아봅니다. www.ibm.com 데이터 파이프라인이란 무엇인가요? - 데이터 파이프라인 설명 - AWS 데이터 파이프라인은 분석을 위해 엔터프라이즈 데이터를..
pip uninstall pandas pip install pandas --upgrade pip3 uninstall xgboost pip3 install xgboost ERROR: pip's dependency resolver does not currently take into account all the packages that are installed. This behaviour is the source of the following dependency conflicts. pdpbox 0.3.0 requires xgboost>=1.7.1, which is not installed. http://ngmsoftware.com/bbs/board.php?bo_table=study&wr_id=704&sst=w..
나도 이제 백준 티어를 높여보고 싶어서 처음으로 파이썬으로 문제 풀이하고 있는데 간단한 문제임에도 불구하고 자꾸 틀리거나 RuntimeError 생겨서 내가 어떤걸 잘못 하고 있는지 구글링해봤다 공통적으로 소스코드는 아래와 같았다. a, b, c = map(int, input().split()) print(a+b+c) 일단, 사용자가 입력하도록 만들어야 한다. 그리고, 다들 map 함수를 사용했다. 그래서, 입력을 input()으로 바꾸고 코드는 그대로 작성해서 제출했더니 이번에는 NameError 가 생겨서 아, pandas 라이브러리 때문이구나 를 깨닳았다. 평소에 업무할 때 습관처럼 판다스랑 데이터프레임 사용이 익숙해서 아래와 같이 작성 및 제출했더니 문제가 된 모양이다. 그래서 import pan..