인공지능을 좋아하는 곧미남

진짜 어마어마한 삽질을 많이 했다!나의 문제는 이거였다.도커 컨테이너 run할때 -v로 dataset 공유 폴더를 연동했는데, 그게 작업 폴더 경로에 있었습니다. 근데 이 dataset 공유 폴더에 1000만개 이상의 wav데이터가 존재합니다. 그걸 pylance가 작업 폴더의 파일들을 읽어서 뭐 처리를 하는데, heap 메모리가 초과되어 oom 문제로 정상적으로 작동하지 않았던거죠.문제 파악 방법 아래 캡처본과 같이 VSC, Python 언어 서버에서 터미널-출력 내용을 보면, 아래와 같이 Error가 출력된다.Error 내용 : FATAL ERROR: Ineffective mark-compacts near heap limit Allocation failed - JavaScript heap out of..

오늘은 Window에서 WSL2를 활용해서 Ubuntu 환경에서 AI 개발을 위한 환경을 구축할때, Nvidia 라이브러리인 Nvidia-Driver, CUDA, CUDNN을 설치하는 방법을 정리해보겠습니다.   -목차-Nvidia-Driver 설치CUDA 설치CUDNN 설치시스템 환경 변수 추가설치 확인  - 사전 작업: nouveau 드라이버를 블랙리스트에 추가# nouveau 드라이버를 블랙리스트에 추가sudo bash -c "echo blacklist nouveau > /etc/modprobe.d/blacklist-nvidia-nouveau.conf"sudo bash -c "echo options nouveau modeset=0 >> /etc/modprobe.d/blacklist-nvidia-no..

CMD에서 "activate 가상환경명"으로 가상환경에 접근하여 아래 명령어를 입력하면, requirements.txt 텍스트 파일로 가상환경에 설치된 패키지들 목록 정보가 텍스트파일에 저장된다.pip freeze > requirements.txtrequirements.txt 파일안에 저장된 패키지들을 새롭게 생성한 가상환경에 설치하기 위해서는 아래 명령어를 입력한다.pip install -r requirements.txt

가상환경 구축할때, "pip install 패키지명"으로 원하는 패키지는 설치하는 경우가 많다. 그런데 원하는 패키지의 가장 최신 버전을 설치하는 것은 python version, os 종류, pip version에 따라서 달라진다. 내가 경험한 문제는 numpy, pytorch의 최신 버전을 설치하고 싶었지만, 설치할 수 있는 최신 버전이 없다는 오류가 발생하여 가상환경 구축에서 헤매었다. 그래서 처음에 시도한 것은 pip version을 업데이트이다. python -m pip install --upgrade pip 그런데도, 문제가 해결되지 않았다. 그래서 python version을 확인해보니 3.6으로 설치가 되어있었다. 나는 python version을 3.8로 새로운 가상환경을 설치했고, 최신..

오늘은 pycharm과 vsc의 ide에서 code를 section으로 나누어 실행할 수 있는 방법을 알아보겠습니다. 1. Pycharm cell mode plugins 2. VSC Python Interactive window 1. Pycharm cell mode plugins - 파이참에서 Settings - Plugins 에서 Pycharm cell mode를 검색하여 설치하면 사용자가 원하는 명령어를 설정하여 코드에서 cell section을 분할할 수 있습니다. - 사용 예시 SciView에서 Plot한 결과가 보여지고 Python Console에서는 실행된 코드가 실행된 상태를 보여줍니다. 2. VSC Python Interactive window - VSC에서는 https://code.vis..

안녕하십니까? 오늘은 Anaconda와 Pycharm을 이용한 가상환경 구축 설명드리겠습니다. 보통 Python을 사용할때 여러가지 원하는 패키지들을 어떤 공간에 저장하여 사용할 수 있는데요. 이때 그 공간을 가상환경이라 지칭하고 이 환경을 구축하는 방법을 소개하겠습니다. - 오늘의 내용 - 1. Anaconda 설치 2. Pycharm 설치 3. CMD에서 Anaconda 가상환경 생성 4. CMD에서 pip, anaconda 패키지 install, install 한 패키지 version update 5. Pycharm에서 가상환경 연결 및 installed 패키지 사용 6. cmd에서 생성한 가상환경 접속하기 1. Anaconda 설치 - 설치 url: https://www.anaconda.com/p..

안녕하세요? 오늘은 Visual Studio Code와 Anaconda 가상환경을 연동하여 Run을 할 수 있도록 셋팅해보겠습니다. 본론에 앞서 Visual Studio Code : VSC, Anaconda : conda로 별칭을 주어 사용하도록 하겠습니다. VSC와 conda를 연동할때 많이 헤매었는데요. 아주 쉽게 간략하게 정리해 드리겠습니다. 오늘의 내용은 아래 목차와 같습니다. 1. conda와 VSC를 다운로드 2. ANACONDA에서 가상환경 생성 3. python과 code runner를 다운 4. conda 가상환경에 접근 5. 가상환경 접근 경로를 설정 6. 가상환경 접근 1. conda와 VSC를 다운로드 아나콘다 도메인 www.anaconda.com/products/..