대용량 데이터를 효율적으로 관리하기 위한 mxnet 라이브러리는, rec 형태로 된 데이터 셋을 분석할 때 필수적인 라이프러리다. 하지만, m1 mac에서 mxnet 라이브러리를 사용하면 에러가 발생하기 때문에 해결책을 정리하려고 한다. 1. mxnet 깃 클론 && cmake 설정 brew install cmake ninja ccahe opencv git clone --recursive https://github.com/apache/incubator-mxnet.git mxnet cd mxnet cp config/drawin.cmake config.cmake 깃 클론 이후, config.cmake 옵션에서 opencv 경로도 확인 후 수정하도록 하자. 2. 빌드 mkdir build && cd build..
파이썬 문법은 세미콜론(;)을 사용하지 않기 때문에 간격(탭, 스페이스) 역할이 매우 중요하다. 해당에러는 스페이스, 탭이 호환되지 않아서 생기는 문제다. 에러가 발생하는 부분의 공백을 지우고 다시 처리해주면 된다.
RuntimeError: element 0 of tensors does not require grad and does not have a grad_fn 파이토치의 기울기 계산 기능(required_grad)을 끈(False) 상태인 tensor로 기울기 계산을 할 경우 발생하는 에러다. 파이토치에서는 required_grad의 상태가 True인 tensor에 대해서만 grad_fn을 생성하고, grad_fn을 통해 자동 미분/역전파 과정을 수행한다. 해결 방법 1. tensor를 생성할 때, requires_grad=True로 명시 example_tensor = torch.tensor([1.,2.,3.],requires_grad=True) 2. tensor 생성 후, x.requires_grad(True..
파이토치(pytorch)를 주로 사용할 때는 CPU자원을 사용하거나 GPU 장비를 사용합니다. 하지만, Apple Silicon 맥북은 Nvidia-GPU 와는 다른 장비구조를 가지고 있습니다. 그래서 nvidia-gpu 사용하는 것과 동일하게 사용하면 에러가 발생하기 때문에, 파이토치를 apple silicon 맥북에서 사용하는 방법을 알아보려고 합니다. Conda 설치 우선 개발 환경을 셋팅을 위해 conda를 설치해야 합니다. wget https://repo.anaconda.com/miniconda/Miniconda3-latest-MacOSX-arm64.sh bash Miniconda3-latest-MacOSX-arm64.sh Pytorch conda 버전 설치 그 후, conda 환경 + appl..
모델의 파라미터 개수를 확인하는 방법은 크게 두가지가 있습니다 1. model.parameters() 함수를 이용한 방법 아래는 예시 코드입니다. import torchvision.models import * if __name__ == '__main__': model = vgg11() # 학습 가능한 파라미터 개수 trainable_parameters = sum(p.numel() for p in model.parameters() if p.requires_grad) # 전체 파라미터 개수 total_parameters = sum(p.numel() for p in model.parameters()) 2. torchsummary torchsummary 라이브러리를 이용한 방법인데, 해당 방법은 가끔 작동이 안..
albumentations 라이브러에서 발생하는 문제, 버그가 발생하지 않는 버전으로 재설치 한다. 커맨드는 아래와 같다. pip install albumentations==1.0.3
