docker: Error response from daemon: could not select device driver with capabilities: [[gpu]]

정확한 원인은 모르겠으나(nvidia-smi, nvcc -V 모두 문제 없이 출력),

실행 중인 docker container가 모두 죽어서 다음 명령어로 container를 시작했을 때, 

docker start {container 명}

다음의 에러가 발생했다.

Error response from daemon: could not select device driver "" with capabilities: [[gpu]]
Error: failed to start containers: testing

원인은 모르겠으나 다음의 nvidia-container-toolkit을 설치하면, 해결이 가능하다. 다음의 코드로 nvidia-container-toolkit을 설치하자.

$ distribution=$(. /etc/os-release;echo $ID$VERSION_ID) \
   && curl -s -L https://nvidia.github.io/nvidia-docker/gpgkey | sudo apt-key add - \
   && curl -s -L https://nvidia.github.io/nvidia-docker/$distribution/nvidia-docker.list | sudo tee /etc/apt/sources.list.d/nvidia-docker.list
$ sudo apt-get update && sudo apt-get install -y nvidia-container-toolkit

설치가 정상적으로 되었으면 docker 시스템을 재 기동한다.

$ sudo systemctl restart docker

간단하게 error를 해결할 수 있다.