Все, что в дальнейшем будет происходить с GPU, мы отслеживаем через nvitop. Почему nvitop, а не nvidia-smi? Причина проста, как хозяйственное мыло. Можно, конечно, сделать watch -n 0.01 nvidia-smi, но нам милее, когда все раскрашено и само обновляется. Кроме того, nvitop удобно кастомизируется, а с помощью
встроенной Python-библиотеки можно сделать свой дашборд через запросы в API.
как всегда самые негативные комментарии не содержат конструктива
Увлекательное исследование) Пыталась как-то в универе сделать похожий проект в меньшем масштабе, тут конечно нагляднее.