Показать какой GPU выполняет какие команды
Я хотел бы запросить команду, которая выполняется на каждом графическом процессоре.
Когда я бегу nvidia-smi
это только показывает python
как Process name
,
+-----------------------------------------------------------------------------+
| NVIDIA-SMI 390.67 Driver Version: 390.67 |
|-------------------------------+----------------------+----------------------+
| GPU Name Persistence-M| Bus-Id Disp.A | Volatile Uncorr. ECC |
| Fan Temp Perf Pwr:Usage/Cap| Memory-Usage | GPU-Util Compute M. |
|===============================+======================+======================|
| 0 GeForce GTX TIT... Off | 00000000:04:00.0 Off | N/A |
| 22% 21C P8 15W / 250W | 125MiB / 12212MiB | 0% Default |
+-------------------------------+----------------------+----------------------+
| 1 GeForce GTX TIT... Off | 00000000:05:00.0 Off | N/A |
| 22% 25C P8 14W / 250W | 11MiB / 12212MiB | 0% Default |
+-------------------------------+----------------------+----------------------+
| 2 GeForce GTX TIT... Off | 00000000:08:00.0 Off | N/A |
| 22% 24C P8 14W / 250W | 11MiB / 12212MiB | 0% Default |
+-------------------------------+----------------------+----------------------+
| 3 GeForce GTX TIT... Off | 00000000:09:00.0 Off | N/A |
| 28% 68C P2 204W / 250W | 4996MiB / 12212MiB | 94% Default |
+-------------------------------+----------------------+----------------------+
| 4 GeForce GTX TIT... Off | 00000000:85:00.0 Off | N/A |
| 28% 68C P2 100W / 250W | 6138MiB / 12212MiB | 8% Default |
+-------------------------------+----------------------+----------------------+
| 5 GeForce GTX TIT... Off | 00000000:86:00.0 Off | N/A |
| 22% 47C P2 75W / 250W | 12145MiB / 12212MiB | 30% Default |
+-------------------------------+----------------------+----------------------+
| 6 GeForce GTX TIT... Off | 00000000:89:00.0 Off | N/A |
| 25% 66C P2 222W / 250W | 4828MiB / 12212MiB | 95% Default |
+-------------------------------+----------------------+----------------------+
| 7 GeForce GTX TIT... Off | 00000000:8A:00.0 Off | N/A |
| 28% 67C P2 123W / 250W | 4164MiB / 12212MiB | 43% Default |
+-------------------------------+----------------------+----------------------+
+-----------------------------------------------------------------------------+
| Processes: GPU Memory |
| GPU PID Type Process name Usage |
|=============================================================================|
| 0 1603 C /usr/bin/python 114MiB |
| 3 31114 C python 4985MiB |
| 4 13338 C python 6127MiB |
| 5 32521 C python 12132MiB |
| 6 19888 C python 4817MiB |
| 7 16457 C python 4153MiB |
+-----------------------------------------------------------------------------+
То, что я хотел бы видеть, это что-то вроде python train.py
, python train_v2.py
, python train_v2.py
, Не только запущенная программа, но и имя файла, с которым она работает. Как мне совместить htop
а также nvidia-smi
?