nvidia_smi, htop, iotop, nvtop, py-spy, strace,几个进程管理的命令行工具，提高训练效率。

1. nvida-smi

查看GPU的使用情况
CUDA之nvidia-smi命令详解

2. htop

进程管理 https://github.com/hishamhm/htop

3. iotop

硬盘I/O使用情况
Linux系统IO分析工具之iotop参数详解（查看IO占用）

4. nvtop

nivia top，GPU的任务监视器
https://github.com/Syllo/nvtop

5. py-spy

性能调试工具
Python性能调试工具py-spy使用

6. strace

strace跟踪进程中的系统调用