【英伟达】高负载下nvidia-smi对性能的影响
最近在测试一个T4 gpu执行性能的问题，通过nvidia-smi来对显卡的运行效率和状态进行收集和统计。
在使用的过程中发现，该工具不同参数下对性能的影响不同。负载情况如下图。
任务为20个720p 15fps的视频转码+推理任务。相当于每秒钟执行4500次解码+4500次编码+4500次推理。
在执行nvidia-smi dmon时，发现性能影响很小；执行nvidia-smi pmon时，性能影响相对明显。
由于没有找到比较详细的信息和解释，初步推测和性能采样有关。pmon模式下，需要对每个进程做采样，会降低一些执行性能。