Почему графический процессор nvidia-smi редко достигает 100%?

Я зарегистрировал использование GPU своих 3-х графических процессоров (GeForce GTX Titan X) в течение 5 дней с nvidia-smi каждые 10 секунд. Все графические процессоры были использованы: я считаю 1307 случаев 99 % а всего 8 случаев 100 % . Почему графический процессор nvidia-smi редко достигает 100%?

введите описание изображения здесь

введите описание изображения здесь

Другой пример из https://openai.com/blog/infrastructure-for-deep-learning/ :

введите описание изображения здесь