Рендеринг камеры буферизуется и тормозит при обработке больших видеофайлов с помощью FFmpeg

Отвечает ли это на ваш вопрос? Буферы рендеринга камеры и зависания при обработке больших видеофайлов с помощью FFmpeg

@Anonymous Coward Ссылка, которую вы упомянули, только что была задана мной, лол. Этот более конкретный, я хочу изучить ответы как с теоретической, так и с практической точки зрения.

Как поясняется тегом ffmpeg: Только вопросы о программном использовании библиотек, API или инструментов FFmpeg относятся к теме. Вопросы об интерактивном использовании инструмента командной строки следует задавать на superuser.com или video.stackexchange.com.

@Rob Спасибо, что сообщили мне об этом объяснении, никогда раньше этого не замечал.

Ах, на самом деле конвейер и ffmpeg cmd, о которых я упоминал выше, просто воспроизводят эту проблему, настоящие слишком сложны, чтобы их объяснять. Таким образом, их параметры не могут быть изменены. Я бы попробовал использовать nice или ionice, чтобы понизить приоритет ffmpeg. Спасибо за помощь!! @CodeCalf

я бы также посоветовал вам попытаться уменьшить буферы, если ваш процесс начинает использовать память подкачки, поскольку это уменьшит использование оперативной памяти, или вы можете просто увеличить оперативную память вашей системы. swap слишком медленный для кодирования/декодирования в реальном времени. также, если я могу спросить, почему вы не используете ffmpeg для обоих процессов или gst для обоих из них, есть ли особая причина для вас использовать как gst, так и ffmpeg?

да, я заметил, что есть процесс с именем kswapd0, что означает, что в то время ОС нужно было обмениваться страницами между оперативной памятью и диском, верно? И недавно я запутался в глубинной причине, почему кадры камеры отстают, когда большой файл обрабатывается ffmpeg, это вызвано «отсутствием доступной свободной памяти» или «все буферы (в пользовательском пространстве или ядре) в этот момент заняты ffmpeg "?

По сути, когда ваша оперативная память заполнена, тогда подкачка - это ваша оперативная память, поэтому проблема чтения процессором из подкачки чертовски медленная, даже если у вас есть диск nvme ... это всегда нехватка свободной памяти никогда не было проблем с буфером, никогда не приходилось даже увеличьте значения ОС по умолчанию, за исключением, возможно, буферов UDP, когда у меня было около 200 каналов живого транскодирования одновременно ... Но вы также декодируете в 4k, что может привести к проблеме с буфером, но не только с 2 или 3 потоками, вам придется по крайней мере коснуться 8 потоков, прежде чем такое бывает я думаю

спасибо, это действительно вдохновляет! Страницы, сгенерированные ffmpeg, помечаются как грязные страницы в памяти, а затем записываются обратно на жесткий диск. Таким образом, если грязные страницы ffmpeg заполняют всю доступную память в этот момент, другие процессы могут быть не в состоянии получить свободную память, что может привести к их зависанию. Поэтому я глубоко подозреваю, что причина задержки рендеринга камеры связана с нехваткой доступной памяти для хранения видеоданных, предоставляемых базовым драйвером камеры. Это правильно @CodeCalf?

Практически любое перекодирование/декодирование видео сильно зависит от оперативной памяти, поскольку ему требуется достаточно высокая пропускная способность для кодирования/декодирования и одновременной отправки кадра вперед. Это происходит не менее 25 раз в секунду, если не больше, в зависимости от частоты кадров видео, поэтому представьте себе потребность в памяти с низкой задержкой и высокой пропускной способностью, особенно если вы используете аппаратное ускорение, поскольку процессору необходимо копировать данные из оперативной памяти в видеопамять графического процессора, чтобы перенести работу на графический процессор, поэтому он также использует довольно много оперативной памяти в зависимости от буфера размеры, которые вы установили

Кроме того, это следует из того, что у вас достаточно ресурсов для обработки, так как если ваш процессор используется более чем на 85%, это создаст аналогичные проблемы, такие как заикание и общая нестабильность.