Ffmpeg накладывает цвет фона / изображение с несколькими видео

[править 19 марта: добавлена ​​​​полная команда для нужд ОП]

Попробуй это:

ffmpeg -i one.mp4, -i two.mp4, \
  -f lavfi -i color=c=white:s=1920x1080:r=30 \
  -f lavfi -i color=c=white:s=400x400:r=1,\
              format=yuva444p,\
              geq='lum(X,Y)':'cb(X,Y)':'cr(X,Y)':\
                  a='if (lt((X-200)^2+(Y-200)^2,200^2),0,255)' \
  -filter_complex \
    [0:v]scale=980:-1[L0];\
    [1:v]crop=600:600:20:20,scale=400:-1[L1];\
    [L1][3:v]overlay=shortest=1[L2];\
    [2:v][L0]overlay=20:20:shortest=1[L3];\
    [L3][L2]overlay=W-420:H-420[vout] \
  -map [vout] -map 0:a output.mp4

• 1-й вход color (2:v): служит фоновым холстом. Его частота кадров r=30 будет выходной частотой кадров.
• 2-й ввод color (3:v): это круглая маска для обрезанного two.mp4. Обратите внимание, что я исправил фильтр geq, чтобы цвет сохранялся должным образом (мой предыдущий дубль был сделан для видео в градациях серого)
• one.mp4(0:v) масштабируется до окончательного размера -> [L0]
• two.mp4(1:v) сначала обрезается до квадрата, захватывая то, что должно быть показано в круглом вырезе. crop аргументы — это w:h:x:y, где x:y — координата верхнего левого угла. Затем обрезанный кадр масштабируется до конечного размера (400x400 в этом примере) -> [L1]
• Затем обрезанный и масштабированный two.mp4 ([L1]) маскируется вводом 3:v, чтобы показать его через круглый вырез с первым фильтром overlay.
• shortest=1 опция для overlay фильтров, которые заканчиваются, когда заканчивается видео (а не color источники, которые будут продолжаться вечно)
• Последние два фильтра overlay помещают 2 подготовленных видео в нужные места на холсте. При необходимости отрегулируйте его аргументы, чтобы изменить позиции
• Поскольку видеовходы SD (720p) преобразуются в видеовыход HD (1080p), масштабирование может не потребоваться. Если это так, удалите фильтры scale из графика фильтров. Для one.mp4 подходит первая цепочка фильтров, поэтому замените метку [L0] на [0:v] в измененном графике фильтров.

Это должно сработать. Как мы уже говорили ранее, когда вы запускаете его, убедитесь, что вы удалили все пробелы, новые строки и обратную косую черту в середине каждого выражения filtergraph.

[оригинал]

Подход, который я реализовал в прошлом, состоит в том, чтобы манипулировать маскирующим изображением с помощью фильтра geq. Вы можете попробовать следующее:

Для иллюстрации я использую прямоугольник с левым верхним углом в точке (10,10) и правым нижним углом в точке (1500 900) и круг с центром в точке (1700 950) и радиусом 100.

ffmpeg -i input.mp4 \
  -vf color=c=red:s=1920x1080:r=1:d=1,\
      format=rgba,\
       geq=lum='lum(X,Y)':a='if (between(X,10,1500)*between(Y,10,900)+lt((X-1700)^2+(Y-950)^2,100^2),0,255)',\
      [v:0]overlay \
      output.mp4

• color исходный фильтр генерирует только 1 кадр (1 кадр/с за 1 секунду) и overlay применяет его к каждому кадру входного видео
• color вывод не имеет альфа-канала, поэтому вам нужно конвертировать в pix_fmt
• geq устанавливает альфа-значения всех пикселей: если координата (X,Y) замаскирована (поэтому она присваивает альфа-значение 255 = непрозрачная) или True, если (X,Y) не замаскирована (альфа = 0, 100% прозрачность). См. Документация по выражениям FFmpeg.
• overlay получает входной видеопоток v:0 и накладывает на него выход geq фильтра.
• Поскольку график фильтра реализован с опцией вывода -vf, входной аудиопоток будет отображаться автоматически.

[редактировать однострочную версию]

ffmpeg -i input.mp4 -vf color=c=red:s=1920x1080:r=1:d=1,format=rgba,geq=lum='lum(X,Y)':a='if (between(X,10,1500)*between(Y,10,900)+lt((X-1700)^2+(Y-950)^2,100^2),0,255)',[v:0]overlay output.mp4