Динамическое обрезка FFmpeg с использованием правильного синтаксиса sendcmd?

Итак, единственная команда, которая у меня пока работает, взята из https://video.stackexchange.com/posts/19403/revisions, это:

ffmpeg -i in.mp4 -filter_complex_script file.txt -map "[out]" output.mp4

с file.txt вот так

nullsrc=WxH:r=FPS[cv];
[cv][0]overlay=-X0:-Y0:shortest=1:enable='eq(n\,0)'[b0];
[b0][0]overlay=-X1:-Y1:shortest=1:enable='eq(n\,1)'[b1];
[b1][0]overlay=-X2:-Y2:shortest=1:enable='eq(n\,2)'[b2];
...
[bm-1][0]overlay=-Xm:-Ym:shortest=1:enable='eq(n\,m)'[out]

для обрезки видео 1920x1080, 5 с, 30 кадров в секунду до видео 606x1080 требуется около 40 секунд (в Google Colab, поэтому процессор низкого уровня и без графического процессора). НО это также вызывает ошибки «Недостаточно памяти», как только необходимо обрезать более 900 кадров на компьютере с ОЗУ 12 ГБ (см. https://superuser.com/questions/1839180/ffmpeg-out-of-memory-issues -with-filter-complex-script).

Еще я попробовал сначала разложить видео на каждый кадр, обрезать каждый кадр и собрать видео заново. Вот код:

def decompose_video(video_path, frames_dir):
    if not os.path.exists(frames_dir):
        os.makedirs(frames_dir)
    command = [
        'ffmpeg', '-i', video_path, 
        os.path.join(frames_dir, 'frame_%04d.png')
    ]
    subprocess.run(command, check=True)

def read_crop_values(crop_file):
    with open(crop_file, 'r') as file:
        crops = [line.strip().split(',') for line in file]
    return crops

def apply_crop(frames_dir, crops):
    cropped_frames_dir = frames_dir + '_cropped'
    if not os.path.exists(cropped_frames_dir):
        os.makedirs(cropped_frames_dir)
    
    for i, crop in enumerate(crops, 1):
        x, y, w, h = crop
        input_frame = os.path.join(frames_dir, f'frame_{i:04d}.png')
        output_frame = os.path.join(cropped_frames_dir, f'frame_{i:04d}.png')
        command = [
            'ffmpeg', '-i', input_frame,
            '-filter:v', f'crop = {w}:{h}:{x}:{y}',
            output_frame
        ]
        subprocess.run(command, check=True)

def recreate_video(cropped_frames_dir, output_video_path):
    command = [
        'ffmpeg', '-y', '-loglevel', 'verbose', '-r', '29.97', '-f', 'image2', '-i', 
        os.path.join(cropped_frames_dir, 'frame_%04d.png'),
        '-vcodec', 'libx264', '-crf', '23', '-pix_fmt', 'yuv420p',
        output_video_path
    ]
    try:
        subprocess.run(command, check=True, stdout=subprocess.PIPE, stderr=subprocess.PIPE)
    except subprocess.CalledProcessError as e:
        print("FFmpeg failed with error:")
        print(e.stderr.decode()) 

video_path = 'input.mp4'
frames_dir = 'frames'
crop_file = 'crop_values.txt'
output_video_path = 'output.mp4'

decompose_video(video_path, frames_dir)
crops = read_crop_values(crop_file)
apply_crop(frames_dir, crops)
recreate_video(frames_dir + '_cropped', output_video_path)

и в crop_values.txt просто ставишь x, y, w, h:

0,0,606,1080
8,0,606,1080
17,0,606,1080

Это тоже работает, но немного медленнее (1 минута 40 минут для того же видео).

проверенный вариант:

#!/bin/bash
echo "#test crop
0 crop w 607, crop h 1080, crop x 0, crop y 0;
1 crop x 200;
2 crop x 400;
3 crop x 600;
" > coordinates.txt
ffmpeg -loop 1 -t 4 -r 30000/1001 -i "1920x1080.jpg" -filter_complex "sendcmd=f=coordinates.txt,crop" /tmp/out.mp4 -y
ffplay /tmp/out.mp4

1. не добавляйте -pix_fmt ... эта опция сбрасывает выходное разрешение на входное.