Изображения OpenCV для сыпучего сырья для FFmpeg

Ответ 1

Взял кучу возиться, но я понял это, используя FFmpeg rawvideo demuxer:

python capture.py | ffmpeg -f rawvideo -pixel_format bgr24 -video_size 640x480 -framerate 30 -i - foo.avi

Поскольку заголовок в необработанном видео, определяющий предполагаемые параметры видео, отсутствует, пользователь должен указать их, чтобы иметь возможность правильно декодировать данные:

• -framerate Установите частоту кадров входного видео. Значение по умолчанию - 25.
• -pixel_format Установите формат входного видеопотока. Значение по умолчанию - yuv420p.
• -video_size Задайте размер входного видео. По умолчанию нет значения, поэтому это значение должно быть указано явно.

И вот немного что-то дополнительное для опытных пользователей. То же самое, но с использованием VLC для потокового вывода в Интернете, формата Flash:

python capture.py | cvlc --demux=rawvideo --rawvid-fps=30 --rawvid-width=320 --rawvid-height=240  --rawvid-chroma=RV24 - --sout "#transcode{vcodec=h264,vb=200,fps=30,width=320,height=240}:std{access=http{mime=video/x-flv},mux=ffmpeg{mux=flv},dst=:8081/stream.flv}"

Изменить: Создайте веб-поток с помощью ffmpeg и ffserver

python capture.py | ffmpeg -f rawvideo -pixel_format rgb24 -video_size 640x480 -framerate 25 -i - http://localhost:8090/feed1.ffm

Ответ 2

Я в последнее время, но моя мощная библиотека VidGear Python позволяет автоматизировать процесс конвейеризации кадров OpenCV в FFmpeg на любой платформе. Вот основной пример Python:

# import libraries
from vidgear.gears import WriteGear
import cv2

output_params = {"-vcodec":"libx264", "-crf": 0, "-preset": "fast"} #define (Codec,CRF,preset) FFmpeg tweak parameters for writer

stream = cv2.VideoCapture(0) #Open live webcam video stream on first index(i.e. 0) device

writer = WriteGear(output_filename = 'Output.mp4', compression_mode = True, logging = True, **output_params) #Define writer with output filename 'Output.mp4' 

# infinite loop
while True:

    (grabbed, frame) = stream.read()
    # read frames

    # check if frame empty
    if not is grabbed:
        #if True break the infinite loop
        break


    # {do something with frame here}
        gray = cv2.cvtColor(frame, cv2.COLOR_BGR2GRAY)

    # write a modified frame to writer
        writer.write(gray) 

        # Show output window
    cv2.imshow("Output Frame", frame)

    key = cv2.waitKey(1) & 0xFF
    # check for 'q' key-press
    if key == ord("q"):
        #if 'q' key-pressed break out
        break

cv2.destroyAllWindows()
# close output window

stream.release()
# safely close video stream
writer.close()
# safely close writer

Источник: https://github.com/abhiTronix/vidgear/wiki/Compression-Mode:-FFmpeg#2-writegear-apicompression-mode-with-opencv-directly

Вы можете проверить VidGear Docs для более продвинутых приложений и функций.

Надеюсь, это поможет!

Ответ 3

Потребовал мне час, чтобы понять, что по умолчанию окна windows не являются бинарными. Это приводит к тому, что некоторые байты (в частности, новые строки) должны быть изменены/опущены, а результирующее видео медленно смещается, потому что размер кадра не является постоянным.

Чтобы обойти это, измененный файл python:

"""
videoCapture.py
"""
import cv2, sys
import time

if sys.platform == "win32":
    import os, msvcrt
    msvcrt.setmode(sys.stdout.fileno(), os.O_BINARY)

cap = cv2.VideoCapture(0)                    # 0 is for /dev/video0
while True :
    ret, frm = cap.read()
    sys.stdout.write( frm.tostring() )

Чтобы проверить, успешно ли выполняется необработанное видео, используйте ffplay. Убедитесь, что вы указали более высокую частоту кадров, чем то, что исходит от трубы, иначе видео начнет отставать

python videoCapture.py | ffplay -f rawvideo -pix_fmt bgr24 -s 640x480 -framerate 40 -i -

Ответ 4

Не уверен, что это для Mac OS или для python3, но мне нужно было привести кадр к строке, чтобы это работало для меня, вот так:

sys.stdout.write(str(frame.tostring()))