rec_vcodec Error Code: NS_ERROR_DOM_MEDIA_DEMUXER_ERR (0x806e000c)

[Алексей]

Использую USB камеру:

ioctl: VIDIOC_ENUM_FMT
        Type: Video Capture

        [0]: 'BA81' (8-bit Bayer BGBG/GRGR)
                Size: Stepwise 32x32 - 1280x1024 with step 2/2

При включенном режиме decode_video ни один из предлагаемых форматов не поддерживается ни одним браузером. rec_vcodec предлагает только mpeg4, flv, mgpeg, это делает невозможным просмотр архива в любом браузере с ошибкой "Видео в поддерживаемом формате не найдено", при этом во внешнем плеере файлы проигрываются.

Имеется ли возможность каким то образом включить h264 в rec_vcodec ?

[Andrey Nikitin]

Алексей писал(а):

> При включенном режиме decode_video ни один из предлагаемых форматов не
> поддерживается ни одним браузером. rec_vcodec предлагает только mpeg4, flv,
> mgpeg, это делает невозможным просмотр архива в любом браузере с ошибкой
> "Видео в поддерживаемом формате не найдено", при этом во внешнем плеере
> файлы проигрываются.

Midori в Debian/Ubuntu попробуйте. MPEG4(он же h263*) в mp4/mov вроде играл.

> Имеется ли возможность каким то образом включить h264 в rec_vcodec ?

avregd не кодирует в h264 по 2 причинам:
1) cpu-шный способ невероятно медленный, а кодирование с использованием
аппаратных возможностей видекарт в большинстве случаев чем-то ограниченное
(кол-во каналов, разрешение и т.п.) и/или не универсальное решение (зависит от производителя и серии видеокарт).
2) по лицензионным соображениям (MPEG LA).

Далее читайте только если вы программист или ИТ-спец. с навыками работы в GNU/Linux.

Однако сторонним приложениями (gstreamer,vlc,ffmpeg) можно попытаться
сделать кодирование в h264 (желат. с исп. видеокарты) и подать на вход avregd как:
1) video4linux loopback устройство,
или
2) rtsp источника (как сетевую камеру).

Готовых решений у нас нет, но материалов в сети предостаточно.
Рекомендуем начать с Gstreamer, т.к. в составе AVReg есть модуль avreg-gst-rtsp-proxy,
который можно настроить на приём (условно) произвольного конвейера (pipeline).
Для начала, просто попробуйте записывать видео в файл с кодированием в h264.
Оцените стабильность способа и нагрузку на процессор.
Что-то может мы подскажем.

[Алексей]

Попробовал писать в файл, получил цпу оверлоад.

gst-launch-1.0 v4l2src device=/dev/video0 ! video/x-bayer,format=bggr,width=1280,height=1024,framerate=10/1 ! bayer2rgb ! videoconvert ! x264enc ! filesink location='out.mp4'

Буду пробовать оптимизировать, как завернуть через пайпы пока не понятно.

понедельник, 21 февраля 2022 г. в 15:41:38 UTC+3, avreg-support:

[Andrey Nikitin]

В Mon, 21 Feb 2022 07:49:29 -0800 (PST)
Алексей <i...@spetslit.ru> пишет:

> gst-launch-1.0 v4l2src device=/dev/video0 !
> video/x-bayer,format=bggr,width=1280,height=1024,framerate=10/1 !
> bayer2rgb ! videoconvert ! x264enc ! filesink location='out.mp4'

Видеокартой нужно. VAAPI (Intel), NVENC/CUDA(Nvidia) и для AMD что-то есть.
Всё оч. капризно, правда.

> Буду пробовать оптимизировать, как завернуть через пайпы пока не
> понятно.

В настройках проксика (AVReg) есть поле, потом подскажем,
пайплайн стабильно работающий должен быть.

[Алексей]

Задействовал акселерацию, нагрузка упала до 12% качество максимальное.

gst-launch-1.0 v4l2src device=/dev/video0 ! video/x-bayer,format=bggr,width=1280,height=1024,framerate=10/1 ! bayer2rgb ! videoconvert ! vaapih264enc ! filesink location=test.mp4

Остался вопрос стыковки с avreg

понедельник, 21 февраля 2022 г. в 19:02:34 UTC+3, avreg-support:

[Алексей]

сделать кодирование в h264 (желат. с исп. видеокарты) и подать на вход avregd как:

1) video4linux loopback устройство

modprobe v4l2loopback video_nr=1 exclusive_caps=1

gst-launch-1.0 v4l2src device=/dev/video0 ! video/x-bayer,format=bggr,width=1280,height=1024,framerate=10/1 ! bayer2rgb ! videoconvert ! vaapih264enc ! v4l2sink device=/dev/video1

v4l_dev** в avreg не отображает виртуальные устройства. Это возможно ? В идеале обойтись без rtsp-proxy.

понедельник, 21 февраля 2022 г. в 19:40:53 UTC+3, Алексей:

[Andrey Nikitin]

Алексей писал(а):

> v4l_dev** в avreg не отображает виртуальные устройства. Это возможно ? В
> идеале обойтись без rtsp-proxy.

Виноват, дезинформировал, avreg вряд ли захватит h264 по video4linux.
Сейчас из не raw-кодеков точно поддерживается захват MJPG,
но h264 сложнее, там фреймы разные, метаданные и т.п.
В след. версии (7.0) посмотрим что можно сделать.

Так что, рабочий вариант один - rtsp прокси, см.
Наблюдение - трансляция по сети - rtsp proxy - Gstreamer
gstprox_src_launch
В описании как раз пример с v4l2src.

[Andrey Nikitin]

Алексей писал(а):

> gst-launch-1.0 v4l2src device=/dev/video0 !
> video/x-bayer,format=bggr,width=1280,height=1024,framerate=10/1 ! bayer2rgb

> ! videoconvert ! vaapih264enc ! video/x-h264, mapping=/stream1 ! rtspsink
> service=5000
> Ошибочный конвейер: элемент «rtspsink» не найден

gstprox_src_launch = ( v4l2src device=/dev/video0 !
video/x-bayer,format=bggr,width=1280,height=1024,framerate=10/1 ! bayer2rgb
! videoconvert ! vaapih264enc ! rtph264pay name=pay0 pt=96 )

[Алексей]

Feb 22 12:38:51 avreg systemd[1]: Starting AVReg daemon...
Feb 22 12:38:51 avreg avregd: cam[default]: reading default config template to all cameras
Feb 22 12:38:51 avreg avregd: reading default camera database config
Feb 22 12:38:51 avreg avregd: reading #1 camera database config
Feb 22 12:38:51 avreg avregd: cam[1]: param "InetCam_IP" = "127.0.0.1"
Feb 22 12:38:51 avreg avregd: cam[1]: param "InetCam_rtsp_port" = "1554"
Feb 22 12:38:51 avreg avregd: cam[1]: param "allow_local" = "1"
Feb 22 12:38:51 avreg avregd: cam[1]: param "gstprox_src_launch" = "v4l2src device=/dev/video0 ! video/x-bayer,format=bggr,width=1280,height=1024,framerate=10/1 ! bayer2rgb ! videoconvert ! vaapih264enc ! rtph264pay name=pay0 pt=96"
Feb 22 12:38:51 avreg avregd: cam[1]: param "rec_mode" = "1"
Feb 22 12:38:51 avreg avregd: cam[1]: param "rtsp_play" = "/avreg-media/1/media.amp"
Feb 22 12:38:51 avreg avregd: cam[1]: param "text_left" = "Камера_1"
Feb 22 12:38:51 avreg avregd: cam[1]: param "use_rtsp_proxy" = "gstreamer"
Feb 22 12:38:51 avreg avregd: cam[1]: param "v4l_pipe" = "/dev/video14"
Feb 22 12:38:51 avreg avregd: cam[1]: param "video_src" = "rtsp"
Feb 22 12:38:51 avreg avregd: cam[1]: param "work" = "1"
Feb 22 12:38:51 avreg avregd: cam[1]: value of "text_left" has been change to `Kamera_1'
Feb 22 12:38:51 avreg avregd: msgbus: avreg-gst-rtsp-proxy: started (#1/1), pid=2380, fd=15
Feb 22 12:38:51 avreg avregd[2378]: cam[default]: params not found, empty database?
Feb 22 12:38:51 avreg systemd[1]: Started AVReg daemon.
Feb 22 12:38:52 avreg avregd: cam[1]: capture (V) failed: Server returned 404 Not Found
Feb 22 12:39:02 avreg avregd: critical error: unable to capture any video/audio frames during the last 10 seconds
Feb 22 12:39:18 avreg systemd[1]: Starting Clean php session files...
Feb 22 12:39:18 avreg systemd[1]: phpsessionclean.service: Succeeded.
Feb 22 12:39:18 avreg systemd[1]: Finished Clean php session files.

Feb 22 12:39:22 avreg avregd: critical error: unable to capture any video/audio frames during the last 10 seconds

Чего то не хватает, вроде все прописал.

вторник, 22 февраля 2022 г. в 12:15:10 UTC+3, avreg-support:

[Andrey Nikitin]

Алексей писал(а):

> Feb 22 12:38:51 avreg avregd: cam[1]: param "gstprox_src_launch" = "v4l2src
> device=/dev/video0 !
> video/x-bayer,format=bggr,width=1280,height=1024,framerate=10/1 ! bayer2rgb
> ! videoconvert ! vaapih264enc ! rtph264pay name=pay0 pt=96"

gstprox_src_launch = ( pipeline )
^^ ^^

[Алексей]

Feb 22 13:10:31 avreg systemd[1]: Starting AVReg daemon...
Feb 22 13:10:31 avreg avregd: cam[default]: reading default config template to all cameras
Feb 22 13:10:31 avreg avregd: reading default camera database config
Feb 22 13:10:31 avreg avregd: reading #1 camera database config
Feb 22 13:10:31 avreg avregd: cam[1]: param "InetCam_IP" = "127.0.0.1"
Feb 22 13:10:31 avreg avregd: cam[1]: param "allow_local" = "1"
Feb 22 13:10:31 avreg avregd: cam[1]: param "gstprox_src_launch" = "( v4l2src device=/dev/video0 video/x-bayer,format=bggr,width=1280,height=1024,framerate=10/1 ! bayer2rgb ! videoconvert ! vaapih264enc ! rtph264pay name=pay0 pt=96 )"
Feb 22 13:10:31 avreg avregd: cam[1]: param "rec_mode" = "1"
Feb 22 13:10:31 avreg avregd: cam[1]: param "rtsp_play" = "/avreg-media/1/media.amp"
Feb 22 13:10:31 avreg avregd: cam[1]: param "text_left" = "Камера_1"
Feb 22 13:10:31 avreg avregd: cam[1]: param "use_rtsp_proxy" = "gstreamer"
Feb 22 13:10:31 avreg avregd: cam[1]: param "v4l_pipe" = "/dev/video14"
Feb 22 13:10:31 avreg avregd: cam[1]: param "video_src" = "rtsp"
Feb 22 13:10:31 avreg avregd: cam[1]: param "work" = "1"
Feb 22 13:10:31 avreg avregd: cam[1]: value of "text_left" has been change to `Kamera_1'
Feb 22 13:10:31 avreg avregd: msgbus: avreg-gst-rtsp-proxy: started (#1/1), pid=3515, fd=15
Feb 22 13:10:31 avreg avregd[3513]: cam[default]: params not found, empty database?
Feb 22 13:10:31 avreg systemd[1]: Started AVReg daemon.
Feb 22 13:10:33 avreg avregd: cam[1]: capture (V) failed: Server returned 5XX Server Error reply

Feb 22 13:10:43 avreg avregd: critical error: unable to capture any video/audio frames during the last 10 seconds

Что есть Server returned 5XX Server Error reply ? При смене netCam_IP" = "192.168.1.61"

Этот источник не открывается:

VLC не может открыть MRL 'rtsp://install:pa...@192.168.1.61:1554/avreg-media/1/media.amp'. Ищите более подробную информацию в лог-файле.

вторник, 22 февраля 2022 г. в 12:49:26 UTC+3, avreg-support:

[Алексей]

Кое что проясняется sudo -u avreg gst-launch-1.0 v4l2src device=/dev/video0 ! video/x-bayer,format=bggr,width=1280,height=1024,framerate=10/1 ! bayer2rgb ! videoconvert ! vaapih264enc ! rtph264pay name=pay0 pt=96
ПРЕДУПРЕЖДЕНИЕ: ошибочный конвейер: элемент «vaapih264enc» не найден

вторник, 22 февраля 2022 г. в 13:16:41 UTC+3, Алексей:

[Andrey Nikitin]

Алексей писал(а):

> Кое что проясняется sudo -u avreg gst-launch-1.0 v4l2src device=/dev/video0
> ! video/x-bayer,format=bggr,width=1280,height=1024,framerate=10/1 !
> bayer2rgb ! videoconvert ! vaapih264enc ! rtph264pay name=pay0 pt=96
> ПРЕДУПРЕЖДЕНИЕ: ошибочный конвейер: элемент «vaapih264enc» не найден

1) sudoedit /etc/default/avreg

# Uncomment to avreg-gst-rtsp-proxy debugging (/var/log/avreg/avreg-gst-rtsp-proxy*)
#GST_DEBUG='2,avreg-gst-rtsp-proxy:4'
#export GST_DEBUG

2) Плагин vaapih264enc находится в deb-пакете gstreamer1.0-vaapi,
но VA-API должен поддерживаться драйвером видекарты.
https://wiki.debian.org/HardwareVideoAcceleration
(прим.: на Inlel c ним норм, на остальных - пляски с бубном)

3) Для более наглядного теста можно попробовать по сети передать поток
чтобы найти работающий пайплайн:
https://www.google.com/search?q=v4l2src+h264pay

[Алексей]

Пока только так

0:02:43.074910552  4317 0x55e46367f700 ERROR             rtspclient rtsp-client.c:1054:find_media: client 0x55e4636981c0: not authorized to see factory path /avreg-media/1/media.amp
0:02:43.075025767  4317 0x55e46367f700 ERROR             rtspclient rtsp-client.c:3346:handle_describe_request: client 0x55e4636981c0: no media
0:02:43.076164300  4317 0x55e46367f700 WARN     GST_ELEMENT_FACTORY gstelementfactory.c:467:gst_element_factory_make: no such element factory "video"!
0:02:43.076253404  4317 0x55e46367f700 ERROR           GST_PIPELINE gst/parse/grammar.y:850:priv_gst_parse_yyparse: no element "video"

(avreg-gst-rtsp-proxy:4317): GStreamer-CRITICAL **: 15:01:26.454: gst_element_make_from_uri: assertion 'gst_uri_is_valid (uri)' failed
0:02:43.076477600  4317 0x55e46367f700 ERROR           GST_PIPELINE gst/parse/grammar.y:1007:priv_gst_parse_yyparse: no source element for URI "/x-bayer,format=bggr,width=1280,height=1024,framerate=10/1"
0:02:43.076640118  4317 0x55e46367f700 ERROR           GST_PIPELINE gst/parse/grammar.y:938:priv_gst_parse_yyparse: link has no source [sink=@0x7f370800a280]
0:02:43.081144241  4317 0x55e46367f700 WARN        rtspmediafactory rtsp-media-factory.c:1730:default_create_element: recoverable parsing error: no element "video"
error: XDG_RUNTIME_DIR not set in the environment.
0:02:43.141781838  4317 0x7f374800f760 WARN              video-info video-info.c:196:validate_colorimetry: color matrix RGB is only supported with RGB format, ENCODED is not
0:02:43.141849759  4317 0x7f374800f760 WARN              video-info video-info.c:520:gst_video_info_from_caps: invalid colorimetry, using default
0:02:43.142076639  4317 0x7f374800f760 WARN              video-info video-info.c:196:validate_colorimetry: color matrix RGB is only supported with RGB format, ENCODED is not
0:02:43.142101560  4317 0x7f374800f760 WARN              video-info video-info.c:520:gst_video_info_from_caps: invalid colorimetry, using default
0:02:43.142180751  4317 0x7f374800f760 WARN              video-info video-info.c:196:validate_colorimetry: color matrix RGB is only supported with RGB format, ENCODED is not
0:02:43.142211786  4317 0x7f374800f760 WARN              video-info video-info.c:520:gst_video_info_from_caps: invalid colorimetry, using default
0:02:43.142275014  4317 0x7f374800f760 WARN              video-info video-info.c:196:validate_colorimetry: color matrix RGB is only supported with RGB format, ENCODED is not
0:02:43.142298417  4317 0x7f374800f760 WARN              video-info video-info.c:520:gst_video_info_from_caps: invalid colorimetry, using default
0:02:43.144923578  4317 0x7f374800f760 WARN          v4l2bufferpool gstv4l2bufferpool.c:814:gst_v4l2_buffer_pool_start:<v4l2src30:pool0:src> Uncertain or not enough buffers, enabling copy threshold
0:02:43.627808665  4317 0x7f374800f760 WARN                 basesrc gstbasesrc.c:3127:gst_base_src_loop:<v4l2src30> error: Internal data stream error.
0:02:43.627917081  4317 0x7f374800f760 WARN                 basesrc gstbasesrc.c:3127:gst_base_src_loop:<v4l2src30> error: streaming stopped, reason not-linked (-1)
0:02:43.628307003  4317 0x7f3748003000 WARN               rtspmedia rtsp-media.c:3250:default_handle_message: 0x7f37481961e0: got error Internal data stream error. (../libs/gst/base/gstbasesrc.c(3127): gst_base_src_loop (): /GstPipeline:media-pipeline/GstBin:bin30/G
streaming stopped, reason not-linked (-1))
0:02:43.628429490  4317 0x55e46367f700 WARN               rtspmedia rtsp-media.c:3576:wait_preroll: failed to preroll pipeline
0:02:43.628480385  4317 0x55e46367f700 WARN               rtspmedia rtsp-media.c:3946:gst_rtsp_media_prepare: failed to preroll pipeline
0:02:43.650512338  4317 0x55e46367f700 ERROR             rtspclient rtsp-client.c:1087:find_media: client 0x55e4636981c0: can't prepare media
0:02:43.656951915  4317 0x55e46367f700 ERROR             rtspclient rtsp-client.c:3346:handle_describe_request: client 0x55e4636981c0: no media

Смущает not authorized to see factory path /avreg-media/1/media.amp

/* ERRORS */
no_factory:
{
GST_ERROR ("client %p: no factory for path %s", client, path);
send_generic_response (client, GST_RTSP_STS_NOT_FOUND, ctx);
return NULL;
}
no_factory_access:
{
GST_ERROR ("client %p: not authorized to see factory path %s", client,
path);
/* error reply is already sent */
return NULL;
}
not_authorized:
{
GST_ERROR ("client %p: not authorized for factory path %s", client, path);
/* error reply is already sent */
return NULL; }

вторник, 22 февраля 2022 г. в 14:27:48 UTC+3, avreg-support:

[Andrey Nikitin]

Алексей писал(а):

> (avreg-gst-rtsp-proxy:4317): GStreamer-CRITICAL **: 15:01:26.454:
> gst_element_make_from_uri: assertion 'gst_uri_is_valid (uri)' failed

Вот это непонятно, нужно подумать.
А аутентификация правильно, т.к. первый запрос идёт всегда без неё.

[Алексей]

Прокси запустился с параметрами:

( v4l2src device=/dev/video0 ! video/x-bayer,format=bggr,width=1280,height=1024,framerate=10/1 ! bayer2rgb ! videoconvert ! vaapih264enc ! h264parse ! rtph264pay name=pay0 pt=96 )

Нагрузка 12-15% vaapi работает, по сети ссылка rtsp://install:pa...@192.168.1.61:1554/avreg-media/1/media.amp открывается, кодек h264, через браузер пока пишет нет связи, разбираюсь дальше.

2022-02-22 15:51:07 avreg-gst-rtsp-proxy-INFO: afterConfigure(conf = 0x55892c7df6a0(12); users = 0x55892c7df400(6); cams = 0x55892c7df6a0(1)

2022-02-22 15:51:07 avreg-gst-rtsp-proxy-INFO: cam[1]: address poll = [239.192.74.1..239.192.74.10]; ports = [2000..2009]; ttl = 1
2022-02-22 15:51:07 avreg-gst-rtsp-proxy-INFO: cam[1]: add mount point "media" => "/avreg-media/1/media.amp"
2022-02-22 15:51:07 avreg-gst-rtsp-proxy-INFO: cam[1]: add "media" mntpoint => "( v4l2src device=/dev/video0 ! video/x-bayer,format=bggr,width=1280,height=1024,framerate=10/1 ! bay..."
2022-02-22 15:51:07 avreg-gst-rtsp-proxy-INFO: ready at rtsp://*:1554
0:00:00.994380510 16505 0x55892c7e3060 ERROR             rtspclient rtsp-client.c:1054:find_media: client 0x55892c7fb140: not authorized to see factory path /avreg-media/1/media.amp
0:00:00.994497743 16505 0x55892c7e3060 ERROR             rtspclient rtsp-client.c:3346:handle_describe_request: client 0x55892c7fb140: no media
0:00:01.229663974 16505 0x55892c7e3060 WARN              vaapiblend gstvaapiblend.c:184:gst_vaapi_blend_initialize:<vaapiblend0> VPP does not support global alpha blending

error: XDG_RUNTIME_DIR not set in the environment.

0:00:01.320428928 16505 0x55892c7e3640 WARN              video-info video-info.c:196:validate_colorimetry: color matrix RGB is only supported with RGB format, ENCODED is not
0:00:01.320494430 16505 0x55892c7e3640 WARN              video-info video-info.c:520:gst_video_info_from_caps: invalid colorimetry, using default
0:00:01.320847638 16505 0x55892c7e3640 WARN              video-info video-info.c:196:validate_colorimetry: color matrix RGB is only supported with RGB format, ENCODED is not
0:00:01.320871975 16505 0x55892c7e3640 WARN              video-info video-info.c:520:gst_video_info_from_caps: invalid colorimetry, using default
0:00:01.320949561 16505 0x55892c7e3640 WARN              video-info video-info.c:196:validate_colorimetry: color matrix RGB is only supported with RGB format, ENCODED is not
0:00:01.320972610 16505 0x55892c7e3640 WARN              video-info video-info.c:520:gst_video_info_from_caps: invalid colorimetry, using default
0:00:01.321033485 16505 0x55892c7e3640 WARN              video-info video-info.c:196:validate_colorimetry: color matrix RGB is only supported with RGB format, ENCODED is not
0:00:01.321056317 16505 0x55892c7e3640 WARN              video-info video-info.c:520:gst_video_info_from_caps: invalid colorimetry, using default
0:00:01.323828452 16505 0x55892c7e3640 WARN          v4l2bufferpool gstv4l2bufferpool.c:814:gst_v4l2_buffer_pool_start:<v4l2src0:pool0:src> Uncertain or not enough buffers, enabling copy threshold
0:00:01.873002363 16505 0x55892c7e3060 WARN               rtspmedia rtsp-media.c:4588:gst_rtsp_media_suspend: media 0x7feb9c16a1b0 was not prepared
0:00:01.885276580 16505 0x7feb5401ec00 WARN                 v4l2src gstv4l2src.c:694:gst_v4l2src_query:<v4l2src0> Can't give latency since framerate isn't fixated !

вторник, 22 февраля 2022 г. в 15:26:26 UTC+3, avreg-support:

[Алексей]

Добавил geometry*** 1280x1024 заработало ! :)

Если будут нюансы дополню. Думаю многим будет полезно.

вторник, 22 февраля 2022 г. в 15:52:04 UTC+3, Алексей: