#opencv #opencv-python
#opencv #opencv-python
Вопрос:
Я использую opencv-python (версия 4.4.0.46) python версии 3.8.5 для захвата потока с моей IP-камеры, однако я не могу прочитать видеокадр. Вот мой код:
import cv2
# cap = cv2.VideoCapture("rtsp://wowzaec2demo.streamlock.net/vod/mp4:BigBuckBunny_115k.mov")
cap = cv2.VideoCapture("rtsp://admin:xxx@xxx/Streaming/Channels/1")
print(cap.isOpened())
ret,frame = cap.read()
print(ret)
while ret:
ret,frame = cap.read()
print(ret)
if cv2.waitKey(1) amp; 0xFF == ord('q'):
break
cap.release()
В моем коде, когда я использую свой поток IPC, я получаю «print(cap.isOpened())» как True, в то время как «cap.read()» возвращает False. Однако, когда он меняется на поток «BigBuckBunny_115k», все в порядке, и я могу получить изображение рамки.
Кто-то может сказать, что ваш IPC должен быть поврежден. Но я пытался использовать ffmpeg для захвата видео, которое может легко получить изображение кадра. Мой код:
ffmpeg -i "rtsp://admin:xxx@xxx/Streaming/Channels/1" -y -f image2 -r 1/1 imgd.jpg
Используя python для захвата видео, я получил «False», как указано выше, но журнал ошибок ant не печатается, что затрудняет решение проблемы. Поэтому я перешел на использование Java и, используя opencv-4.4.0.so как библиотека, мой код:
VideoCapture videoCapture = new VideoCapture();
// set the exception mode true so that it can print stack trace when error
videoCapture.setExceptionMode(true);
boolean openStatus = videoCapture.open("rtsp://admin:xxx@xxx/Streaming/Channels/1");
log.info("open rtsp status: {}", openStatus);
int i = 0;
status = true;
while (openStatus amp;amp; status) {
Mat mat = new Mat();
videoCapture.read(mat);
Imgcodecs.imwrite("../" i ".png", mat);
i ;
}
запустив этот код, я получил исключение: org.opencv.core.CvException: cv :: Исключение: OpenCV (4.4.0) /xxx/opencv-4.4.0/modules/videoio/src/cap.cpp: 177: ошибка: (-2: Неопределенная ошибка) не удалось открыть ‘rtsp://admin:xxx@xxx/Streaming/Channels/1 «в функции «открыть».
Приведенный выше журнал исключений не помогает решить проблему, что означает «-2: неопределенная ошибка»?
Забыл упомянуть, что моя среда выполнения — CentOS 7.5 (версия ядра 3.10.0-862.el7.x86_64). Затем я перешел на другой сервер с той же версией opencv-python и версией CentOS. Странно, что на этом новом сервере, используя тот же код opencv, я могу теперь получить видеокадр.
Первый вопрос: есть ли какая-либо соответствующая информация, на которую я могу сослаться? Второй вопрос заключается в том, как я могу устранить эту проблему. Третий вопрос заключается в том, почему он ведет себя по-разному на разных серверах, есть ли какая-либо конфигурация системы при моей первой ошибке сервера, например, конфигурация сети?
Обновление 2021.01.07
Спасибо, Антуан, за предоставленную мне информацию о серверной части OpenCV. Я попытался распечатать информацию о сборке python-opencv, используя приведенный ниже код.
import cv2
print(cv2.getBuildInformation())
И на 2 серверах, которые у меня есть (один из них может считывать видеопоток, а другой — нет), я получил консольную печать полностью одинаково. Вот печать:
General configuration for OpenCV 4.4.0 =====================================
Version control: 4.4.0-dirty
Platform:
Timestamp: 2020-11-03T00:52:03Z
Host: Linux 4.15.0-1077-gcp x86_64
CMake: 3.18.2
CMake generator: Unix Makefiles
CMake build tool: /bin/gmake
Configuration: Release
CPU/HW features:
Baseline: SSE SSE2 SSE3
requested: SSE3
Dispatched code generation: SSE4_1 SSE4_2 FP16 AVX AVX2 AVX512_SKX
requested: SSE4_1 SSE4_2 AVX FP16 AVX2 AVX512_SKX
SSE4_1 (15 files): SSSE3 SSE4_1
SSE4_2 (1 files): SSSE3 SSE4_1 POPCNT SSE4_2
FP16 (0 files): SSSE3 SSE4_1 POPCNT SSE4_2 FP16 AVX
AVX (4 files): SSSE3 SSE4_1 POPCNT SSE4_2 AVX
AVX2 (29 files): SSSE3 SSE4_1 POPCNT SSE4_2 FP16 FMA3 AVX AVX2
AVX512_SKX (4 files): SSSE3 SSE4_1 POPCNT SSE4_2 FP16 FMA3 AVX AVX2 AVX_512F AVX512_COMMON AVX512_SKX
C/C :
Built as dynamic libs?: NO
C standard: 11
C Compiler: /usr/lib/ccache/compilers/c (ver 9.3.1)
C flags (Release): -Wl,-strip-all -fsigned-char -W -Wall -Werror=return-type -Werror=non-virtual-dtor -Werror=address -Werror=sequence-point -Wformat -Werror=format-security -Wmissing-declarations -Wundef -Winit-self -Wpointer-arith -Wshadow -Wsign-promo -Wuninitialized -Winit-self -Wsuggest-override -Wno-delete-non-virtual-dtor -Wno-comment -Wimplicit-fallthrough=3 -Wno-strict-overflow -fdiagnostics-show-option -Wno-long-long -pthread -fomit-frame-pointer -ffunction-sections -fdata-sections -msse -msse2 -msse3 -fvisibility=hidden -fvisibility-inlines-hidden -O3 -DNDEBUG -DNDEBUG
C flags (Debug): -Wl,-strip-all -fsigned-char -W -Wall -Werror=return-type -Werror=non-virtual-dtor -Werror=address -Werror=sequence-point -Wformat -Werror=format-security -Wmissing-declarations -Wundef -Winit-self -Wpointer-arith -Wshadow -Wsign-promo -Wuninitialized -Winit-self -Wsuggest-override -Wno-delete-non-virtual-dtor -Wno-comment -Wimplicit-fallthrough=3 -Wno-strict-overflow -fdiagnostics-show-option -Wno-long-long -pthread -fomit-frame-pointer -ffunction-sections -fdata-sections -msse -msse2 -msse3 -fvisibility=hidden -fvisibility-inlines-hidden -g -O0 -DDEBUG -D_DEBUG
C Compiler: /usr/lib/ccache/compilers/cc
C flags (Release): -Wl,-strip-all -fsigned-char -W -Wall -Werror=return-type -Werror=non-virtual-dtor -Werror=address -Werror=sequence-point -Wformat -Werror=format-security -Wmissing-declarations -Wmissing-prototypes -Wstrict-prototypes -Wundef -Winit-self -Wpointer-arith -Wshadow -Wuninitialized -Winit-self -Wno-comment -Wno-strict-overflow -fdiagnostics-show-option -Wno-long-long -pthread -fomit-frame-pointer -ffunction-sections -fdata-sections -msse -msse2 -msse3 -fvisibility=hidden -O3 -DNDEBUG -DNDEBUG
C flags (Debug): -Wl,-strip-all -fsigned-char -W -Wall -Werror=return-type -Werror=non-virtual-dtor -Werror=address -Werror=sequence-point -Wformat -Werror=format-security -Wmissing-declarations -Wmissing-prototypes -Wstrict-prototypes -Wundef -Winit-self -Wpointer-arith -Wshadow -Wuninitialized -Winit-self -Wno-comment -Wno-strict-overflow -fdiagnostics-show-option -Wno-long-long -pthread -fomit-frame-pointer -ffunction-sections -fdata-sections -msse -msse2 -msse3 -fvisibility=hidden -g -O0 -DDEBUG -D_DEBUG
Linker flags (Release): -Wl,--exclude-libs,libippicv.a -Wl,--exclude-libs,libippiw.a -L/root/ffmpeg_build/lib -Wl,--gc-sections -Wl,--as-needed
Linker flags (Debug): -Wl,--exclude-libs,libippicv.a -Wl,--exclude-libs,libippiw.a -L/root/ffmpeg_build/lib -Wl,--gc-sections -Wl,--as-needed
ccache: YES
Precompiled headers: NO
Extra dependencies: ade Qt5::Core Qt5::Gui Qt5::Widgets Qt5::Test Qt5::Concurrent /lib64/libpng.so /lib64/libz.so dl m pthread rt
3rdparty dependencies: ittnotify libprotobuf libjpeg-turbo libwebp libtiff libjasper IlmImf quirc ippiw ippicv
OpenCV modules:
To be built: calib3d core dnn features2d flann gapi highgui imgcodecs imgproc ml objdetect photo python3 stitching video videoio
Disabled: world
Disabled by dependency: -
Unavailable: java js python2 ts
Applications: -
Documentation: NO
Non-free algorithms: NO
GUI:
QT: YES (ver 5.15.0)
QT OpenGL support: NO
GTK : NO
VTK support: NO
Media I/O:
ZLib: /lib64/libz.so (ver 1.2.7)
JPEG: libjpeg-turbo (ver 2.0.5-62)
WEBP: build (ver encoder: 0x020f)
PNG: /lib64/libpng.so (ver 1.5.13)
TIFF: build (ver 42 - 4.0.10)
JPEG 2000: build Jasper (ver 1.900.1)
OpenEXR: build (ver 2.3.0)
HDR: YES
SUNRASTER: YES
PXM: YES
PFM: YES
Video I/O:
DC1394: NO
FFMPEG: YES
avcodec: YES (58.109.100)
avformat: YES (58.61.100)
avutil: YES (56.60.100)
swscale: YES (5.8.100)
avresample: NO
GStreamer: NO
v4l/v4l2: YES (linux/videodev2.h)
Parallel framework: pthreads
Trace: YES (with Intel ITT)
Other third-party libraries:
Intel IPP: 2020.0.0 Gold [2020.0.0]
at: /tmp/pip-req-build-99ib2vsi/_skbuild/linux-x86_64-3.8/cmake-build/3rdparty/ippicv/ippicv_lnx/icv
Intel IPP IW: sources (2020.0.0)
at: /tmp/pip-req-build-99ib2vsi/_skbuild/linux-x86_64-3.8/cmake-build/3rdparty/ippicv/ippicv_lnx/iw
Lapack: NO
Eigen: NO
Custom HAL: NO
Protobuf: build (3.5.1)
OpenCL: YES (no extra features)
Include path: /tmp/pip-req-build-99ib2vsi/opencv/3rdparty/include/opencl/1.2
Link libraries: Dynamic load
Python 3:
Interpreter: /opt/python/cp38-cp38/bin/python (ver 3.8.6)
Libraries: libpython3.8.a (ver 3.8.6)
numpy: /tmp/pip-build-env-qru8fff1/overlay/lib/python3.8/site-packages/numpy/core/include (ver 1.17.3)
install path: python
Python (for build): /bin/python2.7
Java:
ant: NO
JNI: NO
Java wrappers: NO
Java tests: NO
Install to: /tmp/pip-req-build-99ib2vsi/_skbuild/linux-x86_64-3.8/cmake-install
-----------------------------------------------------------------
В распечатке я нашел информацию:
Video I/O:
DC1394: NO
FFMPEG: YES
avcodec: YES (58.109.100)
avformat: YES (58.61.100)
avutil: YES (56.60.100)
swscale: YES (5.8.100)
avresample: NO
GStreamer: NO
v4l/v4l2: YES (linux/videodev2.h)
Кажется, на моих двух серверах есть FFMPEG и нет GStreamer. Итак, есть ли какая-либо другая причина, которая может вызвать разницу?
Кстати, я попытался передать настройки API конструктору, как показано ниже:
cap = cv2.VideoCapture("rtsp://admin:xxx@xxx/Streaming/Channels/1", cv2.CAP_FFMPEG)
Однако передача параметра не решила проблему, я также не могу прочитать видеокадр.
Ответ №1:
OpenCV использует разные серверные части для чтения / записи / кодирования / декодирования видеопотока в зависимости от того, что установлено на вашем компьютере и какой из них вы создаете с помощью OpenCV. Это может объяснить, почему вы получили разные результаты на разных серверах даже с той же ОС и версией OpenCV: у вас может быть GStreamer на одном, а не на другом.
Вы можете найти некоторую информацию об этих бэкэндах в документации OpenCV.
IIRC в Linux OpenCV использует GStreamer в качестве серверной части по умолчанию, и вы тестировали свой поток с помощью FFMPEG. OpenCV также может использовать FFMPEG, попробуйте передать cv.CAP_FFMPEG в качестве предпочтения API cv.VideoCapture конструктору:
cap = cv2.VideoCapture("rtsp://admin:xxx@xxx/Streaming/Channels/1", cv.CAP_FFMPEG)
Что касается подробностей, модуль OpenCV videoio не такой подробный.
Но некоторые серверные части, например, вы можете увеличить детализацию GStreamer с GST_DEBUG помощью переменной среды, см. Документацию GStreamer . Для FFMPEG вы можете использовать FFREPORT переменную среды или некоторые из AV_LOG* них, см. Документацию FFMPEG .
Комментарии:
1. Спасибо за вашу информацию, я многое узнал о серверной части OpenCV. И я попытался убедиться, что у моей ОС другой сервер, однако оказывается, что мои 2 сервера имеют один и тот же сервер OpenCV. Я добавлю результат печати к вопросу.
2. вы уверены, что у вас точно такая же версия FFMPEG на обоих серверах? Версия, отображаемая с
cv2.getBuildInformation()помощью, используется для сборки OpenCV, которая может отличаться от той, которая используется во время выполнения. Это может произойти, если вы создаете его самостоятельно на одном сервере, а не на другом.