首页 文章

Raspberry Pi 3上的OpenCV多USB摄像头

提问于
浏览
2

我看过很多以前与此相关的问题,没有人帮助过 .

我的设置:

  • these之一

  • 他们显示为 /dev/video0/dev/video1

  • 图像为640 x 480

  • Raspberry Pi 3

  • Raspbian Jessie

  • OpenCV 3.1.0

  • Python 2.7

对于其中一个摄像头,我可以捕获图像并以相当不错的速率显示它们,并且延迟最小(偶尔会出现伪像) .

然而,当我尝试使用两者时,我得到的帧速率可能是第10帧(尽管帧之间的延迟似乎与每帧差别很大),各种令人讨厌的图像伪像(例如见下文)和不可容忍的滞后量 .

artifacts

问题确实是设备上的相机本身或USB带宽:当我将相机连接到我的Windows PC时,我能够以30 FPS捕获和显示,没有任何视觉伪像和非常小的延迟 .

我可以说,它必须是Pi硬件,驱动程序或OpenCV才是问题所在 . 我不认为这是Pi硬件..我很高兴,如果我能用两台相机实现一半相机的帧速率(我不明白为什么那不可能)并且没有丑陋的文物 .

Does anyone have any suggestions? 我'm ultimately just trying to stream the video from the two cameras from my Pi to my desktop. If there are suggestions that don'吨涉及OpenCV,我发现甚至可以合理快速地捕捉图像(当然还有一台摄像机) .

仅供参考,我使用的简单python脚本是这样的:

import cv2
import numpy as np
import socket
import ctypes
import struct

cap = []
cap.append(cv2.VideoCapture(0))
cap.append(cv2.VideoCapture(1))

#grab a single frame from one camera
def grab(num):
    res, im = cap[num].read()
    return (res,im)

#grab a frame from each camera and stitch them
#side by side
def grabSBS():
    res, imLeft  = grab(1)
    #next line is for pretending I have 2 cameras
    #imRight = imLeft.copy()
    res, imRight = grab(0)
    imSBS = np.concatenate((imLeft, imRight), axis=1)
    return res,imSBS

###For displaying locally instead of streaming
#while(False):
#    res, imLeft = grab(0)
#    imRight = imLeft.copy()
#    imSBS = np.concatenate((imLeft, imRight), axis=1)
#    cv2.imshow("win", imSBS)
#    cv2.waitKey(20)

header_data = ctypes.create_string_buffer(12)

while(True):
    sck = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
    sck.bind(("10.0.0.XXX", 12321))

    sck.listen(1)

    while(True):
        (client, address) = sck.accept()
        print "Client connected:", address
        try:
            while(True):
            res,im = grabSBS()
            if(res):
                success, coded = cv2.imencode('.jpg', im)
                if (success):
                    height, width, channels = im.shape
                    size = len(coded)
                    struct.pack_into(">i", header_data , 0, width)
                    struct.pack_into(">i", header_data , 4, height)
                    struct.pack_into(">i", header_data , 8, size)
                    client.sendall(header_data .raw)
                    client.sendall(coded.tobytes())
        except Exception as ex:
            print "ERROR:", ex
            client.close()
            sck.close()
            exit()

UPDATE :通过在初始化VideoCapture对象后添加以下代码行,我得到了更好的工作:

cap[0].set(cv2.CAP_PROP_FPS, 15)
cap[1].set(cv2.CAP_PROP_FPS, 15)

这既降低了所需的带宽,也降低了openCV工作负载 . 我仍然每隔几帧就会得到那些可怕的文物,所以如果有人对此提出建议,我很高兴听到它 .

1 回答

  • 3

    好吧,花了大约5个小时与之抗争后,我似乎找到了解决方案 .

    首先,显然OpenCV试图捕获30 FPS,即使我无法以30 FPS拉帧 . 我将VideoCapture帧速率更改为15 FPS,视频变得更加平滑,更快速 .

    cap[0].set(cv2.CAP_PROP_FPS, 15.0)
    cap[1].set(cv2.CAP_PROP_FPS, 15.0)
    

    但是,这并没有摆脱文物 . 我最终发现,如果我在通过网络发送图像后执行 del(im) ,则工件完全消失了 .

相关问题