【发布时间】：2017-06-18 05:01:45
【问题描述】：
我正在尝试实时发送我的 macbook air 网络摄像头视频并在另一台计算机上使用 python 接收它。这样做的动机是能够将实时图像识别任务卸载到服务器上。服务器需要访问 python 中的实时视频帧，以便我可以将这些帧传递给我的图像识别算法（深度神经网络）。
我能够使用https://github.com/atuldo/videoStream 成功地做到这一点 它使用套接字库以字符串格式发送视频帧。但是，这种方法的结果是帧率非常低（参见下面的代码 sn-p）。
尝试 1：
from flask import Flask, render_template, Response
from camera import VideoCamera
app = Flask(__name__)
@app.route('/')
def index():
return render_template('index.html')
def gen(camera):
while True:
frame = camera.get_frame()
yield (b'--frame\r\n'
b'Content-Type: image/jpeg\r\n\r\n' + frame + b'\r\n\r\n')
@app.route('/video_feed')
def video_feed():
return Response(gen(VideoCamera()),
mimetype='multipart/x-mixed-replace; boundary=frame')
if __name__ == '__main__':
app.run(host='0.0.0.0', debug=True)
我还使用了https://github.com/log0/video_streaming_with_flask_example，它使用烧瓶将视频流式传输到网页。查看 chrome 中的网页，它的帧速率比我的第一个解决方案要好得多。但是，此解决方案不会接收 python 中的视频，并且需要我从网页中读取视频，我不确定如何去做。
尝试 2（我将原始 github 代码中的 pygame 替换为 cv2 以便能够访问我的 mac 网络摄像头）：
### Server
import socket
from threading import *
import socket
import pygame
import pygame.camera
from pygame.locals import *
import cv2
def server():
#host_name = socket.gethostname()
host_name = 'localhost'
print "\nServer started at " + str(socket.gethostbyname(host_name)) + " at port " + str(90)
#port = 90
port = 1024
serversocket = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
serversocket.bind(("",port))
serversocket.listen(10)
#pygame.camera.init()
#cam = pygame.camera.Camera(0,(640,480),"RGB")
#cam.start()
#img = pygame.Surface((640,480))
video = cv2.VideoCapture(0)
while True:
connection, address = serversocket.accept()
print "GOT_CONNECTION"
#cam.get_image(img)
#data = pygame.image.tostring(img,"RGB")
success, image = video.read()
data = cv2.imencode('.jpg', image)[1].tostring()
connection.sendall(data)
connection.close()
server()
###Reciever (snippet, for full code please refer to the github link above)
clientsocket=socket.socket(socket.AF_INET, socket.SOCK_STREAM)
clientsocket.connect((self.ipAddress, self.port))
received = []
while True:
recvd_data = clientsocket.recv(230400)
if not recvd_data:
break
else:
received.append(recvd_data)
dataset = ''.join(received)
#image = pygame.image.fromstring(dataset,(640, 480),"RGB") # convert received image from string
nparr = np.fromstring(dataset, np.uint8)
image = cv2.imdecode(nparr, cv2.CV_LOAD_IMAGE_COLOR)
cv2.imwrite('foo.jpg', image)
#pygame.image.save(image, "foo.jpg")
self.ids.image_source.reload()
视频流在网页上显示如下：
<html>
<head>
<title>Video Streaming Demonstration</title>
</head>
<body>
<h1>Video Streaming Demonstration</h1>
<img id="bg" src="{{ url_for('video_feed') }}">
</body>
</html>
如何使用这两种方法中的一种获得高帧速率，或者有更好的方法来解决这个问题？
【问题讨论】：
-
可能重复。见：This question
-
我相信我的问题比链接的问题更具体。在尝试了您链接到的问题中的答案并发现结果帧速率太低后，我实际上问了这个问题。你会看到我在我的问题中展示了流式传输视频的方法，这些方法实际上是基于链接问题中投票率最高的答案。如上所述，我的问题是特定于获得良好的帧速率，因此它可用于图像识别。不幸的是，到目前为止似乎没有太多关于这样做的信息:)
标签： python sockets opencv flask video-streaming