Python使用websocket将图片流推送至服务端在浏览器播放视频

先说下实现原理,如下图:


001.png

Python使用cv2拉取摄像头的视频帧,压缩、解码、编码等处理后将图片base64编码后通过websocket发送给服务端,服务端将此帧图片存下来,当有客户端请求图片数据时服务端不断地将图片帧发送给请求websocket客户端。客户端不断的刷新图片以达到视频播放的效果。
可以根据代码中quality参数设置图片的质量4流畅3高清2标清1超清,本人测试在1M带宽的网络环境可以达到1秒10帧、延迟低的效果只是画面效果不好。标清则需要大约5M带宽,高清大概需要10M带宽,超清需要20M带宽。
Python端代码如下:

#向服务端发送数据的线程
import cv2
import base64
import websocket
import threading

class SendThread (threading.Thread):   
    def __init__(self, video_url, ws_server_url, camera_id):
        threading.Thread.__init__(self)
        #"rtsp://admin:a1234567@192.168.8.11:554/h264/ch1/main/av_stream"
        self._video_url = video_url
        self._ws = None
        self._ws_server_url = ws_server_url
        self._capture = None
        self._send = True
        #视频播放质量4流畅3标清2高清1超清
        self._quality = 4
        self._camera_id = camera_id

    def run(self):
        websocket.enableTrace(False)
        self._ws = websocket.WebSocketApp(self._ws_server_url,
                            on_message=self.on_message,
                            on_error=self.on_error,
                            on_close=self.on_close,
                            on_open=self.on_open)
        self._ws.run_forever()

    def send_frame(self):

        self._capture = cv2.VideoCapture(self._video_url)
        frame_width = int(self._capture.get(cv2.CAP_PROP_FRAME_WIDTH))
        frame_height = int(self._capture.get(cv2.CAP_PROP_FRAME_HEIGHT))
        while self._send:
            ret, frame = self._capture.read()
            if ret:
                # 576,324
                r = int(2 + self._quality * 0.5)
                frame = cv2.resize(frame,(frame_width // r,frame_height // r))
                #图片质量1-100
                jpeg_quality = 100 - 10 * self._quality
                img_param = [int(cv2.IMWRITE_JPEG_QUALITY), jpeg_quality]
                # 转化
                ret, frame = cv2.imencode('.jpg', frame, img_param)
                if ret:
                    self._ws.send(base64.b64encode(frame).decode("utf-8"))

    def on_message(self, message):
        print(message)

    def on_error(self, error):
        print(error)
        global send_thread_pool
        del send_thread_pool[self._camera_id]
        self._send = False
        self._capture.release()

    def on_close(self):
        print("closed video send!")
        global send_thread_pool
        del send_thread_pool[self._camera_id]
        self._send = False
        self._capture.release()

    def on_open(self):
        print('连接媒体服务器成功!')
        global send_thread_pool
        send_thread_pool[self._camera_id] = self
        self.send_frame()

    def set_quality(self, quality):
        self._quality = quality

web页面代码如下:

<!DOCTYPE HTML>
<html>
   <head>
   <meta charset="utf-8">
   <title>视频播放</title>
    
      <script type="text/javascript">
        var wsVideo = new WebSocket("ws://video/read/e064213cf7ba449cbc2904c95fab0);
        wsVideo.onmessage = function(evt){
           document.getElementById("img1").src = "data:image/jpeg;base64," + evt.data;
        }
      </script>
        
   </head>
   <body>
      <div id="sse">
         <img id="img1" width="100%" height="100%">
      </div>
   </body>
</html>
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,772评论 6 477
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,458评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,610评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,640评论 1 276
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,657评论 5 365
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,590评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,962评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,631评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,870评论 1 297
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,611评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,704评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,386评论 4 319
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,969评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,944评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,179评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 44,742评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,440评论 2 342

推荐阅读更多精彩内容