利用Node.js将图片流实时显示在浏览器

实现功能:将socket.io服务器的二进制图片流利用img标签显示在浏览器端,形成视频。
所用到的知识:WebSocket协议,Node.js的Socket.io类库,浏览器的对象URL机制。

WebSocket协议

WebSocket是HTML5的一种新协议, 它实现了浏览器与服务器全双工通信。以前很多网站为了实现实时通信,所用到的技术都是轮询,轮询是在特定的时间间隔,由浏览器对服务器发出http请求,然后由服务器返回最新的数据给浏览器。很显然,这种传统模式的http请求需要浏览器端不断的发出请求,http请求的header是非常长的,如果只是要发一个很小的数据,会非常浪费带宽。在WebSocket API,浏览器和服务器只需要做一个握手的动作就能实现全双工通讯。

Socket.io类库

浏览器的兼容问题以及网络中间物(代理服务、防火墙)问题不支持WebSocket,这时Socket.io的出现就是为了完善这些问题。Socket.io是一个简单的小类库,该类库实现的功能类似于Node.js中的net模块实现的功能,这些功能包括WebSocket通信、XHR轮询、JSONP轮询等。该类库的一个显著特征是在服务器端与浏览器之间提供一共享接口,也就是说,当客户端与服务端建立连接后,在处理消息时,开发者可以在客户端使用服务器端JavaScript代码。
下面是个小案例:

// socket.js
var http = require('http');
var sio = require('socket.io');
var fs = require('fs');
var server = http.createServer(function(req,res){
    res.writeHead(200,{'Content-type':'text/html'});
    res.end(fs.readFileSync('./index.html'));
});
server.listen(1337);
var socket = sio.listen(server);
socket.on('connectiion',function(socket){
    console.log('客户端建立连接');
    socket.send('你好');
    socket.on('message',function(msg){
        console.log('接收到一个消息:',msg);
    });
    socket.on('disconnect',function(){
        console.log('客户端断开连接');
    });
});

// index.html
<!doctype html>
<html lang="en">
<head>
    <meta charset="UTF-8">
    <title>Document</title>
    <script src="//cdn.bootcss.com/socket.io/1.7.3/socket.io.js"></script>
    <script>
        var socket = io.connect();
        socket.on('message',function(data){
            console.log(data);
            socket.send('消息已接收到');
        });
        socket.on('disconnect',function(){
            console.log('服务器断开连接');
        });
    </script>
</head>
<body>
</body>
</html>

浏览器的对象URL机制

对象URL机制--后台服务器直接发送JPEG图像数据的原始二进制数据,浏览器收到数据后把图像数据解析成img元素能过引用的文件,能够有效降低图像数据传输的占用带宽。

objectURL=window.URL.createObjectURL(blob);

blob参数是一个文件对象或者Blob对象,Blob对象代表文件的二进制数据,objectURL是生成的对象URL,这个URL的格式为"blob"开头的链接对象,一个对象的URL长这个样子:

![](blob:http%3A//localhost%3A4000/ffd23149-960f-4555-92a5-c3e1d6e9d1d9)

具体用法参考http://www.cnblogs.com/liulangmao/p/4262565.html
还有一种是对象URI机制,一般而言,img标签无法把图像的二进制数据解析成图片文件,这是由浏览器防止用户直接引用用户计算机本地文件的安全机制决定的,但是浏览器有种解析data URI数据的方式,我们可以利用这种特性来解析图像。data URI是一种直接把文件嵌入HTML文档的方案,其格式如下:

data:[<mediatype>][;base64],<data>

上述<data>部分就是文件原始二进制数据的base64编码数据,但是这种编码得到的数据比原始数据大了1/3,会导致数据传输占用带宽加大,因此,我们采用对象URL机制。
下面是将socket.io服务器的二进制数据传输给浏览器的代码(‘图片的二进制数据可以自己将本地图片的二进制数据输进去’):

var http = require('http');
var sio = require('socket.io');
var fs = require('fs');
var server = http.createServer(function(req,res){
    res.writeHead(200,
        {
            'Content-type':'text/html'
        }
    );
    res.end(fs.readFileSync('./img.html'));
});

server.listen(4000);
var io = sio.listen(server);
socket.on('connection',function(socket){
   socket.emit('news',{shuju:'图片的二进制数据'});
})

浏览器端代码:

<!DOCTYPE html>
<html lang="en">
<head>
    <meta charset="UTF-8">
    <title>Document</title>
    <script src="//cdn.bootcss.com/socket.io/1.7.3/socket.io.js"></script>
    <script>
        var socket = io.connect();
        socket.on('news',function(data){
            var blob = new Blob([data.shuju],{"type":"image\/jpeg"});
            var src = window.URL.createObjectURL(blob);
            var img = document.createElement('img');
            img.src = src;
            img.onload = function(){
                window.URL.revokeObjectURL(src);
            };
            document.body.appendChild(img);
        });
    </script>
</head>
<body>
    <div id="data"></div>
</body>
</html>

由于是用本地图片测试的,路径会有问题,会导致浏览器端显示不出来图片可以在控制台查看是否正确:


要想从http服务器传输图片数据给socket.io服务器,可以用node.js的进程和子进程解决,将socket.io代码设为http部分的子进程,即可实现传输。

// http.js
var http = require('http');
var cp = require('child_process');
var n= cp.fork(__dirname+'/socket.js');

var server = http.createServer(function(req,res){

}).listen(3000,"localhost",function(){
    n.send({shuju:'图片二进制数据'})});

//监听事件
server.on('listening',function(){
    console.log('服务器开始监听');
    //server.close();
});
//建立连接
server.on('connection',function(socket){
    console.log('客户端已连接');
});

//服务器关闭时响应
server.on('close',function(){
    console.log('服务器已关闭');
});
//触发错误事件
server.on('error',function(){
    if(e.code=='EADDRINUSE'){ //端口被占用的错误代码为EADDRINUSE
        console.log('服务器端口已被占用');
    }
});

由于JPEG编码得到的图像数据大小均不同,且TCP协议只是保证接收端接受的的比特是按序的,但不能保证每次接收的数据的就是发送端发送的完整数据,可能只是其中的一部分。因此,node.js服务器接收时不能用长度来指定接收一帧JPEG图像数据的Buffer。此处使用了JPEG数据的最后两个ASCII码的217和255来区分两帧图像数据,并使用Buffer把之前接收到的二进制数据缓存起来最后拼接完成完整的JPEG帧数据。

socket.js
var http = require('http');
var sio = require('socket.io');
var fs = require('fs');
var server = http.createServer(function(req,res){
    res.writeHead(200,
        {
            'Content-type':'text/html'
        }
    );
    res.end(fs.readFileSync('./img.html'));
});

server.listen(3000);
var io = sio.listen(server);
process.on('message',function(m){
    var buffers=[];
    io.sockets.on('connection',function(socket){
        buffers.push[m.shuju];
        var n_shu= m.shuju;
        if(n_shu[n_shu.length-1]==217 && n_shu[n_shu.length-2]==255){
            var n_buffer = Buffer.concat(buffers);
            io.sockets.emit('news',m);
            buffers=[];  
        }
    });
});

浏览器端代码不变,以上便完成图像的传输。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,294评论 6 493
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,493评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,790评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,595评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,718评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,906评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,053评论 3 410
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,797评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,250评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,570评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,711评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,388评论 4 332
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,018评论 3 316
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,796评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,023评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,461评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,595评论 2 350

推荐阅读更多精彩内容