基于Plupload实现Base64分割的文件上传方案

标题:基于Plupload实现Base64分割的文件上传方案
关键词:文件上传、Base64、Plupload、Blob、分割上传
领域:Web前端
作者:孙振强
日期:2018-04-13


目录

  1. 背景
  2. 存在问题
    2.1. 体积增加1/3
    2.2. 大文件上传不稳定
  3. 方案思路
    3.1. 将服务器端的上传限制调整至足够大。
    3.2. 将Base64进行分段传输。
    3.3. 将Base64转换回file对象,调用plupload进行上传。
  4. 具体实现
    4.1. 将Base64文件转化为Blob对象
    4.3. 调用plupload将file对象上传
  5. 参考资料
    5.1. Base64转化为Blob,转化为File的参考文档
    5.2. Plupload官方文档
    5.3. Plupload中文文档

1. 背景

前端在进行图片上传的时候,有时候会有裁剪的需求,对于裁剪功能现在采用HTML5的canvas实现,处理后的图片为Base64格式,然后将将Base64内容直接提交给后端接口。

除此之外,普通上传采用统一的文件微服务,前端使用plupload插件进行文件的分割、进度、回调等,后端分片接收文件、合并、用fastdfs存储、返回相对路径。

2. 存在问题

背景所述的实现方案在使用的过程存在一定问题:

2.1. 体积增加1/3

Base64化图片后,体积增加1/3左右。

2.2. 大文件上传不稳定

大图片采用Base64单次传输会超过后端接口上传容量设置,并且网络的稳定性也会引起上传的不稳定。

3. 方案思路

重要的问题在2.2.,解决方案可以有以下几种:

3.1. 将服务器端的上传限制调整至足够大。

比如100M,但是这样不够规范和优秀。

3.2. 将Base64进行分段传输。

前端写一个Base64分割传输处理的模块,后端写一个Base64分段接收上传。比较科学,但工作量较大,前后端都需要修改,而且稳定性需要多次优化。

3.3. 将Base64转换回file对象,调用plupload进行上传。

这种方式最理想,因为将变化和工作量都限制在了一个小范围内。

并且plupload是比较完善、成熟的插件,稳定性比较好,后端的实现代码完全不需要修改。

4. 具体实现

本文将详述3.3.方案的具体实现。

4.1. 将Base64文件转化为Blob对象

/**
 * Convert a base64 string in a Blob according to the data and contentType.
 *
 * @param b64Data {String} Pure base64 string without contentType
 * @param contentType {String} the content type of the file i.e (image/jpeg - image/png - text/plain)
 * @param sliceSize {Int} SliceSize to process the byteCharacters
 * @see http://stackoverflow.com/questions/16245767/creating-a-blob-from-a-base64-string-in-javascript
 * @return Blob
 */
function b64toBlob(b64Data, contentType, sliceSize) {
        contentType = contentType || '';
        sliceSize = sliceSize || 512;
 
        var byteCharacters = atob(b64Data);
        var byteArrays = [];
 
        for (var offset = 0; offset < byteCharacters.length; offset += sliceSize) {
            var slice = byteCharacters.slice(offset, offset + sliceSize);
 
            var byteNumbers = new Array(slice.length);
            for (var i = 0; i < slice.length; i++) {
                byteNumbers[i] = slice.charCodeAt(i);
            }
 
            var byteArray = new Uint8Array(byteNumbers);
 
            byteArrays.push(byteArray);
        }
 
      var blob = new Blob(byteArrays, {type: contentType});
      return blob;
}

具体转化:

var ImageURL = "data:image/gif;base64,R0lGODlhPQBEAPeoAJosM//AwO/AwHVYZ/z595kzAP/s7P+goOXMv8+fhw/v739/f+8PD98fH/8mJl+fn/9ZWb8/PzWlwv///6wWGbImAPgTEMImIN9gUFCEm/gDALULDN8PAD6atYdCTX9gUNKlj8wZAKUsAOzZz+UMAOsJAP/Z2ccMDA8PD/95eX5NWvsJCOVNQPtfX/8zM8+QePLl38MGBr8JCP+zs9myn/8GBqwpAP/GxgwJCPny78lzYLgjAJ8vAP9fX/+MjMUcAN8zM/9wcM8ZGcATEL+QePdZWf/29uc/P9cmJu9MTDImIN+/r7+/vz8/P8VNQGNugV8AAF9fX8swMNgTAFlDOICAgPNSUnNWSMQ5MBAQEJE3QPIGAM9AQMqGcG9vb6MhJsEdGM8vLx8fH98AANIWAMuQeL8fABkTEPPQ0OM5OSYdGFl5jo+Pj/+pqcsTE78wMFNGQLYmID4dGPvd3UBAQJmTkP+8vH9QUK+vr8ZWSHpzcJMmILdwcLOGcHRQUHxwcK9PT9DQ0O/v70w5MLypoG8wKOuwsP/g4P/Q0IcwKEswKMl8aJ9fX2xjdOtGRs/Pz+Dg4GImIP8gIH0sKEAwKKmTiKZ8aB/f39Wsl+LFt8dgUE9PT5x5aHBwcP+AgP+WltdgYMyZfyywz78AAAAAAAD///8AAP9mZv///wAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAACH5BAEAAKgALAAAAAA9AEQAAAj/AFEJHEiwoMGDCBMqXMiwocAbBww4nEhxoYkUpzJGrMixogkfGUNqlNixJEIDB0SqHGmyJSojM1bKZOmyop0gM3Oe2liTISKMOoPy7GnwY9CjIYcSRYm0aVKSLmE6nfq05QycVLPuhDrxBlCtYJUqNAq2bNWEBj6ZXRuyxZyDRtqwnXvkhACDV+euTeJm1Ki7A73qNWtFiF+/gA95Gly2CJLDhwEHMOUAAuOpLYDEgBxZ4GRTlC1fDnpkM+fOqD6DDj1aZpITp0dtGCDhr+fVuCu3zlg49ijaokTZTo27uG7Gjn2P+hI8+PDPERoUB318bWbfAJ5sUNFcuGRTYUqV/3ogfXp1rWlMc6awJjiAAd2fm4ogXjz56aypOoIde4OE5u/F9x199dlXnnGiHZWEYbGpsAEA3QXYnHwEFliKAgswgJ8LPeiUXGwedCAKABACCN+EA1pYIIYaFlcDhytd51sGAJbo3onOpajiihlO92KHGaUXGwWjUBChjSPiWJuOO/LYIm4v1tXfE6J4gCSJEZ7YgRYUNrkji9P55sF/ogxw5ZkSqIDaZBV6aSGYq/lGZplndkckZ98xoICbTcIJGQAZcNmdmUc210hs35nCyJ58fgmIKX5RQGOZowxaZwYA+JaoKQwswGijBV4C6SiTUmpphMspJx9unX4KaimjDv9aaXOEBteBqmuuxgEHoLX6Kqx+yXqqBANsgCtit4FWQAEkrNbpq7HSOmtwag5w57GrmlJBASEU18ADjUYb3ADTinIttsgSB1oJFfA63bduimuqKB1keqwUhoCSK374wbujvOSu4QG6UvxBRydcpKsav++Ca6G8A6Pr1x2kVMyHwsVxUALDq/krnrhPSOzXG1lUTIoffqGR7Goi2MAxbv6O2kEG56I7CSlRsEFKFVyovDJoIRTg7sugNRDGqCJzJgcKE0ywc0ELm6KBCCJo8DIPFeCWNGcyqNFE06ToAfV0HBRgxsvLThHn1oddQMrXj5DyAQgjEHSAJMWZwS3HPxT/QMbabI/iBCliMLEJKX2EEkomBAUCxRi42VDADxyTYDVogV+wSChqmKxEKCDAYFDFj4OmwbY7bDGdBhtrnTQYOigeChUmc1K3QTnAUfEgGFgAWt88hKA6aCRIXhxnQ1yg3BCayK44EWdkUQcBByEQChFXfCB776aQsG0BIlQgQgE8qO26X1h8cEUep8ngRBnOy74E9QgRgEAC8SvOfQkh7FDBDmS43PmGoIiKUUEGkMEC/PJHgxw0xH74yx/3XnaYRJgMB8obxQW6kL9QYEJ0FIFgByfIL7/IQAlvQwEpnAC7DtLNJCKUoO/w45c44GwCXiAFB/OXAATQryUxdN4LfFiwgjCNYg+kYMIEFkCKDs6PKAIJouyGWMS1FSKJOMRB/BoIxYJIUXFUxNwoIkEKPAgCBZSQHQ1A2EWDfDEUVLyADj5AChSIQW6gu10bE/JG2VnCZGfo4R4d0sdQoBAHhPjhIB94v/wRoRKQWGRHgrhGSQJxCS+0pCZbEhAAOw==";
// Split the base64 string in data and contentType
var block = ImageURL.split(";");
// Get the content type of the image
var contentType = block[0].split(":")[1];// In this case "image/gif"
// get the real base64 content of the file
var realData = block[1].split(",")[1];// In this case "R0lGODlhPQBEAPeoAJosM...."
 
// Convert it to a blob
var blob = b64toBlob(realData, contentType);

4.2. 将Blob对象转化为File对象

// Convert it to a blob
var blob = b64toBlob(realData, contentType);
  
//  转为File对象file
val file = new File([blob], "文件名.gif");
  
//对象信息如下:
//File
//    lastModified: 1523531338900
//    lastModifiedDate: Date 2018-04-12T11:08:58.900Z
//    name: "文件名.gif"
//    size: 1951
//    type: "image/gif"
//    webkitRelativePath: ""

4.3. 调用plupload将file对象上传

下面代码是实例化plupload,使用常规的方法即可,不清楚的同学请查阅5.中的plupload文档。

var uploader = new plupload.Uploader({
        runtimes: 'html5,flash,silverlight,html4',
        browse_button: 'input_file', //触发文件选择对话框的按钮,为那个元素id
        url: upload_url, //服务器端的上传页面地址
        chunk_size: '512kb', //割成的大小
        max_file_size: '20mb', //最大只能上传1gb的文件
    },
    init: {
        FilesAdded: function (up, files) {
            //此处可以做选择文件后的处理
            uploader.start();
        },
        UploadProgress: function () {
            //上传过程处理
        },
        Error: function (up, err) {
            $('#input_file').removeAttr('disabled');
            if (err.code == '-601') {
                $('.error_message').text('请上传图片格式文件!');
            } else if (err.code == '-602') {
                $('.error_message').text('对不起,此文件刚才已选择上传了。');
            } else {
                $('.error_message').text('上传文件错误:' + err.code);
            }
        },
        FileUploaded: function (up, file, result) {
            //result.response
            //上传完成后续处理   
        }
    }
});

下面的代码才是重点,通过plupload进行上传:

//此处uploader为刚才定义的plupload实例,file为base64转化后的对象
uploader.addFile(file);  
uploader.start();

大功告成,具体你就来动手实现吧。

5. 参考资料

5.1. Base64转化为Blob,转化为File的参考文档

How to convert a base64 image into a image file and upload it with an asynchronous form using jQuery

https://ourcodeworld.com/articles/read/322/how-to-convert-a-base64-image-into-a-image-file-and-upload-it-with-an-asynchronous-form-using-jquery

5.2. Plupload官方文档

https://www.plupload.com/docs/v2/Uploader

5.3. Plupload中文文档

http://www.phpin.net/tools/plupload/

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,080评论 6 493
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,422评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,630评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,554评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,662评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,856评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,014评论 3 408
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,752评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,212评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,541评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,687评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,347评论 4 331
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,973评论 3 315
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,777评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,006评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,406评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,576评论 2 349

推荐阅读更多精彩内容

  • Spring Cloud为开发人员提供了快速构建分布式系统中一些常见模式的工具(例如配置管理,服务发现,断路器,智...
    卡卡罗2017阅读 134,633评论 18 139
  • 前端无法像原生APP一样直接操作本地文件,否则的话打开个网页就能把用户电脑上的文件偷光了,所以需要通过用户触发,用...
    雷波_viho阅读 821评论 0 1
  • 虽说微笑是一个人自信的表现,经常笑的人运气不会太差,却避免不了有些人是微笑来掩饰对外界人与事物的不满,微笑背后吐槽...
    新的心跳阅读 527评论 0 1
  • Albert Einstein — brilliant physicist, proponent of peace...
    A0ViTas阅读 341评论 0 0
  • 大概一个星期以前,跟朋友聊天,偶然得知微信还有关闭朋友圈这个功能,一下子就像挖到宝了。之前就有过这种情况,就有那么...
    译耳阅读 869评论 12 13