.NetCore下多个文件流生成压缩文件

原有系统的附件都是保存在服务器上的,占用了大量的磁盘空间,如今要切换到AWS S3上做文件存储管理。文件打包下载之前的做法是,后台将文件服务器上的多个文件打包到一个压缩文件中,存放在服务器,后端接口返回压缩文件地址供前端下载;为此,特写下这篇文章来记录此处是如何根据文件流来制作压缩包的。

AWS S3更多存取文件的demo需看官方源码,本文中有下载的实例。

需要引用:AWSSDK.Core、AWSSDK.S3,可从NuGet安装;
需要引用:System.IO.Compression,可从NuGet安装;

在ConfigureServices下单例注入AWS类

public void ConfigureServices(IServiceCollection services)
{
    .......
    services.AddSingleton<Aws>();
    .........
}

Configure下获取AWS实例

public void Configure(IApplicationBuilder app, IHostingEnvironment env)
{
    //......//
    Aws.Instance = app.ApplicationServices.GetService<Aws>();
}

AWS类

public class Aws
{
    #region Init
    private readonly IConfiguration _cfg;
    /// <summary>
    /// 存储桶名称
    /// </summary>
    private string bucketName;
    /// <summary>
    /// aws Id
    /// </summary>
    private readonly string awsAccessKeyId;
    /// <summary>
    /// aws Id key
    /// </summary>
    private readonly string awsSecretAccessKey;
    private IAmazonS3 client;
    private AmazonS3Config config = new AmazonS3Config()
    {
        ServiceURL = "http://s3.amazonaws.com",
        RegionEndpoint = Amazon.RegionEndpoint.CNNorth1 //账号在哪个区域就用哪个区域,不然会出现账号401的问题
    };

    #endregion

    public Aws(IConfiguration cfg)
    {
        _cfg = cfg;
        awsAccessKeyId = _cfg["AccessKeyId"];
        awsSecretAccessKey = _cfg["SecretAccessKey"];
        bucketName = _cfg["BucketName"];
        client = new AmazonS3Client(awsAccessKeyId, awsSecretAccessKey, config);
    }

    /// <summary>
    /// AWS文件批量下载
    /// </summary>
    /// <param name="fileName">文件相对地址(aws key)</param>
    /// <returns></returns>
    public async Task<byte[]> BatchDownload(List<string> fileNames)
    {
        try
        {
            byte[] res;
            using (MemoryStream ms = new MemoryStream())
            {
                using (ZipArchive zip = new ZipArchive(ms, ZipArchiveMode.Create, true))
                {
                    foreach (var fileName in fileNames)
                    {
                        //通过aws下载文件流
                        var response = await client.GetObjectAsync(bucketName, newfileName);
                        var pdfStream=  response.ResponseStream;//得到文件流
                        var pdfBytes = StringHelper.StreamToBytes(pdfStream);//文件流转换成字节

                        ZipArchiveEntry entry = zip.CreateEntry("abc.pdf");//压缩文件内创建一个文件名为“abc.pdf”,流是什么文件格式就用什么格式,此处我的是pdf格式
                        using (Stream sw = entry.Open())
                        {
                            sw.Write(pdfBytes, 0, pdfBytes.Length);//将文件的字节写到abc.pdf中
                        }
                    }
                    InvokeWriteFile(zip);//重新计算压缩文件的大小,此处参考别人的
                    int nowPos = (int)ms.Position;
                    res = new byte[ms.Length];
                    ms.Position = 0;
                    ms.Read(res, 0, res.Length);
                    ms.Position = nowPos;
                }
                return res;
            }
        }
        catch (Exception ex)
        {
            throw ex;
        }
    }

    public void InvokeWriteFile(ZipArchive zipArchive)
    {
        foreach (MethodInfo method in zipArchive.GetType().GetRuntimeMethods())
        {
            if (method.Name == "WriteFile")
            {
                method.Invoke(zipArchive, new object[0]);
            }
        }
    }
}

控制器下载压缩文件

/// <summary>
///     批量下载
/// </summary>
/// <param name="ids"></param>
/// <returns></returns>
public async Task<IActionResult> Packing(List<int> ids)
{
    var paths = new List<string>();
    //根据Id查询本地对应的文件名称,Id换取文件名称
    var bytes = await Aws.Instance.BatchDownload(paths).ToList());

    Response.ContentType = "application/octet-stream";

    var contentDisposition = "attachment;" + "filename=" + HttpUtility.UrlEncode("XXXX.zip");
    Response.Headers.Add("Content-Disposition", new string[] { contentDisposition });

    Response.ContentLength = bytes.Length;
    Response.Body.Write(bytes, 0, bytes.Length);//发送读取的内容数据到客户端浏览器
    Response.Body.Flush();
    return new EmptyResult();
}

前端Ajax调用

//后端返回的是文件流
var ids = [1,2,3];
var url = "/PackingByAws";
var form = $("<form></form>").attr("action", url).attr("method", "post");
////后端为List<Int>参数
ids.forEach(function (value) {
    form.append($("<input></input>").attr("type", "hidden").attr("name", "ids").attr("value", value));
})
form.appendTo('body').submit().remove();

第一次写文章,从业也有几年了,一直都是拿来主义。这篇文件也是近期项目遇到的特拿来分享,也是怀着无比忐忑的心情才写下来的,写的不好的地方还请见谅。

参考:https://www.rainng.com/dotnet-ziparchive-update-stream/

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 218,036评论 6 506
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 93,046评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 164,411评论 0 354
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,622评论 1 293
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,661评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,521评论 1 304
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,288评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,200评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,644评论 1 314
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,837评论 3 336
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,953评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,673评论 5 346
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,281评论 3 329
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,889评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,011评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,119评论 3 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,901评论 2 355