百分百源码网-让建站变得如此简单! 登录 注册 签到领金币!

主页 | 如何升级VIP | TAG标签

当前位置: 主页>网站教程>JS教程> Node大量下载文件到当地的办法介绍(附代码)
分享文章到:

Node大量下载文件到当地的办法介绍(附代码)

发布时间:09/01 来源:未知 浏览: 关键词:
本篇文章给大家带来的内容是关于Node大量下载文件到当地的办法介绍(附代码),有必然的参照 价值,有需要的伴侣可以参照 一下,但愿对你有所帮忙。

多文件离别处置

假如文件数目可控,关于下载出来的文件格局无要求,可以用最简便的方法,直接遍历文件,离别给每个下载链接创立一个单文件的download或者iframe下载链接。

zip包大量下载

虽然说可以遍历所有文件,然后去大量下载单个文件,但是这种体验究竟不太好,最常见的做法是把大量的文件下载并打包到zip中。

所以第一的一个实现思绪是:在代理效劳里,先去遍历所有的文件去恳求文件数据,然后紧缩到zip包中,然后再把zip包返回给客户端。

这么做关于下载量数据比力小时ok,但是假如大量文件特殊多特殊大时,会员要等后台把所有的数据都恳求到并且都打包都紧缩包里,前端才能有反应,这个时间大概会耗时很长,会员体验大概很差。

在同事的前期调研时,有说这里可以做一个流式的边紧缩边下载的能力,大致的思绪是,chunk回包,加流式紧缩。

......

let fileCounter = 0;
const zippedFilename = encodeURIComponent(downloadData.name);
const list = downloadData.list || [];
const header = {
  'Content-Type': 'application/x-zip',
  'Pragma': 'public',
  'Expires': '0',
  'Cache-Control': 'private, must-revalidate, post-check=0, pre-check=0',
  'Content-disposition': 'attachment; filename="' + zippedFilename + '"',
  'Transfer-Encoding': 'chunked',
  'Content-Transfer-Encoding': 'binary'
};
res.writeHead(200, header);
archive.store = true;
archive.pipe(res);
list.map(item => {
  fileCounter++;
  let inStream = request.get(item.downLoadUrl);
  let name = item.fileName;
  let length = 0;
  inStream.on('response', function(awsData) {
    archive.append(inStream, {
      name: name
    });
  }).on('data', function(data) {
    length += data.length;
  }).on('error', function(e) {
    console.error(name + '-error', e);
  }).on('end', function(endData) {
    fileCounter--;
    if (fileCounter < 1) {
      archive.finalize();
    }
  });
});
archive.on('error', function(err) {
  throw err;
});
archive.on('finish', function(err) {
  return res.end();
});

......

当然中心还有些细节需要处置:比方中文文件名的问题,可否需要下载文件总大小做限制,可否会显现文件不存在等等状况。

以上就是Node大量下载文件到当地的办法介绍(附代码)的具体内容,更多请关注百分百源码网其它相关文章!

打赏

打赏

取消

感谢您的支持,我会继续努力的!

扫码支持
扫码打赏,你说多少就多少

打开支付宝扫一扫,即可进行扫码打赏哦

百分百源码网 建议打赏1~10元,土豪随意,感谢您的阅读!

共有150人阅读,期待你的评论!发表评论
昵称: 网址: 验证码: 点击我更换图片
最新评论

本文标签

广告赞助

能出一分力是一分吧!

订阅获得更多模板

本文标签

广告赞助

订阅获得更多模板