Node大量下载文件到当地的办法介绍(附代码)
发布时间:09/01 来源:未知 浏览:
关键词:
多文件离别处置
假如文件数目可控,关于下载出来的文件格局无要求,可以用最简便的方法,直接遍历文件,离别给每个下载链接创立一个单文件的download或者iframe下载链接。
zip包大量下载
虽然说可以遍历所有文件,然后去大量下载单个文件,但是这种体验究竟不太好,最常见的做法是把大量的文件下载并打包到zip中。
所以第一的一个实现思绪是:在代理效劳里,先去遍历所有的文件去恳求文件数据,然后紧缩到zip包中,然后再把zip包返回给客户端。
这么做关于下载量数据比力小时ok,但是假如大量文件特殊多特殊大时,会员要等后台把所有的数据都恳求到并且都打包都紧缩包里,前端才能有反应,这个时间大概会耗时很长,会员体验大概很差。
在同事的前期调研时,有说这里可以做一个流式的边紧缩边下载的能力,大致的思绪是,chunk回包,加流式紧缩。
...... let fileCounter = 0; const zippedFilename = encodeURIComponent(downloadData.name); const list = downloadData.list || []; const header = { 'Content-Type': 'application/x-zip', 'Pragma': 'public', 'Expires': '0', 'Cache-Control': 'private, must-revalidate, post-check=0, pre-check=0', 'Content-disposition': 'attachment; filename="' + zippedFilename + '"', 'Transfer-Encoding': 'chunked', 'Content-Transfer-Encoding': 'binary' }; res.writeHead(200, header); archive.store = true; archive.pipe(res); list.map(item => { fileCounter++; let inStream = request.get(item.downLoadUrl); let name = item.fileName; let length = 0; inStream.on('response', function(awsData) { archive.append(inStream, { name: name }); }).on('data', function(data) { length += data.length; }).on('error', function(e) { console.error(name + '-error', e); }).on('end', function(endData) { fileCounter--; if (fileCounter < 1) { archive.finalize(); } }); }); archive.on('error', function(err) { throw err; }); archive.on('finish', function(err) { return res.end(); }); ......
当然中心还有些细节需要处置:比方中文文件名的问题,可否需要下载文件总大小做限制,可否会显现文件不存在等等状况。
以上就是Node大量下载文件到当地的办法介绍(附代码)的具体内容,更多请关注百分百源码网其它相关文章!