您好,欢迎来到三六零分类信息网!老站,搜索引擎当天收录,欢迎发信息

Node批量下载文件到本地的方法介绍(附代码)

2025/6/6 13:55:57发布40次查看
本篇文章给大家带来的内容是关于node批量下载文件到本地的方法介绍(附代码),有一定的参考价值,有需要的朋友可以参考一下,希望对你有所帮助。
多文件分别处理
如果文件数量可控,对于下载出来的文件格式无要求,可以用最简单的办法,直接遍历文件,分别给每个下载链接创建一个单文件的download或者iframe下载链接。
zip包批量下载
虽然说可以遍历所有文件,然后去批量下载单个文件,但是这种体验毕竟不太好,最常见的做法是把批量的文件下载并打包到zip中。
所以首先的一个实现思路是:在代理服务里,先去遍历所有的文件去请求文件数据,然后压缩到zip包中,然后再把zip包返回给客户端。
这么做对于下载量数据比较小时ok,但是如果批量文件特别多特别大时,用户要等后台把所有的数据都请求到并且都打包都压缩包里,前端才能有反馈,这个时间可能会耗时很长,用户体验可能很差。
在同事的前期调研时,有说这里可以做一个流式的边压缩边下载的能力,大致的思路是,chunk回包,加流式压缩。
......let filecounter = 0;const zippedfilename = encodeuricomponent(downloaddata.name);const list = downloaddata.list || [];const header = {  'content-type': 'application/x-zip',  'pragma': 'public',  'expires': '0',  'cache-control': 'private, must-revalidate, post-check=0, pre-check=0',  'content-disposition': 'attachment; filename=' + zippedfilename + '',  'transfer-encoding': 'chunked',  'content-transfer-encoding': 'binary'};res.writehead(200, header);archive.store = true;archive.pipe(res);list.map(item => {  filecounter++;  let instream = request.get(item.downloadurl);  let name = item.filename;  let length = 0;  instream.on('response', function(awsdata) {    archive.append(instream, {      name: name    });  }).on('data', function(data) {    length += data.length;  }).on('error', function(e) {    console.error(name + '-error', e);  }).on('end', function(enddata) {    filecounter--;    if (filecounter < 1) {      archive.finalize();    }  });});archive.on('error', function(err) {  throw err;});archive.on('finish', function(err) {  return res.end();});......
当然中间还有些细节需要处理:比如中文文件名的问题,是否需要下载文件总大小做限制,是否会出现文件不存在等等情况。
以上就是node批量下载文件到本地的方法介绍(附代码)的详细内容。
该用户其它信息

VIP推荐

免费发布信息,免费发布B2B信息网站平台 - 三六零分类信息网 沪ICP备09012988号-2
企业名录 Product