JAVA网页插件或组件如何实现大文件的分块与多附件上传?

大文件上传系统开发指南(基于原生JS+SpringBoot)

项目概述

大家好,我是一个在浙江奋斗的Java程序员,最近接了个"刺激"的外包项目 - 开发一个支持20G大文件上传下载的系统,还要兼容IE9这种上古浏览器。客户要求使用原生JS实现(不能用jQuery等库),支持文件夹上传(保留层级结构),还要加密传输和断点续传。预算只有100元,但需要提供完整技术支持和源代码。

这活儿听着就刺激,但咱是谁?是打不死的小强!下面我就分享一下我的解决方案和部分代码实现。

技术选型

  • 前端:Vue3 CLI + 原生JavaScript(兼容IE9)
  • 后端:SpringBoot + Tomcat
  • 数据库:MySQL(主要存用户信息和文件元数据)
  • 文件存储:服务器本地文件系统
  • 加密:SM4(国密)和AES

系统架构

浏览器(IE9+) ←HTTP→ SpringBoot后端 ←本地IO→ 文件存储 ↑ MySQL(元数据)

前端实现(关键代码)

1. 文件夹上传组件(兼容IE9)

export default { data() { return { fileList: [], chunkSize: 5 * 1024 * 1024, // 5MB分片 concurrent: 3 // 并发上传数 } }, methods: { triggerFileInput() { document.getElementById('fileInput').click(); }, handleFileChange(e) { const files = e.target.files; if (!files.length) return; // 处理文件夹结构 const fileTree = this.buildFileTree(files); this.prepareUpload(fileTree); }, // 构建文件树结构(保留文件夹层级) buildFileTree(files) { const tree = {}; for (let i = 0; i < files.length; i++) { const file = files[i]; const path = file.webkitRelativePath || file.relativePath || file.name; const parts = path.split('/'); // 添加文件信息 const fileName = parts[parts.length - 1]; current[fileName] = { file: file, relativePath: path, size: file.size, chunks: Math.ceil(file.size / this.chunkSize), uploadedChunks: 0, progress: 0, status: '等待上传' }; } return tree; }, // 准备上传队列 prepareUpload(tree) { const flattenFiles = []; const traverse = (node, path = '') => { for (const key in node) { if (key === '__files__' || key === '__dirs__') continue; const newPath = path ? `${path}/${key}` : key; if (node[key].file) { // 是文件 flattenFiles.push({ ...node[key], relativePath: newPath }); } else { // 是目录,继续遍历 traverse(node[key].__dirs__, newPath); } } }; traverse(tree); this.fileList = flattenFiles; this.startUpload(); }, // 开始上传 startUpload() { const activeUploads = 0; const uploadNext = () => { if (activeUploads >= this.concurrent) return; const file = this.fileList.find(f => f.status === '等待上传'); if (!file) { if (this.fileList.every(f => f.status === '上传完成')) { this.$emit('upload-complete'); } return; } }; uploadNext(); }, // 分片上传文件 async uploadFile(fileEntry) { const file = fileEntry.file; const fileId = this.generateFileId(file); // 检查断点续传信息 const resumeInfo = this.getResumeInfo(fileId); let startChunk = resumeInfo ? resumeInfo.uploadedChunks : 0; for (let i = startChunk; i < fileEntry.chunks; i++) { const start = i * this.chunkSize; const end = Math.min(start + this.chunkSize, file.size); const chunk = file.slice(start, end); // 读取分片内容(兼容IE9) const chunkData = await this.readFileAsArrayBuffer(chunk); // 加密处理(这里简化,实际应该用Web Crypto API或polyfill) const encryptedData = this.encryptData(chunkData, 'AES'); // 实际应该用SM4 const formData = new FormData(); formData.append('fileId', fileId); formData.append('chunkIndex', i); formData.append('totalChunks', fileEntry.chunks); formData.append('relativePath', fileEntry.relativePath); formData.append('fileSize', file.size); formData.append('chunk', new Blob([encryptedData])); formData.append('fileName', file.name); } // 所有分片上传完成,通知服务器合并 await this.mergeFile(fileId, fileEntry.relativePath, file.size, file.name); fileEntry.status = '上传完成'; this.clearResumeInfo(fileId); }, // 以下是兼容IE9的工具方法 readFileAsArrayBuffer(file) { return new Promise((resolve) => { const reader = new FileReader(); reader.onload = (e) => resolve(e.target.result); reader.readAsArrayBuffer(file); }); }, encryptData(data, algorithm) { // 实际项目中应该使用Web Crypto API或polyfill // 这里简化处理,实际加密代码会更复杂 if (typeof data === 'string') { return btoa(data); // 简单base64模拟加密 } else { const bytes = new Uint8Array(data); let result = ''; for (let i = 0; i < bytes.length; i++) { result += String.fromCharCode(bytes[i]); } return btoa(result); } }, async uploadChunk(formData) { return new Promise((resolve, reject) => { const xhr = new XMLHttpRequest(); xhr.open('POST', '/api/upload/chunk', true); xhr.onload = () => { if (xhr.status >= 200 && xhr.status < 300) { resolve(JSON.parse(xhr.responseText)); } else { reject(new Error('上传失败')); } }; xhr.onerror = () => reject(new Error('网络错误')); xhr.send(formData); }); }, async mergeFile(fileId, relativePath, fileSize, fileName) { return new Promise((resolve, reject) => { const xhr = new XMLHttpRequest(); xhr.open('POST', '/api/upload/merge', true); xhr.setRequestHeader('Content-Type', 'application/json'); xhr.onload = () => { if (xhr.status >= 200 && xhr.status < 300) { resolve(JSON.parse(xhr.responseText)); } else { reject(new Error('合并失败')); } }; xhr.onerror = () => reject(new Error('网络错误')); xhr.send(JSON.stringify({ fileId, relativePath, fileSize, fileName })); }); }, // 断点续传相关方法(使用localStorage存储) generateFileId(file) { // 简单生成文件ID,实际应该更可靠 return `${file.name}-${file.size}-${file.lastModified}`; }, getResumeInfo(fileId) { const info = localStorage.getItem(`upload_resume_${fileId}`); return info ? JSON.parse(info) : null; }, saveResumeInfo(fileId, fileEntry) { localStorage.setItem(`upload_resume_${fileId}`, JSON.stringify({ uploadedChunks: fileEntry.uploadedChunks, relativePath: fileEntry.relativePath, fileSize: fileEntry.size, fileName: fileEntry.file.name })); }, clearResumeInfo(fileId) { localStorage.removeItem(`upload_resume_${fileId}`); }, formatSize(bytes) { if (bytes === 0) return '0 Bytes'; const k = 1024; const sizes = ['Bytes', 'KB', 'MB', 'GB', 'TB']; const i = Math.floor(Math.log(bytes) / Math.log(k)); return parseFloat((bytes / Math.pow(k, i)).toFixed(2)) + ' ' + sizes[i]; } } }

后端实现(SpringBoot关键代码)

1. 文件上传控制器

@RestController@RequestMapping("/api/upload")publicclassFileUploadController{privatestaticfinalStringUPLOAD_DIR="/var/bigfileupload/";// 实际应该从配置读取privatestaticfinalintCHUNK_SIZE=5*1024*1024;// 5MB@PostMapping("/chunk")publicResponseEntityuploadChunk(@RequestParam("fileId")StringfileId,@RequestParam("chunkIndex")intchunkIndex,@RequestParam("totalChunks")inttotalChunks,@RequestParam("relativePath")StringrelativePath,@RequestParam("fileSize")longfileSize,@RequestParam("fileName")StringfileName,@RequestParam("chunk")MultipartFilechunk)throwsIOException{// 创建临时目录StringtempDir=UPLOAD_DIR+"temp/"+fileId+"/";FiletempDirFile=newFile(tempDir);if(!tempDirFile.exists()){tempDirFile.mkdirs();}// 保存分片(实际应该先解密)StringchunkPath=tempDir+chunkIndex;chunk.transferTo(newFile(chunkPath));// 记录上传进度(实际应该用数据库)UploadProgressprogress=newUploadProgress();progress.setFileId(fileId);progress.setUploadedChunks(chunkIndex+1);progress.setTotalChunks(totalChunks);progress.setRelativePath(relativePath);progress.setFileSize(fileSize);progress.setFileName(fileName);// saveToDatabase(progress); // 实际应该存数据库returnResponseEntity.ok().body(Map.of("status","success","chunkIndex",chunkIndex,"fileId",fileId));}@PostMapping("/merge")publicResponseEntitymergeFile(@RequestBodyMergeRequestrequest)throwsIOException,NoSuchAlgorithmException{StringfileId=request.getFileId();StringtempDir=UPLOAD_DIR+"temp/"+fileId+"/";FiletempDirFile=newFile(tempDir);if(!tempDirFile.exists()){returnResponseEntity.badRequest().body(Map.of("error","临时文件不存在"));}// 创建目标目录结构StringrelativePath=request.getRelativePath();StringtargetPath=UPLOAD_DIR+relativePath;FiletargetFile=newFile(targetPath);}// 下载文件接口(非打包方式)@GetMapping("/download")publicResponseEntitydownloadFile(@RequestParamStringfilePath,HttpServletResponseresponse)throwsIOException{// 设置响应头HttpHeadersheaders=newHttpHeaders();headers.add(HttpHeaders.CONTENT_DISPOSITION,"attachment; filename=\""+file.getName()+"\"");headers.add(HttpHeaders.CONTENT_TYPE,Files.probeContentType(file.toPath()));headers.add(HttpHeaders.CONTENT_LENGTH,String.valueOf(file.length()));returnResponseEntity.ok().headers(headers).body(resource);}// 文件夹下载(递归下载)@GetMapping("/download/folder")publicvoiddownloadFolder(@RequestParamStringfolderPath,HttpServletResponseresponse)throwsIOException{// 实际实现应该递归遍历文件夹,生成zip或逐个文件下载// 这里简化处理,实际项目中需要更复杂的实现response.setContentType("application/zip");response.setHeader("Content-Disposition","attachment; filename=\""+newFile(folderPath).getName()+".zip\"");// 实际应该使用ZipOutputStream打包// 这里只是示例,实际不会这样实现try(ServletOutputStreamout=response.getOutputStream()){out.write("这不是真正的zip文件,实际应该递归打包文件夹".getBytes());}}}

2. 数据库实体类

@Entity@Table(name="file_metadata")publicclassFileMetadata{@Id@GeneratedValue(strategy=GenerationType.IDENTITY)privateLongid;privateStringfileId;privateStringfilePath;privateStringfileName;privatelongfileSize;privateDateuploadTime;// getters and setters}

兼容IE9的注意事项

  1. XMLHttpRequest:IE9不支持FormData,但支持XMLHttpRequest上传文件
  2. FileReader:IE10+才完全支持,IE9需要polyfill
  3. Blob:IE10+支持,IE9需要使用BlobBuilder
  4. 加密:Web Crypto API在IE9不可用,需要使用第三方库如CryptoJS

IE9兼容的加密方案示例

// 在index.html中引入CryptoJS//// 修改encryptData方法encryptData(data,algorithm){if(algorithm==='AES'){// 使用CryptoJS进行AES加密constkey=CryptoJS.enc.Utf8.parse('1234567890123456');// 实际应该从安全配置读取constiv=CryptoJS.enc.Utf8.parse('1234567890123456');letdataToEncrypt;if(typeofdata==='string'){dataToEncrypt=data;}else{// 如果是ArrayBuffer,转换为字符串constbytes=newUint8Array(data);letstr='';for(leti=0;i<bytes.length;i++){str+=String.fromCharCode(bytes[i]);}dataToEncrypt=str;}constencrypted=CryptoJS.AES.encrypt(dataToEncrypt,key,{iv:iv,mode:CryptoJS.mode.CBC,padding:CryptoJS.pad.Pkcs7});returnencrypted.toString();}// 其他算法...returndata;// 未加密}

部署说明

  1. 前端构建

    npminstallnpmrun build

    将生成的dist目录内容部署到Tomcat的webapps/ROOT目录

  2. 后端配置

    • 修改application.properties
      server.port=8080 spring.servlet.multipart.max-file-size=21GB spring.servlet.multipart.max-request-size=21GB file.upload-dir=/var/bigfileupload/
    • 确保上传目录存在且有写入权限:
      mkdir-p /var/bigfileupload/tempchmod777/var/bigfileupload
  3. 数据库初始化

    • 创建MySQL数据库并执行SQL脚本:
      CREATETABLEfile_metadata(idBIGINTAUTO_INCREMENTPRIMARYKEY,file_idVARCHAR(255)NOTNULL,file_pathTEXTNOTNULL,file_nameVARCHAR(255)NOTNULL,file_sizeBIGINTNOTNULL,upload_timeDATETIMENOTNULL);

开发文档要点

  1. 系统功能

    • 大文件分片上传(支持20GB+)
    • 文件夹上传(保留层级结构)
    • 断点续传(基于localStorage)
    • 加密传输和存储(AES/SM4)
    • 兼容IE9+等主流浏览器
  2. API文档

    • POST /api/upload/chunk- 上传文件分片
    • POST /api/upload/merge- 合并文件分片
    • GET /api/upload/download- 下载单个文件
    • GET /api/upload/download/folder- 下载整个文件夹
  3. 部署文档

    • 环境要求:JDK 8+, Node.js, MySQL, Tomcat 8+
    • 配置文件说明
    • 初始化脚本

总结

这个项目确实挑战不小,但通过合理的分片上传、断点续传机制和兼容性处理,我们还是能够实现客户的需求。关键点在于:

  1. 前端使用原生JS实现文件夹结构解析和上传队列管理
  2. 后端提供分片上传和合并接口
  3. 使用localStorage存储上传进度实现断点续传
  4. 通过CryptoJS等库实现兼容IE9的加密

由于预算有限,我省略了一些高级功能如:

  • 完整的SM4加密实现(实际需要引入Bouncy Castle等库)
  • 分布式存储支持
  • 详细的权限控制
  • 完善的错误处理和日志

如果需要更完整的实现,建议考虑:

  1. 使用WebUploader等成熟库(但需要处理兼容性问题)
  2. 增加预算购买商业组件
  3. 分阶段开发,先实现核心功能

最后,欢迎加入我们的QQ群374992201,一起交流技术,合作接单!群里经常有红包和技术分享,还有项目合作机会哦!

导入项目

导入到Eclipse:点南查看教程
导入到IDEA:点击查看教程
springboot统一配置:点击查看教程

工程

NOSQL

NOSQL示例不需要任何配置,可以直接访问测试

创建数据表

选择对应的数据表脚本,这里以SQL为例

修改数据库连接信息

访问页面进行测试

文件存储路径

up6/upload/年/月/日/guid/filename

效果预览

文件上传

文件刷新续传

支持离线保存文件进度,在关闭浏览器,刷新浏览器后进行不丢失,仍然能够继续上传

文件夹上传

支持上传文件夹并保留层级结构,同样支持进度信息离线保存,刷新页面,关闭页面,重启系统不丢失上传进度。

下载示例

点击下载完整示例

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/1209611.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

1.1 云原生时代为什么选择Go?5分钟带你理解Go语言的独特优势

1.1 云原生时代为什么选择Go?5分钟带你理解Go语言的独特优势 引言 在云原生技术栈中,无论是Kubernetes、Docker、Istio还是Prometheus,这些核心组件都选择了Go语言作为开发语言。为什么Go语言能在云原生时代脱颖而出?本文将深入解析Go语言的独特优势,帮助你理解为什么Go…

Flutter for OpenHarmony 入门实践:从 Scaffold 到 Container 的三段式布局构建

在跨平台开发中&#xff0c;掌握基本 UI 组件的使用是迈向专业开发的第一步。对于初学者而言&#xff0c;一个清晰、结构化的界面不仅能提升用户体验&#xff0c;更能帮助开发者建立良好的工程思维。本文将以一段在 OpenHarmony 模拟器中可直接运行的基础 Flutter 代码为例&…

1.3 Go语言核心语法速成:变量、函数、结构体10分钟快速上手

1.3 Go语言核心语法速成:变量、函数、结构体10分钟快速上手 引言 Go语言的语法设计简洁而强大,本文将通过大量实例快速掌握Go语言的核心语法:变量声明、函数定义、结构体使用。这些是Go语言的基础,掌握它们就能开始编写Go程序了。 一、变量声明 1.1 变量声明方式 Go语…

OA系统集成CKEDITOR时WORD粘贴功能失效怎么办?

企业网站后台管理系统Word/微信公众号内容导入功能解决方案 需求背景 作为广西某国企的项目负责人&#xff0c;我们面临在企业网站后台管理系统中增强内容编辑功能的需求。具体需求包括&#xff1a; Word粘贴功能&#xff1a;从Word复制内容可直接粘贴到编辑器&#xff0c;图…

雷达RCS仿真计算程序:工具、方法及实践指南

雷达散射截面&#xff08;Radar Cross Section, RCS&#xff09;是描述目标对雷达波散射能力的核心参数&#xff0c;其仿真计算广泛应用于雷达系统设计、隐身技术研发、目标识别等领域。随着电磁理论与计算技术的发展&#xff0c;RCS仿真工具已从传统的解析法演进到数值法&…

树莓派4b qt打包软件

用的树莓派4b, 下载的32位系统bullseye , glibc2.31 兼容性更高 https://downloads.raspberrypi.com/raspios_oldstable_armhf/images/raspios_oldstable_armhf-2025-05-07/ 2025-05-06-raspios-bullseye-armhf.img.xz…

vscode 中的(#+数字)前的方块去除

用vscode写verilog的tb文件时候延迟前有小方块,似乎是用来颜色选择的,不小心点到了,还会改变代码,非常不方便。找了方法关闭,在设置里面搜索color把这个选项关了就可以了。更改后效果。

2025年国内专业的防雨罩销售厂家哪家权威,以撒控制台/防雨罩/监控防雨箱/可移动式监控杆供应商哪家靠谱

行业洞察:防雨罩市场格局与核心竞争要素 随着工业自动化与户外设备需求的持续增长,防雨罩作为保障设备稳定运行的关键配件,其市场需求呈现稳步上升趋势。据行业统计,2024年国内防雨罩市场规模已突破20亿元,年复合…

国内乙型网带品牌2026排行,靠谱网带选它们,传动链条/不锈钢输送机/非标链条/垂直提升机,网带企业哪里有卖

行业背景:乙型网带市场持续扩容,品质与适配性成采购核心痛点 随着国内工业自动化进程加速,乙型网带作为输送设备核心部件,在食品加工、玻璃制造、冶金化工等领域的应用需求持续攀升。数据显示,2024年国内乙型网带…

收藏!Text2SQL核心逻辑与工程流程全解析,小白也能上手大模型项目

Text2SQL的核心本质&#xff0c;是让大语言模型&#xff08;LLM&#xff09;读懂数据库结构&#xff0c;成为一名“可控的翻译官”——将用户自然语言需求&#xff0c;精准转化为合规SQL语句。其完整工程流程包含9个关键步骤&#xff0c;其中Schema设计、Prompt构建与SQL校验是…

Jenkins流水线是怎么知道每个阶段运行结束了的?

Jenkins流水线是怎么知道每个阶段运行结束了的&#xff1f;Jenkins流水线判断每个阶段运行结束的机制基于Groovy脚本执行和状态回调。以下是详细原理&#xff1a; 1. 声明式流水线&#xff08;Declarative Pipeline&#xff09; pipeline {agent anystages {stage(Build) {step…

收藏!AI大模型应用开发学习指南:从零基础到拿高薪,踩准2026风口

AI大模型应用开发的薪资有多诱人&#xff1f;BOSS直聘上持续疯涨的岗位量和薪资跨度&#xff0c;就是最直观的答案&#xff01;&#x1f446; 2026年无疑是AI大模型应用全面爆发的黄金年&#xff0c;当下正是入局的最佳时机。真心建议所有理工科同学、职场程序员重点锁定这个赛…

南昌断桥门窗铝材厂家哪家好?丰安铝业来揭晓

2026年建筑建材行业持续向绿色化、定制化转型,断桥门窗铝材作为节能建筑的核心材料,其品质、供应效率与定制能力直接决定门窗幕墙企业的项目竞争力。无论是断桥门窗铝材的材质稳定性、特殊规格的定制响应速度,还是全…

日照婚宴场地服务哪家好,达禧宴会酒店服务贴心

2026年婚庆市场持续升级,一站式婚宴场地已成为新人筹备婚礼的核心选择。无论是风格多元的宴会厅、新鲜现做的菜品保障,还是贴心周到的细节服务,优质婚宴场地的专业能力直接决定婚礼的仪式感与新人的备婚体验。当前日…

剖析2026年冷库建造优质生产商排名,宏国制冷优势显著揭秘

2026年医药健康与食品冷链需求持续攀升,冷库建造已成为保障药品安全、食品新鲜度及工业物料存储质量的核心基础设施。无论是合规性严苛的医药GSP冷库、高效节能的食品保鲜冷库,还是定制化的超低温工业冷库,优质冷库…

2026年山东临沂、菏泽等地靠谱的化妆师美妆培训学校推荐,山东欧曼谛上榜

本榜单依托全维度市场调研与真实行业口碑,深度筛选出五家标杆美妆培训学校,为热爱美妆行业的学员提供客观依据,助力精准匹配适配的学习伙伴。 TOP1 推荐:山东欧曼谛时尚美业学校 推荐指数:★★★★★ | 口碑评分:…

盘点恒达管业排名,恒达管客户评价如何看这些案例

本榜单依托全维度市场调研与真实行业口碑,深度筛选出五家不锈钢波纹管领域标杆企业,为企业选型提供客观依据,助力精准匹配适配的管材供应商伙伴。 TOP1 推荐:安徽恒达管业有限责任公司 推荐指数:★★★★★ | 口碑…

2026年国内做得好的打包扣生产厂家口碑推荐,有实力的打包扣口碑推荐榜精选优质品牌解析

行业趋势与市场洞察:镀锌打包扣领域竞争格局升级 随着工业物流、建筑建材、金属加工等行业对包装材料需求持续增长,镀锌打包扣作为高强度、耐腐蚀的连接件,其市场价值日益凸显。据行业统计,2025年国内镀锌打包扣市…

Java 枚举的用法及实际使用场景_java enum类用法,零基础入门到精通,收藏这篇就够了

文章目录 一、什么是枚举&#xff1f; 枚举的主要特点&#xff1a; 二、枚举的基本使用方法 定义枚举 三、**实际使用场景** 代替常量状态机 四、更多用法 1.实现接口2.单例模式3.策略模式 总结 一、什么是枚举&#xff1f; 枚举&#xff08;enum&#xff09;是 Java 中一种特…

测试工程师指南:评估AI工具ROI的方法‌

随着人工智能技术在软件测试领域的广泛应用&#xff0c;测试工程师面临如何科学评估AI工具投资回报率&#xff08;ROI&#xff09;的挑战。ROI不仅关乎成本效益&#xff0c;还直接影响测试效率、质量和团队转型。本文基于行业最佳实践&#xff0c;提供一套完整的评估框架&#…