news 2026/4/16 13:32:06

JSP中如何利用分片技术实现超大附件的上传优化?

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
JSP中如何利用分片技术实现超大附件的上传优化?

专业开发日记:WebUploader大文件传输系统(信创兼容版)

日期:2023年11月15日 星期三 郑州 晴

项目背景

今日接到客户紧急需求:开发一套支持20G大文件传输的Web系统,需兼容IE8及信创浏览器(龙芯、红莲花、奇安信),支持文件夹层级结构上传/下载,并满足国产化环境要求(统信UOS/中标麒麟/银河麒麟+达梦/人大金仓数据库)。客户强调需免费开源7×24小时支持,且现有开源方案(如WebUploader默认实现)存在文件夹上传缺陷。

技术选型与挑战

  1. 前端框架:JSP + WebUploader(基于Flash兼容IE8,HTML5模式兼容现代浏览器)
  2. 后端:JSP/Servlet(Servlet 3.0异步上传)
  3. 加密传输:SM4(国密) + AES(双协议支持)
  4. 信创适配:通过WebUploader的runtimeOrder配置优先使用flash兼容旧系统
  5. 文件夹上传:需递归解析文件夹结构,生成JSON元数据与文件分片同步传输

核心代码实现

1. 前端配置(JSP页面)
<%@ page contentType="text/html;charset=UTF-8" %> 信创大文件传输系统 选择文件/文件夹 开始上传 var uploader = WebUploader.create({ swf: '/webuploader/Uploader.swf', server: '/upload?action=chunk', pick: { id: '#filePicker', directory: true // 启用文件夹上传 }, formData: { encryptType: 'SM4' // 默认使用SM4加密 }, chunked: true, chunkSize: 5 * 1024 * 1024, // 5MB分片 threads: 3, runtimeOrder: 'flash', // 强制Flash兼容IE8 compress: false }); // 文件夹结构处理 uploader.on('filesQueued', function(files) { files.forEach(file => { if (file.isDir) { // 递归读取文件夹(需配合Flash文件系统API) console.log('检测到文件夹:', file.name); } }); }); // 上传前加密(示例:SM4 ECB模式) uploader.on('uploadBeforeSend', function(block, data) { var key = '1234567890abcdef'; // 实际应从服务端获取 var ciphertext = SM4.encrypt(block.chunk, key); data.ciphertext = ciphertext; });
2. 后端处理(JSP/Servlet)
// UploadServlet.java (Servlet 3.0+)@WebServlet("/upload")@MultipartConfigpublicclassUploadServletextendsHttpServlet{protectedvoiddoPost(HttpServletRequestrequest,HttpServletResponseresponse)throwsServletException,IOException{Stringaction=request.getParameter("action");StringencryptType=request.getParameter("encryptType");if("chunk".equals(action)){// 处理分片上传PartfilePart=request.getPart("file");StringchunkIndex=request.getParameter("chunk");StringfileName=request.getParameter("name");// 解密逻辑(示例:AES)if("AES".equals(encryptType)){Stringciphertext=request.getParameter("ciphertext");// byte[] decrypted = AESUtil.decrypt(ciphertext, KEY);// 实际需将解密数据写入临时文件}// 保存分片到临时目录StringtempPath="/tmp/uploads/"+fileName+"_"+chunkIndex;try(InputStreamin=filePart.getInputStream();FileOutputStreamout=newFileOutputStream(tempPath)){byte[]buffer=newbyte[1024];intbytesRead;while((bytesRead=in.read(buffer))!=-1){out.write(buffer,0,bytesRead);}}response.getWriter().write("{\"status\":1}");}}}
3. 文件夹元数据处理
// 前端生成文件夹结构JSONfunctiongenerateFolderMeta(fileEntry){varmeta={name:fileEntry.name,isDir:fileEntry.isDir,children:[]};if(meta.isDir){// 递归读取子文件(需Flash支持)// var reader = fileEntry.createReader();// reader.readEntries(function(entries) {// entries.forEach(entry => {// meta.children.push(generateFolderMeta(entry));// });// });}returnmeta;}// 后端合并分片时重建目录结构// 需在所有分片上传完成后调用合并接口

信创环境适配方案

  1. 浏览器兼容

    • 通过webuploader.flashonly.js强制使用Flash运行时
    • 测试验证:龙芯浏览器(MIPS架构)需Flash插件支持
  2. 操作系统适配

    • 统信UOS:使用Debian包管理安装Java 8 + Tomcat 8
    • 中标麒麟:提供RPM安装包及依赖解决脚本
  3. 数据库适配

    // 达梦数据库连接示例publicclassDMDataSource{publicstaticConnectiongetConnection()throwsSQLException{DriverManager.registerDriver(newdm.jdbc.driver.DmDriver());returnDriverManager.getConnection("jdbc:dm://localhost:5236/DAMENG","SYSDBA","SYSDBA");}}

当前问题与求助

  1. 文件夹上传缺陷

    • WebUploader默认Flash实现无法递归读取子文件夹(需自定义扩展)
    • 信创浏览器对Flash的支持存在差异(红莲花浏览器需额外配置)
  2. 加密性能优化

    • 20G文件加密传输导致内存溢出,需实现流式加密
  3. 断点续传实现

    • 需设计分片校验机制(MD5校验和)

寻求帮助
诚邀熟悉WebUploader源码、信创环境开发的大神加入QQ群:374992201,提供以下支持:

  1. 完善文件夹递归上传逻辑
  2. 协助优化SM4加密性能
  3. 测试跨浏览器兼容性

明日计划

  1. 完成分片合并接口开发
  2. 搭建统信UOS测试环境
  3. 编写国产化数据库适配层

(签名:郑州某高校大三学生 张工)

导入项目

导入到Eclipse:点击查看教程
导入到IDEA:点击查看教程
springboot统一配置:点击查看教程

工程

NOSQL

NOSQL示例不需要任何配置,可以直接访问测试

创建数据表

选择对应的数据表脚本,这里以SQL为例

修改数据库连接信息

访问页面进行测试

文件存储路径

up6/upload/年/月/日/guid/filename

效果预览

文件上传

文件刷新续传

支持离线保存文件进度,在关闭浏览器,刷新浏览器后进行不丢失,仍然能够继续上传

文件夹上传

支持上传文件夹并保留层级结构,同样支持进度信息离线保存,刷新页面,关闭页面,重启系统不丢失上传进度。

下载示例

点击下载完整示例

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/4/13 0:41:15

DiffSynth-Studio训练踩坑记录

DiffSynth-Studio训练踩坑记录&#xff1a;PyTorch 2.5.1 Meta Tensor 新增模块 strictTrue 导致的加载失败环境&#xff1a; PyTorch 2.5.1DiffSynth-Studio / Wan2.1-T2V-1.3B 任务&#xff1a;在官方 WanVideo 模型基础上增加模块&#xff0c;继续训练 LoRA这篇文章记录一…

作者头像 李华
网站建设 2026/4/12 15:07:52

7、OpenWrt第三方固件使用指南

OpenWrt第三方固件使用指南 1. 配置和使用OpenWrt 在Linksys设备上安装OpenWrt后,可通过GUI或命令行进行配置。强烈建议使用命令行,它功能强大,便于实现高级配置,而GUI功能有限,仅能进行基本设置。OpenWrt命令行基于Linux/UNIX,由BusyBox处理,它是一个小而强大的可执行…

作者头像 李华
网站建设 2026/4/13 16:03:07

在调度的花园里面挖呀挖

上文使用koordinator演示gang-scheduling和binpack调度&#xff0c; 已经生效。4个2卡Pod龟缩在一个节点&#xff0c;另外一个2卡Pod被挤到另外一个节点&#xff08;每节点上虚拟gpu&#xff1a;8卡&#xff09;。此时我们再尝试申请8卡作业&#xff0c;pod会Pending状态。但一…

作者头像 李华
网站建设 2026/3/25 19:30:32

万亿参数Kimi K2大语言模型:如何3分钟完成快速部署的完整指南

在人工智能技术飞速发展的今天&#xff0c;开发者和研究者面临着一个共同的挑战&#xff1a;如何在有限的计算资源下部署和运行万亿参数级别的大语言模型&#xff1f;Moonshot AI最新开源的Kimi-K2-Base模型以其1万亿总参数和320亿激活参数的混合专家架构&#xff0c;为这一难题…

作者头像 李华