在Java中处理大文件上传时，如果直接将整个文件加载到内存中，很容易导致内存溢出（OutOfMemoryError），为了避免这个问题，我们需要采用流式传输来逐步读取和写入数据，以下是一些常用的技术和步骤，用于解决大文件上传导致的内存溢出问题：

（图片来源网络，侵删）

1. 使用Servlet 3.0的异步支持

如果你的应用运行在支持Servlet 3.0及以上版本的服务器上，你可以利用其提供的异步请求特性，通过@WebServlet注解的asyncSupported属性设置为true，可以开启异步请求支持。

@WebServlet(urlPatterns = "/upload", asyncSupported = true)public class FileUploadServlet extends HttpServlet {    // ...}

2. 使用Apache Commons FileUpload

Apache Commons FileUpload是一个开源库，它提供了处理文件上传的功能，它能够处理多部分请求，并且允许你以流的方式读取上传的文件。

依赖

在你的pom.xml文件中添加以下依赖：

<dependency>    <groupId>commonsfileupload</groupId>    <artifactId>commonsfileupload</artifactId>    <version>1.4</version></dependency>

代码示例

import org.apache.commons.fileupload.servlet.ServletFileUpload;import org.apache.commons.fileupload.disk.DiskFileItemFactory;// ...protected void doPost(HttpServletRequest request, HttpServletResponse response) throws ServletException, IOException {    if (!ServletFileUpload.isMultipartContent(request)) {        throw new ServletException("Content type is not multipart/formdata");    }    DiskFileItemFactory factory = new DiskFileItemFactory();    ServletFileUpload upload = new ServletFileUpload(factory);    try {        List<FileItem> items = upload.parseRequest(request);        for (FileItem item : items) {            if (!item.isFormField()) {                String fileName = item.getName();                InputStream inputStream = item.getInputStream();                // 这里可以使用输入流进行文件处理，例如保存到磁盘或数据库等            }        }    } catch (Exception e) {        // 异常处理    }}

3. 使用Spring框架的MultipartResolver

如果你的项目是基于Spring框架的，你可以使用Spring提供的MultipartResolver接口实现类来处理文件上传。

配置

在Spring配置文件中添加MultipartResolver的bean定义：

<bean id="multipartResolver" class="org.springframework.web.multipart.commons.CommonsMultipartResolver">    <!设置最大上传文件大小 >    <property name="maxUploadSize" value="10485760"/></bean>

代码示例

import org.springframework.web.multipart.MultipartFile;// ...@RequestMapping(value = "/upload", method = RequestMethod.POST)public String handleFileUpload(@RequestParam("file") MultipartFile file) {    try {        // 获取文件名        String fileName = file.getOriginalFilename();        // 获取文件输入流        InputStream inputStream = file.getInputStream();        // 使用输入流进行后续操作    } catch (IOException e) {        // 异常处理    }    return "success";}

4. 分块上传和断点续传

对于非常大的文件，即使使用了流式处理，也可能会遇到网络不稳定导致的问题，在这种情况下，可以考虑使用分块上传和断点续传技术，这涉及到客户端将文件分割成多个小块，然后逐个上传，服务器端接收到每个小块后进行处理，如果某个块上传失败，可以从失败的地方重新开始上传，而不是重传整个文件。

5. 使用云存储服务

对于超大文件的处理，还可以考虑直接使用云存储服务，如Amazon S3、Google Cloud Storage等，这些服务通常提供了SDK，可以直接将文件从客户端上传到云端，避免了服务器端的内存压力。

总结

处理大文件上传时，关键是要避免一次性将整个文件加载到内存中，通过使用流式处理、分块上传、异步处理等技术，可以有效地减少内存使用，避免内存溢出错误，结合现代的云存储服务，可以进一步提高大文件上传的效率和可靠性。

上一篇：Spring Cloud的五大组件及使用原理

下一篇：java 大文件上传解决方案