Java 文件读写怎么用断点续传处理大文件

千婷酱_3538

千婷酱_3538

2026-11-21

112人浏览

原创

java 中处理大文件断点续传的核心做法是利用 randomaccessfile 的随机读写能力,在每次写入前通过 seek() 方法将文件指针定位到已传输的字节偏移量处,从而实现从断点继续追加数据。具体实现时,需要维护一个记录当前进度的状态(如本地文件大小或远程服务器确认的大小),在建立连接后设置 range 请求头告知服务端起始位置,同时打开本地文件时使用 "rw" 模式并调用 seek() 跳过已存在部分,随后使用 inputstream.read() 循环读取网络流并写入文件,直到流结束。

Java 文件读写怎么用断点续传处理大文件

如何确定续传的起始偏移量

确定起始偏移量的关键在于对比本地已保存文件的长度与远程文件总大小。如果本地文件不存在,偏移量为 0;如果本地文件存在,其长度即为已下载/上传的字节数,这就是下一次操作的起始位置。在实际代码中,可以通过 File.length() 获取本地进度,并结合 HTTP 响应头中的 Content-Range 或 Content-Length 来验证一致性,确保不会覆盖已正确传输的数据块。

Java 文件读写怎么用断点续传处理大文件

import java.io.*;
import java.net.HttpURLConnection;
import java.net.URL;

public class BreakpointResumeDownload {
    public static void main(String[] args) throws Exception {
        String urlStr = "https://example.com/largefile.zip";
        String localPath = "./largefile.zip";
        URL url = new URL(urlStr);
        HttpURLConnection conn = (HttpURLConnection) url.openConnection();
        conn.setRequestMethod("GET");
        
        File localFile = new File(localPath);
        long startPos = 0;
        if (localFile.exists()) {
            startPos = localFile.length();
            System.out.println("Resuming from: " + startPos);
        }
        
        // Set Range header for server to send partial content
        conn.setRequestProperty("Range", "bytes=" + startPos + "-");
        
        int responseCode = conn.getResponseCode();
        if (responseCode == 206 || responseCode == 200) { // 200 OK means no range support, start from 0
            if (responseCode == 200 && startPos > 0) {
                 // If server doesn't support range but we have data, we might need to handle overlap
                 // For simplicity, assume server supports range or we restart if 200 and startPos > 0
                 // Here we strictly follow 206 logic
            }
        } else {
            throw new RuntimeException("Server error: " + responseCode);
        }

        InputStream in = conn.getInputStream();
        RandomAccessFile raf = new RandomAccessFile(localFile, "rw");
        raf.seek(startPos); // Move pointer to resume position
        
        byte[] buffer = new byte[4096];
        int len;
        while ((len = in.read(buffer)) != -1) {
            raf.write(buffer, 0, len);
        }
        
        raf.close();
        in.close();
        System.out.println("Download completed.");
    }
}

如何在多线程环境下保证数据完整性

在多线程断点续传场景中,每个线程负责下载文件的一个特定字节范围。为了保证数据完整性,必须为每个线程分配不重叠的区间,并使用 RandomAccessFile 的 seek() 方法让每个线程精准定位到自己的写入位置。由于多个线程同时写入同一个文件的不同区域,操作系统和文件系统通常能保证原子性的块写入,但需确保缓冲区刷新顺序不影响最终结果。更稳妥的做法是,每个线程独立维护自己的局部进度,并在所有线程结束后合并校验,或者使用同步机制确保元数据的一致性。

FilePond 灵活的 JavaScript 文件上传库
FilePond 灵活的 JavaScript 文件上传库

FilePond 是一个 JavaScript 文件上传库,支持通过拖拽、粘贴和 API 方式处理文件、目录、URL 和 Data URI。它包含内置的图像优化功能、异步分块上传功能,并提供了适用于 React、Vue、Angular 和 Svelte 的适配器。

下载

Java 文件读写怎么用断点续传处理大文件

import java.io.*;
import java.net.HttpURLConnection;
import java.net.URL;

public class MultiThreadResumeDownload {
    private static final int THREAD_COUNT = 4;
    private static long fileSize = 0;

    public static void main(String[] args) throws Exception {
        String urlStr = "https://example.com/largefile.zip";
        String localPath = "./largefile_multi.zip";
        URL url = new URL(urlStr);
        HttpURLConnection conn = (HttpURLConnection) url.openConnection();
        conn.setRequestMethod("HEAD"); // Get file size without downloading body
        fileSize = conn.getContentLengthLong();
        conn.disconnect();

        File localFile = new File(localPath);
        if (!localFile.exists()) localFile.createNewFile();
        
        // Initialize file size if needed
        if (localFile.length()  {
                try {
                    downloadChunk(urlStr, localPath, s, e);
                } catch (Exception e) {
                    e.printStackTrace();
                }
            });
            threads[i].start();
        }

        for (Thread t : threads) {
            t.join();
        }
        System.out.println("Multi-thread download completed.");
    }

    private static void downloadChunk(String urlStr, String localPath, long start, long end) throws Exception {
        File localFile = new File(localPath);
        RandomAccessFile raf = new RandomAccessFile(localFile, "rw");
        raf.seek(start);

        URL url = new URL(urlStr);
        HttpURLConnection conn = (HttpURLConnection) url.openConnection();
        conn.setRequestMethod("GET");
        conn.setRequestProperty("Range", "bytes=" + start + "-" + end);

        InputStream in = conn.getInputStream();
        byte[] buffer = new byte[4096];
        int len;
        while ((len = in.read(buffer)) != -1) {
            raf.write(buffer, 0, len);
        }
        
        raf.close();
        in.close();
        System.out.println("Thread finished range: " + start + "-" + end);
    }
}

如何处理网络中断导致的写入不一致

当网络中断发生时,InputStream.read() 会抛出异常,此时程序退出。由于使用了 RandomAccessFile 直接写入磁盘,操作系统可能会将部分缓冲区数据刷入磁盘,也可能未完全刷新,导致文件末尾出现残缺数据。为解决此问题,应在每次成功写入一定批次数据后显式调用 raf.flush(),并在捕获异常时检查本地文件大小是否超过预期断点。如果本地文件比断点大,说明有脏数据,应截断文件至断点位置再重试,确保下次续传时从干净的断点开始,避免数据错乱。

Java免费学习笔记:立即使用
解锁 Java 大师之旅:从入门到精通的终极指南

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

java

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
java
java

Java是一个通用术语,用于表示Java软件及其组件,包括“Java运行时环境 (JRE)”、“Java虚拟机 (JVM)”以及“插件”。php中文网还为大家带了Java相关下载资源、相关课程以及相关文章等内容,供大家免费下载使用。

2023.06.15

13077

6

java正则表达式语法
java正则表达式语法

java正则表达式语法是一种模式匹配工具,它非常有用,可以在处理文本和字符串时快速地查找、替换、验证和提取特定的模式和数据。本专题提供java正则表达式语法的相关文章、下载和专题,供大家免费下载体验。

2023.07.05

10142

9

java自学难吗
java自学难吗

Java自学并不难。Java语言相对于其他一些编程语言而言,有着较为简洁和易读的语法,本专题为大家提供java自学难吗相关的文章,大家可以免费体验。

2023.07.31

8592

8

java配置jdk环境变量
java配置jdk环境变量

Java是一种广泛使用的高级编程语言,用于开发各种类型的应用程序。为了能够在计算机上正确运行和编译Java代码,需要正确配置Java Development Kit(JDK)环境变量。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.01

1364

3

java保留两位小数
java保留两位小数

Java是一种广泛应用于编程领域的高级编程语言。在Java中,保留两位小数是指在进行数值计算或输出时,限制小数部分只有两位有效数字,并将多余的位数进行四舍五入或截取。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.02

1088

3

java基本数据类型
java基本数据类型

java基本数据类型有:1、byte;2、short;3、int;4、long;5、float;6、double;7、char;8、boolean。本专题为大家提供java基本数据类型的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

1636

5

java有什么用
java有什么用

java可以开发应用程序、移动应用、Web应用、企业级应用、嵌入式系统等方面。本专题为大家提供java有什么用的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

3429

5

java在线网站
java在线网站

Java在线网站是指提供Java编程学习、实践和交流平台的网络服务。近年来,随着Java语言在软件开发领域的广泛应用,越来越多的人对Java编程感兴趣,并希望能够通过在线网站来学习和提高自己的Java编程技能。php中文网给大家带来了相关的视频、教程以及文章,欢迎大家前来学习阅读和下载。

2023.08.03

20631

3

配置java环境变量
配置java环境变量

配置Java环境变量是为了让操作系统能够识别和使用Java的相关命令和功能。本专题为大家提供配置java环境变量相关文章,帮助大家解决问题。

2023.08.03

1475

8

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
dev.java 官方:Learn Java
dev.java 官方:Learn Java

共0课时 | 0人学习

Java JDBC数据库连接官方教程
Java JDBC数据库连接官方教程

共0课时 | 0人学习