Java 对象序列化怎么用分片传输大对象

夏敏姑娘_3678

夏敏姑娘_3678

2026-11-21

775人浏览

原创

java 原生序列化不支持分片传输,必须手动将大对象拆分为字节数组片段并逐个发送。具体做法是调用 objectoutputstream 生成完整字节流后,使用 system.arraycopy 按固定大小截取子数组,通过循环或线程池并发发送这些子块,接收端收集所有子块后拼接成完整字节流,再使用 objectinputstream 反序列化恢复对象。

Java 对象序列化怎么用分片传输大对象

如何拆分和发送序列化字节流

拆分过程是将序列化后的字节数组按指定阈值切分。发送时通常结合网络协议(如 TCP)或消息队列,为每个分片添加序号以便排序。以下代码展示了如何将一个包含大量数据的 Java 对象序列化为字节流,并按 1024 字节大小进行分片发送的逻辑模拟。

Java 对象序列化怎么用分片传输大对象

import java.io.*;
import java.util.ArrayList;
import java.util.List;

public class SerializationSplitter {
    public static void main(String[] args) throws Exception {
        // 1. 准备一个大对象
        LargeDataObject obj = new LargeDataObject();
        obj.setData(new byte[10000]); // 模拟 10KB 数据

        // 2. 序列化对象为字节数组
        ByteArrayOutputStream baos = new ByteArrayOutputStream();
        ObjectOutputStream oos = new ObjectOutputStream(baos);
        oos.writeObject(obj);
        oos.close();
        byte[] fullBytes = baos.toByteArray();

        // 3. 定义分片大小
        int chunkSize = 1024;
        List<byte> chunks = new ArrayList();

        // 4. 拆分字节数组
        for (int i = 0; i <p>运行上述代码,控制台会输出总共有多少个分片以及每个分片的字节数。对于 10KB 的数据,若分片大小为 1024 字节,将产生约 10 个分片。最后一个分片的大小可能小于 1024 字节。这种拆分方式确保了每个分片都是完整的字节序列,便于在网络中独立传输。</p>
<h2>如何接收并重组序列化字节流</h2>
<p>接收端需要维护一个缓冲区或使用列表来存储接收到的分片。由于网络传输可能导致分片乱序,接收端必须根据分片序号对数据进行排序,然后按顺序拼接。拼接完成后,即可使用 <code>ObjectInputStream</code> 进行反序列化。以下代码展示了如何从分片列表中重组字节流并反序列化对象。</p><div class="aritcle_card flexRow artxards">
											<div class="artcardd flexRow">
												<a class="aritcle_card_img" rel="nofollow" href="/xiazai/skill13505" title="FilePond 灵活的 JavaScript 文件上传库"><img
														src="https://img.php.cn/upload/skill/001/246/273/6adaf20e695c2374.jpg" alt="FilePond 灵活的 JavaScript 文件上传库" onerror="this.onerror='';this.src='/static/lhimages/moren/morentu.png'" ></a>
												<div class="aritcle_card_info flexColumn">
													<a rel="nofollow" href="/xiazai/skill13505" title="FilePond 灵活的 JavaScript 文件上传库" class="overflowclass">FilePond 灵活的 JavaScript 文件上传库</a>
													<p class="overflowclass">FilePond 是一个 JavaScript 文件上传库,支持通过拖拽、粘贴和 API 方式处理文件、目录、URL 和 Data URI。它包含内置的图像优化功能、异步分块上传功能,并提供了适用于 React、Vue、Angular 和 Svelte 的适配器。</p>
												</div>
												<a rel="nofollow" href="/xiazai/skill13505" title="FilePond 灵活的 JavaScript 文件上传库" class="aritcle_card_btn flexRow flexcenter"><b></b><span>下载</span>
												</a>
											</div>
										</div>
<p><img src="https://img.php.cn/upload/article/001/242/473/179522978826290.png?x-oss-process=image/resize,p_40" alt="Java 对象序列化怎么用分片传输大对象"></p>
<pre class="java">import java.io.*;
import java.util.*;

public class SerializationReassembler {
    public static void main(String[] args) throws Exception {
        // 模拟接收到的分片列表(实际场景中需处理乱序和丢包)
        List<chunk> receivedChunks = new ArrayList();
        // 假设这里已经通过某种机制接收到了所有分片
        // 为了演示,我们直接复用之前的逻辑生成分片
        LargeDataObject originalObj = new LargeDataObject();
        originalObj.setData(new byte[10000]);
        ByteArrayOutputStream baos = new ByteArrayOutputStream();
        ObjectOutputStream oos = new ObjectOutputStream(baos);
        oos.writeObject(originalObj);
        oos.close();
        byte[] fullBytes = baos.toByteArray();
        int chunkSize = 1024;
        
        // 模拟接收端收集分片
        Map<integer byte> chunkMap = new HashMap();
        for (int i = 0; i  reassembledBytesList = new ArrayList();
        for (int i = 0; i <p>该程序首先将原始字节流重新组合成一个连续的字节数组,然后通过 <code>ByteArrayInputStream</code> 和 <code>ObjectInputStream</code> 成功还原了原始对象。关键点在于确保所有分片都已到达且顺序正确。在实际网络环境中,通常需要实现更复杂的协议来处理分片丢失、重复和乱序问题,例如使用序列号、确认机制和重传策略。</p>
<h2>如果分片在传输过程中丢失怎么办</h2>
<p>如果某个分片在传输过程中丢失,接收端将无法重组出完整的字节流,导致反序列化失败。因为 Java 序列化格式是紧密耦合的,缺少任何字节都会破坏整个流的完整性。因此,必须依赖底层传输协议(如 TCP)或应用层的重传机制来保证分片的可靠交付。TCP 协议本身提供了可靠传输,但如果使用的是 UDP 等不可靠协议,则需要在应用层实现类似 ARQ(自动重传请求)的机制。此外,还可以引入校验和(Checksum)或哈希值来检测分片是否损坏。如果检测到损坏或丢失,接收端可以请求发送端重传特定的分片。另一种策略是使用支持断点续传或分片重试的高级序列化库或框架,但 Java 原生 API 不提供此类功能,开发者需自行实现。</p></integer></chunk>

Java免费学习笔记:立即使用
解锁 Java 大师之旅:从入门到精通的终极指南

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

java

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
java
java

Java是一个通用术语,用于表示Java软件及其组件,包括“Java运行时环境 (JRE)”、“Java虚拟机 (JVM)”以及“插件”。php中文网还为大家带了Java相关下载资源、相关课程以及相关文章等内容,供大家免费下载使用。

2023.06.15

13077

6

java正则表达式语法
java正则表达式语法

java正则表达式语法是一种模式匹配工具,它非常有用,可以在处理文本和字符串时快速地查找、替换、验证和提取特定的模式和数据。本专题提供java正则表达式语法的相关文章、下载和专题,供大家免费下载体验。

2023.07.05

10142

9

java自学难吗
java自学难吗

Java自学并不难。Java语言相对于其他一些编程语言而言,有着较为简洁和易读的语法,本专题为大家提供java自学难吗相关的文章,大家可以免费体验。

2023.07.31

8592

8

java配置jdk环境变量
java配置jdk环境变量

Java是一种广泛使用的高级编程语言,用于开发各种类型的应用程序。为了能够在计算机上正确运行和编译Java代码,需要正确配置Java Development Kit(JDK)环境变量。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.01

1364

3

java保留两位小数
java保留两位小数

Java是一种广泛应用于编程领域的高级编程语言。在Java中,保留两位小数是指在进行数值计算或输出时,限制小数部分只有两位有效数字,并将多余的位数进行四舍五入或截取。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.02

1088

3

java基本数据类型
java基本数据类型

java基本数据类型有:1、byte;2、short;3、int;4、long;5、float;6、double;7、char;8、boolean。本专题为大家提供java基本数据类型的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

1636

5

java有什么用
java有什么用

java可以开发应用程序、移动应用、Web应用、企业级应用、嵌入式系统等方面。本专题为大家提供java有什么用的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

3429

5

java在线网站
java在线网站

Java在线网站是指提供Java编程学习、实践和交流平台的网络服务。近年来,随着Java语言在软件开发领域的广泛应用,越来越多的人对Java编程感兴趣,并希望能够通过在线网站来学习和提高自己的Java编程技能。php中文网给大家带来了相关的视频、教程以及文章,欢迎大家前来学习阅读和下载。

2023.08.03

20631

3

配置java环境变量
配置java环境变量

配置Java环境变量是为了让操作系统能够识别和使用Java的相关命令和功能。本专题为大家提供配置java环境变量相关文章,帮助大家解决问题。

2023.08.03

1475

8

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
dev.java 官方:Learn Java
dev.java 官方:Learn Java

共0课时 | 0人学习

Java JDBC数据库连接官方教程
Java JDBC数据库连接官方教程

共0课时 | 0人学习