如何用 Josson 实现复杂 JSON 的双向映射转换(替代 JOLT)

冬静同学_8954

冬静同学_8954

2026-06-23

239人浏览

原创

如何用 Josson 实现复杂 JSON 的双向映射转换(替代 JOLT)

本文介绍一种比 JOLT 更简洁、可读性更强的方案——使用 Josson 库,将包含源表与目标表映射关系的嵌套 JSON 转换为结构化双向关联视图,自动生成 source 和 target 两大模块及跨表列级映射关系。

本文介绍一种比 jolt 更简洁、可读性更强的方案——使用 josson 库,将包含源表与目标表映射关系的嵌套 json 转换为结构化双向关联视图,自动生成 `source` 和 `target` 两大模块及跨表列级映射关系。

在数据集成、ETL 映射建模或元数据治理场景中,常需将原始的“源表→目标表”列映射配置(如 JSON 格式)转换为双向可查的结构化视图:既要能从某个源表快速定位其参与的所有目标表及对应列,也要能从某个目标表反查其依赖的全部源表与列。JOLT 虽强大,但面对此类多层嵌套、跨数组关联、动态键名(如 "vsc-user")和聚合去重等需求时,Spec 编写极易出错、调试困难且难以维护。

此时,Josson(一个基于 Java 的声明式 JSON 查询与转换库)成为更优选择。它支持变量绑定(.let())、条件筛选([...])、路径投影(.map())、对象合并(.mergeObjects())及字符串拼接(concat())等高级能力,语法接近 SQL/JSONPath,逻辑清晰、链式表达直观,大幅降低复杂映射的实现门槛。

Browser Js
Browser Js

轻量级CDP浏览器控制,适用于AI代理。相较于内置浏览器工具,token消耗降低3‑10倍,仅在浏览时使用。

下载

以下为完整实现步骤:

✅ 第一步:引入 Josson 依赖(Maven)

<dependency><groupid>com.octomix.josson</groupid><artifactid>josson</artifactid><version>1.5.0</version></dependency>

✅ 第二步:构建 Josson 实例并加载输入 JSON

Josson josson = Josson.fromJsonString(inputJsonString);

✅ 第三步:执行声明式转换(核心逻辑)

JsonNode result = josson.getNode(
    "map(" +
    "  source: sourceTables@" +
    "    .let($srcSchema: sourceSchemaName)" +
    "    .let($srcTable: sourceTableName)" +
    "    .map(concat(sourceSchemaName,'-',sourceTableName)::" +
    "      map(" +
    "        id: concat(sourceSchemaName,'-',sourceTableName)," +
    "        schemaName: sourceSchemaName," +
    "        tableName: sourceTableName," +
    "        mappedTargetTableNames: $.targetTables[targetTableColumnDefinitions[sourceSchemaName=$srcSchema & sourceTableName=$srcTable]]*.concat(targetSchemaName,'-',targetTableName)," +
    "        sourceColumnMap: sourceTableColumnDefinitions.map(" +
    "          sourceColumnName::map(" +
    "            sourceColumnDefinition: map(" +
    "              schemaName: $srcSchema," +
    "              tableName: $srcTable," +
    "              columnName: sourceColumnName," +
    "              columnType: sourceColumnType," +
    "              columnAttributes: sourceColumnAttributes" +
    "            )," +
    "            mappedTargetColumnDefinition: $.targetTables@" +
    "              .let($tgtSchema: targetSchemaName)" +
    "              .let($tgtTable: targetTableName)" +
    "              .targetTableColumnDefinitions[sourceSchemaName=$srcSchema & sourceTableName=$srcTable]*.map(" +
    "                schemaName: $tgtSchema," +
    "                tableName: $tgtTable," +
    "                columnName: targetColumn," +
    "                columnType: targetColumnType," +
    "                columnAttributes: targetColumnAttributes" +
    "              ).mergeObjects()" +
    "          )).mergeObjects()" +
    "        )" +
    "      ).mergeObjects()" +
    "    )," +
    "  " +
    "  target: targetTables@" +
    "    .let($tgtSchema: targetSchemaName)" +
    "    .let($tgtTable: targetTableName)" +
    "    .map(concat(targetSchemaName,'-',targetTableName)::" +
    "      map(" +
    "        id: concat(targetSchemaName,'-',targetTableName)," +
    "        schemaName: targetSchemaName," +
    "        tableName: targetTableName," +
    "        mappedSourceTables: targetTableColumnDefinitions.concat(sourceSchemaName,'-',sourceTableName)," +
    "        targetColumnMap: targetTableColumnDefinitions@" +
    "          .let($srcSchema: sourceSchemaName)" +
    "          .let($srcTable: sourceTableName)" +
    "          .let($srcColumn: sourceColumnName)" +
    "          .map(targetColumn::map(" +
    "            targetColumnDefinition: map(" +
    "              schemaName: $tgtSchema," +
    "              tableName: $tgtTable," +
    "              columnName: targetColumn," +
    "              columnType: targetColumnType," +
    "              columnAttributes: targetColumnAttributes" +
    "            )," +
    "            mappedSourceColumnDefinition: $.sourceTables[sourceSchemaName=$srcSchema & sourceTableName=$srcTable].sourceTableColumnDefinitions[sourceColumnName=$srcColumn].map(" +
    "              schemaName: $srcSchema," +
    "              tableName: $srcTable," +
    "              columnName: $srcColumn," +
    "              columnType: sourceColumnType," +
    "              columnAttributes: sourceColumnAttributes" +
    "            )" +
    "          )).mergeObjects()" +
    "      ).mergeObjects()" +
    "    )" +
    ")"
);
System.out.println(result.toPrettyString());

⚠️ 关键注意事项

  • 空值处理:Josson 默认保留原始空字符串(""),如需转为 null,可在 .map() 中显式判断:columnAttributes: if(sourceColumnAttributes=='', null, sourceColumnAttributes)。
  • 去重保障:mappedTargetTableNames 和 mappedSourceTables 使用 *.concat(...) 后自动去重(Josson 内置行为),无需额外 dedup 操作。
  • 性能提示:对于超大规模元数据(>10k 表),建议预构建索引视图(如 $.sourceTables.indexBy('sourceSchemaName','sourceTableName'))提升关联查询效率。
  • JOLT 对比:同等逻辑若用 JOLT 实现,需组合 shift、modify-overwrite-beta、cardinality 等多个阶段,Spec 长度超 200 行且难以验证中间状态;Josson 单一链式表达即可完成,开发与维护成本显著降低。

该方案已通过您提供的示例数据验证,输出严格匹配目标结构(source / target 双模块、动态键名、列级双向映射、mappedTargetTableNames 与 mappedSourceTables 数组等),是处理此类元数据建模任务的推荐实践。

相关专题

更多
js正则表达式
js正则表达式

php中文网为大家提供各种js正则表达式语法大全以及各种js正则表达式使用的方法,还有更多js正则表达式的相关文章、相关下载、相关课程,供大家免费下载体验。

2023.06.20

4076

8

js获取当前时间
js获取当前时间

JS全称JavaScript,是一种具有函数优先的轻量级,解释型或即时编译型的编程语言;它是一种属于网络的高级脚本语言,主要用于Web,常用来为网页添加各式各样的动态功能。js怎么获取当前时间呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.28

1275

5

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.03

1638

5

js是什么意思
js是什么意思

JS是JavaScript的缩写,它是一种广泛应用于网页开发的脚本语言。JavaScript是一种解释性的、基于对象和事件驱动的编程语言,通常用于为网页增加交互性和动态性。它可以在网页上实现复杂的功能和效果,如表单验证、页面元素操作、动画效果、数据交互等。

2023.08.17

9623

11

js删除节点的方法
js删除节点的方法

js删除节点的方法有:1、removeChild()方法,用于从父节点中移除指定的子节点,它需要两个参数,第一个参数是要删除的子节点,第二个参数是父节点;2、parentNode.removeChild()方法,可以直接通过父节点调用来删除子节点;3、remove()方法,可以直接删除节点,而无需指定父节点;4、innerHTML属性,用于删除节点的内容。

2023.09.01

920

4

js截取字符串的方法
js截取字符串的方法

js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.04

2464

5

Js中concat和push的区别
Js中concat和push的区别

Js中concat和push的区别:1、concat用于将两个或多个数组合并成一个新数组,并返回这个新数组,而push用于向数组的末尾添加一个或多个元素,并返回修改后的数组的新长度;2、concat不会修改原始数组,是创建新的数组,而push会修改原数组,将新元素添加到原数组的末尾等等。本专题为大家提供concat和push相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.14

1489

5

js截取字符串的方法介绍
js截取字符串的方法介绍

JavaScript字符串截取方法,包括substring、slice、substr、charAt和split方法。这些方法可以根据具体需求,灵活地截取字符串的不同部分。在实际开发中,根据具体情况选择合适的方法进行字符串截取,能够提高代码的效率和可读性 。

2023.09.21

4229

3

js生成随机数方法
js生成随机数方法

JavaScript生成随机数的方法,包括使用Math.random()方法生成指定范围内的随机整数、生成随机字符串和生成随机颜色。根据具体需求,可以选择适合的方法来生成随机数,以实现各种功能 。

2023.09.25

2415

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
jsp在线参考手册
jsp在线参考手册

共32课时 | 28.8万人学习

WEB前端教程【HTML5+CSS3+JS】
WEB前端教程【HTML5+CSS3+JS】

共101课时 | 20.9万人学习