SSIS实现维度表缓慢变化

夜磊君_2886

夜磊君_2886

2026-08-11

664人浏览

原创

ssis 是 microsoft sql server integration services 的缩写,专为构建高性能数据集成解决方案而设计。通过结合 sql server agent 作业,可便捷地实现 ssis 包的定时自动执行,显著增强任务调度能力与系统运行的可靠性,尤其适用于多层级、高复杂度的数据处理业务场景。

1、在本地路径 C:\SSIS\Books_scd.xlsx 下创建 Excel 源文件,并填入指定测试数据;同时,在目标数据库中新建表 dbo.books_scd,用以承载源数据并支撑后续缓慢变化维度(SCD)逻辑处理,确保数据导入准确、结构兼容。

SSIS实现维度表缓慢变化

2、打开项目中的 SlowlyChangingDimension.dtsx 包,切换至“数据流”选项卡,定位并双击“Excel 连接管理器”,进入配置窗口。将 Excel 文件路径更新为 C:\SSIS\Books_scd.xlsx,确认路径有效后点击“确定”完成配置。

SSIS实现维度表缓慢变化

3、单击“确定”退出连接管理器设置后,双击“Excel 源”组件,进入编辑界面,并切换至“列”选项卡,核对源数据字段名称、顺序及数据类型是否与 Excel 文件一致。

SSIS实现维度表缓慢变化

4、确认列信息无误后,双击“数据转换”任务(Data Conversion),依据实际需求调整字段映射与数据类型转换规则。

SSIS实现维度表缓慢变化

5、点击“确定”保存转换设置,随后从 SSIS 工具箱中拖拽“缓慢变化维”(Slowly Changing Dimension)控件至数据流设计区,并将其输入端口与上游数据流输出端相连。双击该控件启动向导,在欢迎页直接点击“下一步”。在“选择连接和表”步骤中,正确配置目标维度表(dbo.books_scd)及相关键字段;系统将自动识别源列并生成副本列(如 Copy of Book Name),其中“Book Name”的副本列被设为“业务键(Business Key)”,作为维度实体唯一标识,是支撑历史版本追踪与增量更新的核心依据。

SSIS实现维度表缓慢变化

SSIS实现维度表缓慢变化

6、进入“配置维度列”步骤后,分别设定各字段的变更类型:BoughtDate 设置为“变化属性(Changing Attribute)”,支持值更新但不保留历史;Price 设为“历史属性(Historical Attribute)”,每次变更均生成新记录并保留旧版本;Store 则设为“固定属性(Fixed Attribute)”,其值在首次插入后不可更改,确保关键静态信息的一致性。

SSIS实现维度表缓慢变化

7、点击“下一步”,在“固定属性处理”页面中,取消勾选“若检测到固定属性更改则使转换失败”,避免因非预期静态字段变动导致流程中断。

SSIS实现维度表缓慢变化

8、继续点击“下一步”,进入“历史属性配置”页面。该界面由上一步 Price 字段设为历史属性触发,系统自动呈现时间戳字段(如 StartDate / EndDate)、当前标志(CurrentFlag)等关键参数配置项。

SSIS实现维度表缓慢变化

9、点击“下一步”,在“推断成员”设置页中,因本例无需支持预占位成员(Inferred Members),取消勾选“启用推断成员支持”。

SSIS实现维度表缓慢变化

10、点击“下一步”,最后点击“完成”,SSIS 将自动生成三路输出:新建行(New Output)、历史属性插入(Historical Attribute Insert Output)及变化属性更新(Changing Attribute Update Output),所有逻辑均由向导自动构建,无需手动编写脚本或配置派生列。

SSIS实现维度表缓慢变化

11、从工具箱拖入两个“行计数”(Row Count)组件,并分别为其绑定两个 Int32 类型变量(如 NewRowCount、UnchangedRowCount)。将“缓慢变化维”控件的“固定属性输出”与“未更改输出”分别连接至对应 Row Count 组件。随后,在全部数据路径上右键启用“数据查看器”(Data Viewer),便于运行时实时捕获流经各分支的数据快照,辅助调试与逻辑验证。

SSIS实现维度表缓慢变化

12、首次执行包时,因目标表为空,全部 4 条记录均进入“新建输出”;第二次执行且源数据未变时,这 4 条记录将统一归入“未更改输出”。

SSIS实现维度表缓慢变化

13、按要求修改 Excel 源文件中的部分字段值,变更内容已用红色方框标注,用于模拟真实业务更新场景。

SSIS实现维度表缓慢变化

14、重新执行 SSIS 包以触发增量处理逻辑。

15、由于 Store 字段发生变更,Book D 的记录被路由至“固定属性输出”,表示其违反了静态约束,需人工核查或调整策略。

16、Price 值变动触发历史记录机制,Book A 和 Book C 的新价格信息被写入“历史属性插入输出”,原记录同步更新 EndDate 并置 CurrentFlag = 0,新记录则标记为 CurrentFlag = 1。

17、BoughtDate 更新导致 Book B 的记录被送入“变化属性更新输出”,仅更新该字段值,其余字段保持不变。

18、三类输出具有明确优先级:固定属性输出 > 历史属性插入输出 > 变化属性更新输出。该顺序决定了数据流向与处理先后,确保强约束字段优先响应,提升维度表状态一致性与系统健壮性。

SSIS实现维度表缓慢变化

19、查询 dbo.books_scd 表,验证各记录状态、生效时间、失效时间及 CurrentFlag 标志是否符合 SCD Type 2 规范。

20、观察结果可见,原记录 ID 为 1 和 3 的条目已被标记为过期(EndDate 已填充,CurrentFlag = 0),体现历史版本完整保留。

21、借助表中 Flag 字段(或 CurrentFlag),本文将进一步引导读者优化步骤 11 的展示方式——改用单一列区分当前/过期状态,提升可读性。为确保后续验证环境纯净,可执行如下 T-SQL 清空表数据,重置测试起点:

SSIS实现维度表缓慢变化

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
LLVM自定义Pass怎么写
LLVM自定义Pass怎么写

本专题聚焦LLVM自定义Pass开发,整理Pass类结构、run()方法、PreservedAnalyses、CMake构建、插件注册、-load-pass-plugin加载和测试用例编写流程。

2026.09.30

20

10

LLVM RISC-V参数配置教程
LLVM RISC-V参数配置教程

本专题介绍LLVM对RISC-V基础ISA和扩展的支持方式,涵盖RV32、RV64、标准扩展、实验性扩展、厂商扩展、-menable-experimental-extensions和版本差异。

2026.09.30

0

14

LLVM IR中间表示入门指南
LLVM IR中间表示入门指南

本专题整理LLVM IR的核心概念,包括中间表示作用、模块结构、函数、基本块、SSA形式、类型系统和常见语法,帮助新手理解LLVM编译流程中的关键层。

2026.09.30

0

12

PDF转图片方法
PDF转图片方法

需要把 PDF 页面用于上传、预览、分享或图片归档时,PDF 转图片方法专题整理 JPG/PNG 格式选择、逐页导出、清晰度设置、批量下载和结果检查等流程,帮助用户稳定完成 PDF 图片化处理。

2026.09.30

20

26

PixTV AI视频生成与无限画布创作
PixTV AI视频生成与无限画布创作

PixTV专题整理AI视频与视觉内容创作相关功能使用教程,涵盖AI生图、视频生成、无限画布、多模型创作、素材管理、声音音乐及视频剪辑等功能,帮助用户快速掌握PixTV从创意到成片的完整制作方法。

2026.09.29

20

15

Buffalo框架数据库开发全教程
Buffalo框架数据库开发全教程

本专题围绕Buffalo框架数据库开发,讲解database.yml多环境配置、soda与fizz迁移生成回滚、模型结构体标签、增删改查与条件查询、一对多与多对多关联、数据校验、回调钩子、事务处理及原生SQL执行能力。

2026.09.23

220

15

Buffalo框架路由与请求处理实操指南
Buffalo框架路由与请求处理实操指南

本专题讲解Buffalo框架路由与请求处理机制,涵盖路由注册与分组、资源路由、Handler编写规范、Context上下文方法、参数绑定、中间件编写挂载、Session与Cookie读写、Flash消息及错误页面定制方法。

2026.09.23

140

15

Buffalo框架零基础入门教程
Buffalo框架零基础入门教程

本专题整理Buffalo框架入门内容,涵盖Go环境准备、buffalo CLI安装、新项目生成、目录结构说明、dev热加载启动、数据库连接配置与常见报错排查,帮助新手按约定优于配置的思路跑通第一个Buffalo框架应用。

2026.09.23

120

15

Conan创建软件包配方指南
Conan创建软件包配方指南

本专题介绍通过conanfile.py创建软件包的方法,讲解包名、版本、依赖和构建设置等基础信息,以及source、build、package、package_info等常用方法的作用及编写思路。

2026.09.22

60

12

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.6万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.4万人学习