search
HomeDatabaseMysql Tutorial了解DB2中的数据访问频率和变化

不同温度带数据管理解决方案指的是将被频繁访问的数据存储在快速存储器中(热数据),而被访问频率相对较低的数据则存储在相对较慢的存储器中(温数据),极少被访问的数据则会被存储在企业最慢的存储器中(冷数据)。开发这套解决方案需要一套关键性能指标

不同温度带数据管理解决方案指的是将被频繁访问的数据存储在快速存储器中(热数据),而被访问频率相对较低的数据则存储在相对较慢的存储器中(温数据),极少被访问的数据则会被存储在企业最慢的存储器中(冷数据)。开发这套解决方案需要一套关键性能指标 (KPI),用来测量数据的“温度”并协助制定包含数据的运营和业务决策。为了演示这套解决方案,假设您的数据被分段管理为如下几个类别:

 31 天内的数据
 31 天到 90 天内的数据
 91 天到 180 天内的数据
 181 天到 365 天内的数据
 超过 365天 的数据

假设两年期的数据的被访问频率低于 90 天的数据的被访问频率,虽然这可能合乎情理,但要更详细地地了解访问和变化的频率,则会引起其他业务决策的制定。例如,在过去六个月中没有任何变化而忽然在一个月里有 100 行数据完成了抽取、转换和加载的循环 (ETL) 变化,您可能并不想采取任何行动。或者,如果在那一个月里有 10,000 行数据完成了 ETL 循环变化,您可能就该要考虑采取以下一个或多个措施了:

 执行某种形式的采样行动,确定是否有进一步分析的必要
 重新执行相关报告
 调查 ETL 过程,了解发生如此重大变化的原因
 保留受影响的摘要表和物化查询表 (MQT)
 使用 IBM DB2 High Performance Unload 来处理受影响的数据或整个数据表
 备份数据表空间
 重新整理数据(或只整理索引)
 运行 runstats 工具
 执行某种形式的存储管理或归档

确定已发生变化的数据,并同时确定数量和变化频率,这能为运营和业务决策的制定带来宝贵的意见。本文分享了一些可用的度量标准来帮助您理解频率、数量、变化的百分比和能导致您数据发生变化的行为。

开发关键性能指标

图 1 显示的是一个表格的条形图表示法,其中十二月、十一月、十月、九月、八月和七月,相对于六月、五月、四月、三月、二月和一月,变化率较高,被访问率也更高。

了解DB2中的数据访问频率和变化

图 1:访问频率和变化频率

理解访问频率、变化率和其他有用的度量

当被激活后,DB2 中的“一直连接”度量会提供快速简单的度量报告,该度量随后可用于开发一个关于数据访问模式和变化的数据活动的业务视图。被激活后就会产生这些度量,可存储于用户定义的表中以供进一步分析。
表度量

图 2 列出了一些关键度量,每个表和每个表的范围分区都可以通过 MON_GET_TABLE 的表函数来获取这些度量。
 表或范围分区被访问的次数
 阅读行数(表或范围分区)

 插入的行数(表或范围分区)
 更新行数(表或范围分区)
 删除的行数(表或范围分区)
 对任何行的列值未导致任何变化的更新行数(表或范围分区)
 表或范围分区所在的表空间
图 2:表和范围分区的活动度量

这些度量能帮助您回答下列问题:
 共有多少行发生变化?给定时期(发出和存储调用表函数的结果时)内的变化率为多少?
 给定的一周内共有多少“新增的”行被处理?
 有多少更新语句执行后并未引起实际的更新(图 2 中的第 6 项)?
 一个表空间中被更新的总行数是多少?
 特定时期内共有多少行被删除?

索引度量

当索引度量不提供数据温度的信息时,它们还是可以通过使用表函数 MON_GET_INDEX 来解释索引利用率和索引性能,从而完成您的数据图。图 3 中列举了那些度量的一个子集:
 惟一扫描的索引次数
 访问扫描的索引次数
 关键列的更新次数
 包含列的更新次数
 索引跳转扫描的次数
 页拆分的的次数
图 3:索引利用率度量的子集

Statement
The content of this article is voluntarily contributed by netizens, and the copyright belongs to the original author. This site does not assume corresponding legal responsibility. If you find any content suspected of plagiarism or infringement, please contact admin@php.cn
解读CRISP-ML(Q):机器学习生命周期流程解读CRISP-ML(Q):机器学习生命周期流程Apr 08, 2023 pm 01:21 PM

译者 | 布加迪审校 | 孙淑娟目前,没有用于构建和管理机器学习(ML)应用程序的标准实践。机器学习项目组织得不好,缺乏可重复性,而且从长远来看容易彻底失败。因此,我们需要一套流程来帮助自己在整个机器学习生命周期中保持质量、可持续性、稳健性和成本管理。图1. 机器学习开发生命周期流程使用质量保证方法开发机器学习应用程序的跨行业标准流程(CRISP-ML(Q))是CRISP-DM的升级版,以确保机器学习产品的质量。CRISP-ML(Q)有六个单独的阶段:1. 业务和数据理解2. 数据准备3. 模型

人工智能的环境成本和承诺人工智能的环境成本和承诺Apr 08, 2023 pm 04:31 PM

人工智能(AI)在流行文化和政治分析中经常以两种极端的形式出现。它要么代表着人类智慧与科技实力相结合的未来主义乌托邦的关键,要么是迈向反乌托邦式机器崛起的第一步。学者、企业家、甚至活动家在应用人工智能应对气候变化时都采用了同样的二元思维。科技行业对人工智能在创建一个新的技术乌托邦中所扮演的角色的单一关注,掩盖了人工智能可能加剧环境退化的方式,通常是直接伤害边缘人群的方式。为了在应对气候变化的过程中充分利用人工智能技术,同时承认其大量消耗能源,引领人工智能潮流的科技公司需要探索人工智能对环境影响的

找不到中文语音预训练模型?中文版 Wav2vec 2.0和HuBERT来了找不到中文语音预训练模型?中文版 Wav2vec 2.0和HuBERT来了Apr 08, 2023 pm 06:21 PM

Wav2vec 2.0 [1],HuBERT [2] 和 WavLM [3] 等语音预训练模型,通过在多达上万小时的无标注语音数据(如 Libri-light )上的自监督学习,显著提升了自动语音识别(Automatic Speech Recognition, ASR),语音合成(Text-to-speech, TTS)和语音转换(Voice Conversation,VC)等语音下游任务的性能。然而这些模型都没有公开的中文版本,不便于应用在中文语音研究场景。 WenetSpeech [4] 是

db2和oracle语法有什么区别db2和oracle语法有什么区别Jul 05, 2023 am 10:39 AM

db2和oracle语法区别:1、SQL语法差异,虽然db2和oracle都使用结构化查询语言,但它们在语法方面存在一些差异;2、db2和oracle拥有不同的数据类型;3、外键约束定义,db2可以定义在创建表时或者使用“ALTER TABLE”语句后添加,oracle需要在创建表时一起定义;4、db2和oracle存储过程和函数的语法也存在一些区别。

条形统计图用什么呈现数据条形统计图用什么呈现数据Jan 20, 2021 pm 03:31 PM

条形统计图用“直条”呈现数据。条形统计图是用一个单位长度表示一定的数量,根据数量的多少画成长短不同的直条,然后把这些直条按一定的顺序排列起来;从条形统计图中很容易看出各种数量的多少。条形统计图分为:单式条形统计图和复式条形统计图,前者只表示1个项目的数据,后者可以同时表示多个项目的数据。

自动驾驶车道线检测分类的虚拟-真实域适应方法自动驾驶车道线检测分类的虚拟-真实域适应方法Apr 08, 2023 pm 02:31 PM

arXiv论文“Sim-to-Real Domain Adaptation for Lane Detection and Classification in Autonomous Driving“,2022年5月,加拿大滑铁卢大学的工作。虽然自主驾驶的监督检测和分类框架需要大型标注数据集,但光照真实模拟环境生成的合成数据推动的无监督域适应(UDA,Unsupervised Domain Adaptation)方法则是低成本、耗时更少的解决方案。本文提出对抗性鉴别和生成(adversarial d

数据通信中的信道传输速率单位是bps,它表示什么数据通信中的信道传输速率单位是bps,它表示什么Jan 18, 2021 pm 02:58 PM

数据通信中的信道传输速率单位是bps,它表示“位/秒”或“比特/秒”,即数据传输速率在数值上等于每秒钟传输构成数据代码的二进制比特数,也称“比特率”。比特率表示单位时间内传送比特的数目,用于衡量数字信息的传送速度;根据每帧图像存储时所占的比特数和传输比特率,可以计算数字图像信息传输的速度。

数据分析方法有哪几种数据分析方法有哪几种Dec 15, 2020 am 09:48 AM

数据分析方法有4种,分别是:1、趋势分析,趋势分析一般用于核心指标的长期跟踪;2、象限分析,可依据数据的不同,将各个比较主体划分到四个象限中;3、对比分析,分为横向对比和纵向对比;4、交叉分析,主要作用就是从多个维度细分数据。

See all articles

Hot AI Tools

Undresser.AI Undress

Undresser.AI Undress

AI-powered app for creating realistic nude photos

AI Clothes Remover

AI Clothes Remover

Online AI tool for removing clothes from photos.

Undress AI Tool

Undress AI Tool

Undress images for free

Clothoff.io

Clothoff.io

AI clothes remover

AI Hentai Generator

AI Hentai Generator

Generate AI Hentai for free.

Hot Article

R.E.P.O. Energy Crystals Explained and What They Do (Yellow Crystal)
2 weeks agoBy尊渡假赌尊渡假赌尊渡假赌
Repo: How To Revive Teammates
4 weeks agoBy尊渡假赌尊渡假赌尊渡假赌
Hello Kitty Island Adventure: How To Get Giant Seeds
3 weeks agoBy尊渡假赌尊渡假赌尊渡假赌

Hot Tools

SublimeText3 Linux new version

SublimeText3 Linux new version

SublimeText3 Linux latest version

Notepad++7.3.1

Notepad++7.3.1

Easy-to-use and free code editor

Atom editor mac version download

Atom editor mac version download

The most popular open source editor

WebStorm Mac version

WebStorm Mac version

Useful JavaScript development tools

ZendStudio 13.5.1 Mac

ZendStudio 13.5.1 Mac

Powerful PHP integrated development environment