新功能发布记录
功能发布更新 2024年 03月 功能名称 变更类型 功能描述 相关文档 数据工作站 新增 支持以文档形式交付查询的数据和数据变化趋势等信息，并支持在交付后使用智能工具解答数据相关问题。使用数据工作站功能可以提高数据交付效率和数据自助...
功能发布记录 2022年之前
提供的实时数据同步功能，可以将源端数据库中部分或全部表的数据变化实时同步至目标数据库中，实现目标库实时保持和源库的数据对应。利用解决方案可以实现全增量一体化同步。2021.4.15 全部地域。解决方案介绍 实时同步介绍 2020-07 功能...
折线图
图表样式 折线图，一个类目只对应一个值，主要通过多系列数据配置的方式，展示同一类目下不同数据的变化，能够以折线和区域相结合的方式，智能地展示多维的数据变化趋势。样式面板 搜索配置：单击 样式 面板右上角的搜索配置项图标，可在...
Hudi概述
Apache Hudi是一种数据湖的存储格式，在Hadoop文件系统之上提供了更新数据和删除数据的能力以及消费变化数据的能力。Hudi表类型 Hudi支持如下两种表类型：Copy On Write 使用Parquet格式存储数据。Copy On Write表的更新操作需要通过重写...
基于MaxCompute实现拉链表
拉链表是数据仓库设计中用来处理数据变化的一种技术，它允许保存历史数据，记录一个事物从开始到当前状态的所有变化信息，可以反映任意时间点数据的状态。本文将为您介绍基于MaxCompute引擎在DataWorks上实现拉链表ETL的案例。前提条件 已...
折线图
图表样式 折线图，一个类目只对应一个值，主要通过多系列数据配置的方式，展示同一类目下不同数据的变化，能够以折线和区域相结合的方式，智能地展示多维的数据变化趋势。配置面板 搜索配置：单击 配置 面板右上角的 搜索配置，可在 搜索...
基于DLF、RDS或Flink、OSS支持Delta Lake或Hudi存储...
您可以通过MaxCompute查询到实时数据，即时洞察业务数据变化。背景信息 通常，企业构建和应用数据湖需要经历数据入湖、数据湖存储与管理、数据探索与分析过程。MaxCompute基于阿里云DLF（Data Lake Formation）、RDS（Relational Database ...
常见问题
支持的数据库部署位置（接入方式）阿里云实例 有公网IP的自建数据库 通过数据库网关DG接入的自建数据库 通过云企业网CEN接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能接入网关接入的自建数据库 阿里云实例 通过数据库网关DG接...
DataWorks版本到期降级后功能变化清单
DataWorks模块 功能点 到期降级变化 数据集成 自定义数据集成资源组 不影响使用自定义数据集成资源组的任务调度执行，但是不能对资源组进行任何管理操作。DataStudio 全文检索 功能停用。组件管理 功能停用。流程控制 功能停用、任务失败。...
TSDB数据源
Tag描述数据源的特征，通常不随时间变化 数据产生时间 timestamp 时间戳类型。Timestamp代表数据产生的时间点，可以写入时指定，也可由系统自动生成 数据内容 field_string 该Field的value是字符串类型。Field描述数据源的量测指标，通常...
产品计费
到期后资源状态变化 数据安全中心实例到期后，实例和相关资源变化如下：到期后，数据安全中心实例进入已过期状态。到期后15天内您可以续费实例，续费成功后保留所有资源。到期15天后，释放或关闭相关资源，具体如下：释放数据安全中心实例...
数据质量：全流程的质量监控
DataWorks的全流程数据质量监控功能为您提供35种预设表级别、...数据质量为您解决以下问题：数据库频繁变更问题 业务频繁变化问题 数据定义问题 业务系统的脏数据问题 系统交互导致质量问题 数据订正引发的问题 数据仓库自身导致的质量问题
数据迁移链路规格说明
说明 如果一条SQL语句中包含对多行数据的操作，则计为多条数据记录变化；对同一条记录反复增删改则计为多条数据记录变化。每次COMMIT操作也会被计为一次数据记录变化的次数。数据迁移规格说明 数据迁移根据迁移链路的迁移性能上限，定义了...
数据扫描和识别
只有在您的数据库中的数据发生变化时，才会扫描有变化的文件或表。为了减少扫描对您数据库性能的影响，您可以参考以下规则配置全量扫描周期：增大全量扫描的扫描周期，有效减轻 DSC 扫描对数据库性能产生的影响。将扫描时间设置为数据库...
开通数据订阅
数据订阅功能可以帮助您获取Lindorm的实时增量数据，及时掌握数据的变化情况。您可以在Lindorm管理控制台开通数据订阅功能，并根据自身业务需求消费增量数据，搭建多种业务场景。本文介绍在控制台开通数据订阅功能的方法。前提条件 已开通...
漏斗图
当选中数据项变化时 当漏斗图的梯形块数据发生变化时抛出事件，同时抛出该梯形块对应的数据项。当点击图例时 当单击漏斗图的图例时抛出事件，同时抛出该图例对应的数据项。动作 动作 说明 导入漏斗图接口 按组件绘制格式处理数据后，导入...
Schema约束
写入数据的相同字段的数据类型发生变化时，时序引擎会检测到字段的数据类型不匹配而写入失败。此时，请您执行ALTER TABLE语句手动修改字段的数据类型。说明 弱约束策略并不意味着完全没有校验。例如给标签（Tag）字段写入非字符串数据，或...
数据分析概述
如果不使用维表功能，每当数据发生变化，都需要执行以下流程：运营人员向数据分析师描述需求。数据分析师提交需求给开发人员。开发人员使用DataWorks编辑SQL语句，创建Excel表并同步数据，交付给运营人员。如果使用维表功能，运营人员只...
数据加工过程卡点校验
在线业务系统复杂多变，每次变更都会产生数据的变化。因此，数据仓库需要适应多变的业务发展，及时保障数据的准确性。此外，您还需要考虑如何能将在线业务的变更高效地通知给基于MaxCompute的离线数据仓库。建议您同时关注工具和人员管理，...
地理搜索框
当搜索框的数据发生变化时，会触发数据请求，抛出临时变量，动态加载不同区域的数据。默认抛出数据中的 name 和 adcode 值，具体配置请参见 组件交互配置。蓝图交互 单击页面左上角的 图标，进入 蓝图 页面。在 图层节点 页签下，添加当前...
漏斗图
当选中数据项变化时 当漏斗图的梯形块数据发生变化时抛出事件，同时抛出该梯形块对应的数据项。当图例被点击时 当单击漏斗图的图例时抛出事件，同时抛出该图例对应的数据项。动作 动作 说明 请求漏斗图接口 重新请求服务端数据，上游数据...
精模
刷新数据：在数据面板内可以单击下方 刷新数据，针对在空间构建里数据发生变更后，精模组件的数据没有变化，对数据进行刷新。蓝图交互 在当前场景编辑器页面，单击左侧图层列表中 精模 右侧的 图标。单击页面左上角的 图标。在蓝图编辑器...
精模
刷新数据：在数据面板内可以单击下方 刷新数据，针对在空间构建里数据发生变更后，精模组件的数据没有变化，对数据进行刷新。蓝图编辑器交互配置 在当前场景编辑器页面，单击左侧图层列表中 精模 右侧的 图标。单击页面左上角的 图标。在...
数仓分层
数据公共层CDM（Common Data Model，又称通用数据模型层），包括DIM维度表、DWD和DWS，由ODS层数据加工而成。主要完成数据加工与整合，建立一致性的维度，构建可复用的面向分析和统计的明细事实表，以及汇总公共粒度的指标。公共维度层...
数字翻牌器
图表样式 数字翻牌器是文字组件的一种，支持自定义翻牌器的标题、数字、前缀、后缀等样式，通常与其他组件配合使用，通过交互功能在可视化应用中展示实时数据的变化情况。样式面板 搜索配置：单击 样式 面板右上角的搜索配置项图标，可在...
数仓分层
数据公共层CDM（Common Data Model，又称通用数据模型层），包括DIM维度表、DWD和DWS，由ODS层数据加工而成。主要完成数据加工与整合，建立一致性的维度，构建可复用的面向分析和统计的明细事实表，以及汇总公共粒度的指标。公共维度层...
数据风险点监控
DQC以数据集（DataSet）为监控对象，当离线MaxCompute数据发生变化时，DQC会对数据进行校验，并阻塞生产链路，以避免问题数据污染扩散。DQC还提供了历史校验结果的管理，方便数据质量的分析和定级。通过配置DQC的数据质量校验规则，可以...
SQL优化技术
数据库上执行的SQL千差万别，且伴随着业务快速迭代、数据分布特征变化、热点变化、数据库版本升级等持续动态变化，这些都使得SQL优化如同三餐般不可或缺。挑战 如何利用综合手段实现快速准确的问题定位？例如问题SQL，仅仅从慢日志中分析是...
区域翻牌器
图表样式 区域翻牌器是折线图的一种，与区域图相比，区域翻牌器支持多个系列的数字翻牌器展示，同时也支持自定义y轴区间和多系列数据配置，能够以折线和区域相结合的方式，智能地展示多维的实时数据的变化趋势。样式面板 搜索配置：单击 ...
Oracle同步至Tablestore
update：列变更，只针对数据发生变化的列进行更新。配置字段映射。在 输出字段 区域为您展示Tablestore表结构中的主键字段、属性字段。您也可以通过单击 重新获取表字段 重新触发表结构查询。还支持您单击 批量添加源端字段为属性字段 快速...
流式气泡层（v1.x版本）
当数据发生变化时，系统不会清空您已经缓存的数据。顺序：打开开关，系统按照数据的顺序进行循环冒泡，关闭开关，系统进行随机冒泡。冒泡数目：流式气泡每次冒泡的数量，当设置的数目小于数据条数时，系统采用循环冒泡的方式。平铺时间：...
地理搜索框
当搜索框的数据发生变化时，会触发数据请求，抛出回调值，动态加载不同区域的数据。默认抛出数据中的 name 和 adcode 值，具体配置请参见 如何配置数字翻牌器组件的回调ID。蓝图编辑器交互配置 在画布编辑器页面，右键单击组件，选择 导出...
流式气泡层（v2.x版本）
当数据发生变化时，系统不会清空您已经缓存的数据。顺序 打开开关，系统按照数据的顺序进行循环冒泡，关闭开关，系统进行随机冒泡。冒泡数目 流式气泡每次冒泡的数量，当设置的数目小于数据条数时，系统采用循环冒泡的方式。平铺时间 流式...
区域翻牌器（v3.0以下版本）
区域翻牌器是折线图的一种，与区域图相比，区域翻牌器支持多个系列的数字翻牌器展示，同时也支持自定义y轴区间和多系列数据配置，能够以折线和区域相结合的方式，智能地展示多维的实时数据的变化趋势。本文档为您介绍区域翻牌器各配置项的...
区域翻牌器（v3.0及以上版本）
图表样式 区域翻牌器是折线图的一种，与区域图相比，区域翻牌器支持多个系列的数字翻牌器展示，同时也支持自定义y轴区间和多系列数据配置，能够以折线和区域相结合的方式，智能地展示多维的实时数据的变化趋势。配置面板 搜索配置：单击 ...
配置数据质量监控
当离线MaxCompute数据发生变化时，数据质量会对数据进行校验，并阻塞生产链路，以避免问题数据污染扩散。同时，数据质量提供历史校验结果的管理，以便您对数据质量分析和定级。本案例通过DataWorks数据质量功能及时感知用户画像分析案例源...
数字翻牌器
图表样式 数字翻牌器是文字组件的一种，支持自定义翻牌器的标题、数字、前缀、后缀等样式，通常与其他组件配合使用，通过交互功能在可视化应用中展示实时数据的变化情况。配置面板 搜索配置：单击 配置 面板右上角的 搜索配置，可在 搜索...
基础区域图
图表样式 基础区域图是移动端组件中折线图的一种，支持自定义y轴区间、多系列数据配置，以折线和区域相结合的方式，智能地展示多维实时数据的变化趋势。配置面板 搜索配置：单击 样式 面板右上角的搜索配置项图标，可在搜索配置面板中输入...
堆叠区域图
图表样式 堆叠区域图是移动端组件中折线图的一种，支持自定义y轴区间、多系列数据配置，以折线和区域相结合的方式，智能地展示多维实时数据的变化趋势。配置面板 搜索配置：单击 配置 面板右上角的 搜索配置，可在 搜索配置 面板中输入您...
基础区域图
图表样式 基础区域图是移动端组件中折线图的一种，支持自定义y轴区间、多系列数据配置，以折线和区域相结合的方式，智能地展示多维实时数据的变化趋势。配置面板 搜索配置：单击 配置 面板右上角的 搜索配置，可在 搜索配置 面板中输入您...
- 产品推荐
- 这些文档可能帮助您