功能更新动态（2023年）
本文将为您及时同步2023年的Dataphin版本发布信息。2023年11月 对应发布的产品...下游的质量报告和质量治理项，按照实际校验的分区进行拆分，不同的校验分区生成各自独立的质量报告。调度方式新增任务更新的分区，按照代码中实际更新的分区...
文档更新动态（2023年）
更新说明 添加成员并设置角色 通过服务编排的方式创建API 测试与发布API 调用API 2023年08月 更新时间：2023年08月08日 对应发布的产品版本：V3.11 特性 描述 类别 相关文档 资源用量统计抽屉优化 新增支持按周/月下载资源统计详情的快照值...
预测学生考试成绩
Designer预置了逻辑回归算法模板，便于您基于中学生的家庭背景及在校行为，通过逻辑回归算法快速生成期末成绩预测模型，从而获得影响中学生学业的关键因素。本文为您介绍逻辑回归算法预置模板的具体使用方法。背景信息 通过本工作流获得...
设计阶段
运行周期 如果数据研发的场景是在常见T+1离线计算场景，则应将不同调度任务按照实际业务需求，赋予小时、日、周、月和季度等不同的调度粒度。说明 程序必须支持重跑。如果SQL语句优化后，单次执行仍超过30分钟，建议拆表重新设计，建议每个...
数据归档至Lindorm
说明 系统会自动根据源数据库的库表名称在归档实例上生成库和表，所以此处的目标数据库名称与源库名称相同。归档后的表会新增四列数据，不影响表原始数据的使用：归档信息（工单号和归档时间）数据库名称 表名称 实例ID（DMS录入实例时赋予...
数据归档至Lindorm
说明 系统会自动根据源数据库的库表名称在归档实例上生成库和表，所以此处的目标数据库名称与源库名称相同。归档后的表会新增四列数据，不影响表原始数据的使用：归档信息（工单号和归档时间）数据库名称 表名称 实例ID（DMS录入实例时赋予...
人群基本功能
仅支持下载用户在标签表中拥有权限的ID和标签，例如：若用户有表A的手机号码的权限，但无表B的手机号码的权限，而人群同时来自表A、B，则下载的人群列表中仅有来自表A的手机号码，无来自表B的这部分手机号码。操作步骤：选择>下载。在弹窗...
如何管理排班
进入 查看排班 页面详情，展示服务组基础信息、设置排班规则和生成的值班表。此界面展示的是精细排班生成的值班表。值班表日历遵循每日00:00-24:00时间段，如果存在某一值班人员跨天值班，则此值班时间阶段拆分为两个时段。每天的值班详情...
离线模式调度配置
调度周期 可选择 日、周、月、小时 和 分钟：日调度：即调度任务每天自动运行一次。新建周期任务时，系统默认的时间周期为每天0点运行一次。您可以根据需要，单击 图标，指定运行的时间点。周调度：即调度任务每周的特定几天，在特定时间点...
离线模式调度配置
调度周期 可选择 日、周、月、小时 和 分钟：日调度：即调度任务每天自动运行一次。新建周期任务时，系统默认的时间周期为每天0点运行一次。您可以根据需要，单击 图标，指定运行的时间点。周调度：即调度任务每周的特定几天，在特定时间点...
作业状态集管理
背景信息 概念 详情 系统检查点（对应Apache Flink中的Checkpoint）生命周期完全由Flink系统管理，您可以配置 系统检查点间隔、系统检查点超时时间 和 两次系统检查点间最短间隔，并查看其生成情况。但无法手动创建和删除系统检查点，作业...
调度配置
通常用于某个任务暂时不用执行，但后面还会继续使用的场景 调度周期 调度周期 可选择 日、周、月、小时 和 分钟：日 调度，即调度任务每天自动运行一次。新建周期任务时，系统默认的时间周期为每天0点运行一次。您可以根据需要，单击 图标...
配置监控告警
您可以在仪表板或电子表格中，添加监控规则并配置告警规则和推送消息。前提条件 已在仪表板中创建一个图表，请参见 线图。若您通过 钉钉工作通知 或 钉钉群 方式接收告警时，请确保账号已绑定钉钉微应用，请参见（公共云）开通钉钉微应用。...
调度配置
通常用于某个任务暂时不用执行，但后面还会继续使用的场景 调度周期 调度周期 可选择 日、周、月、小时 和 分钟：日 调度，即调度任务每天自动运行一次。新建周期任务时，系统默认的时间周期为每天0点运行一次。您可以根据需要，单击 图标...
执行补数据并查看补数据实例（旧版）
例如，业务日期为 1月11日~1月13日，并行数为2组，则会生成两个补数据实例（其中一个补数据实例会包含两个业务日期，这两个业务日期对应的任务串行执行），两个补数据实例并行执行。补数据告警 设置此次补数据操作是否会触发告警。是：满足...
数据地图
查看表详情 您可以单击目标表名称跳转至表详情页面，查看表的基础信息、产出信息和血缘信息等表的详情信息。查看表详情步骤请参见 查看表详情。您可以在此处查看表的元数据信息。您可以在此处查看表血缘和字段血缘信息。
使用DMS进行数据归档
随着企业的数据资料持续积累，需要持久化地保留数据资产，但是数据的存储成本居高不下，因此DMS和 AnalyticDB PostgreSQL版 Serverless模式共同推出了数据归档功能，可以面对数据库实现灵活低价、归档管理和高分析性能的能力。功能介绍 DMS...
计费项
按秒计费，每一个小时整点结算一次费用（以UTC+8时间为准）并生成账单，结算完毕后进入新的结算周期。按固定带宽计费：按固定带宽峰值单价×购买时长。先使用后付费，自动从阿里云账号扣费。计费示例 包年包月 假设为华东1（杭州）地域的...
周期任务补数据
业务日期 选择需要进行补数据的业务日期区间，根据任务的调度周期配置业务日期，详细说明如下：调度周期为日、周、月的任务可以选择 按区间、按周期 和 自定义 业务日期。各选项适用场景说明如下：按区间：适用于需要回刷多个连续业务日期...
周期任务补数据
业务日期 选择需要进行补数据的业务日期区间，根据任务的调度周期配置业务日期，详细说明如下：调度周期为日、周、月的任务可以选择 按区间、按周期 和 自定义 业务日期。各选项适用场景说明如下：按区间：适用于需要回刷多个连续业务日期...
4、如何做好迭代排期？
双周迭代的运作机制 上图是双周迭代的运作流程：在 N-2 和 N-1 周，业务和产品会持续做需求的分析和设计，会把要排入迭代的需求按优先级高低准备好，包括需求的分析、设计和澄清；随后开发和测试同学在排期后的两周内（N 周和 N+1周），按...
运维中心概述
系统的周期调度时间包括分钟、小时、日、周、月和年。触发任务运行包括补数据周期任务、手动运行手动任务和启动实时任务的运行。重要 开发环境的所有任务默认不运行，需要您手动触发任务的运行。周期任务发布到生产环境后即可开始正常调度...
运维中心概述
系统的周期调度时间包括分钟、小时、日、周、月和年。触发任务运行包括补数据周期任务、手动运行手动任务和启动实时任务的运行。重要 开发环境的所有任务默认不运行，需要您手动触发任务的运行。周期任务发布到生产环境后即可开始正常调度...
公告
2024年04月16日-Dataphin新版本发布 Dataphin于2024年04月16日发布V3.14版本，本次升级相较于历史版本：新增Python三方包全局管理功能，一次安装多次引用，提升Python任务开发效率。支持页面水印设置功能，支持自定义页面水印内容及设置...
新建补数据任务
日/周/月调度任务只有定时运行时间在选中小时区间内才会运行：即下游任务受小时区间影响，只有定时运行时间在选中小时区间内才运行。单击 确定，完成补数据任务的创建。后续步骤 完成补数据任务创建后，您可以根据任务的调度类型对补数据...
新建补数据任务
日/周/月调度任务只有定时运行时间在选中小时区间内才会运行：即下游任务受小时区间影响，只有定时运行时间在选中小时区间内才运行。单击 确定，完成补数据任务的创建。后续步骤 完成补数据任务创建后，您可以根据任务的调度类型对补数据...
影子表同步
数据管理DMS 的影子表同步功能支持根据源表的表结构自动在当前库中创建影子表（新的数据表名是通过在源表名上增加前缀或后缀的方式生成的），支持周期性同步，适用于全链路压测等场景。前提条件 支持的数据库类型如下：MySQL：RDS MySQL、...
执行补数据并查看补数据实例（新版）
管理补数据实例 补数据任务启动后，会生成相应的补数据实例，您可在补数据列表查看实例的基本信息及运行详情，并按需执行 终止、重跑、复用 等管理操作。区域 描述 1 单击 展开搜索，可通过 补数据名称、运行状态、节点类型 等条件筛选需要...
时间属性配置说明
调度任务执行方式 DataWorks上，调度任务会根据调度类型及周期数生成相应的周期实例（例如，小时调度任务每天会根据周期数产生相应数量的小时实例），并通过实例的方式运行任务。调度时间 在凌晨业务高峰期，所有定时时间设置为 00:00 点的...
SQL 计划任务
背景信息 OceanBase 开发者中心（OceanBase Developer Center，ODC）支持定时周期性执行用户创建的 SQL 脚本，以满足周期性执行用户所需的数据库开发和运维任务，例如周期性执行存储过程、备份和做库表结构同步等。用户在 工单 创建 SQL ...
公告
西南1（成都）、华北3（张家口）2024年03月11日~2024年03月14日 华南1（深圳）2024年03月18日~2024年03月21日 华北2（北京）2024年03月25日~2024年03月29日 华东2（上海）2024年04月01日~2024年04月05日 华东1（杭州）2024年04月08日~2024...
新建数据探查任务
数据探查可以帮助您快速了解数据概况，提前评估数据可用性和潜在风险，您可对数据表进行全量探查、抽样探查。本文为您介绍如何新建数据探查任务。前提条件 需开通数据质量功能模块才可使用数据探查功能。使用限制 当计算引擎为AnalyticDB ...
新建数据探查任务
数据探查可以帮助您快速了解数据概况，提前评估数据可用性和潜在风险，您可对数据表进行全量探查、抽样探查。本文为您介绍如何新建数据探查任务。前提条件 需开通数据质量功能模块才可使用数据探查功能。使用限制 当计算引擎为AnalyticDB ...
创建隐匿信息查询任务
调度规则 支持 日常不调度、按日调度、按周调度、按月调度 四种，配置后会按配置的周期定时跑该任务。日常不调度：配置后不运行任务。按日调度：每天运行任务。按周调度：每周运行任务。按月调度：每月运行任务。数据查询方 有查询需求的...
周期实例通用运维概述
调度周期：支持 分钟、小时、日、周、月、年 共6种调度周期筛选。开始运行时间：可根据周期实例的开始运行时间进行筛选。支持选择 最近一小时、今天、昨天 或 具体到某一天或某一业务时间区间（精确到秒）。定时时间：可根据周期实例的定时...
周期实例通用运维概述
调度周期：支持 分钟、小时、日、周、月、年 共6种调度周期筛选。开始运行时间：可根据周期实例的开始运行时间进行筛选。支持选择 最近一小时、今天、昨天 或 具体到某一天或某一业务时间区间（精确到秒）。定时时间：可根据周期实例的定时...
常见问题
只支持日环比吗，是否支持周和月的环比？是否支持设置展示Top N？收纳指标是只要能看到指标卡的用户就有权限收纳么？阅览者有权限编辑么？指标看板中没有“收纳指标”这一项怎么办？如何才能显示“收纳指标”？指标看板中收纳指标置灰不...
配置离线任务调度依赖
本节点（自依赖）- 最近 24 小时 分钟 本节点（自依赖）- 最近 24 小时 日/周/月 非本节点 日 本周期（当日）日/周/月 非本节点 小时/分钟 否 本周期（当日）日/周/月 非本节点 小时/分钟 是 本周期（当日）月/周/日/小时/分钟 非本...
配置离线任务调度依赖
本节点（自依赖）- 最近 24 小时 分钟 本节点（自依赖）- 最近 24 小时 日/周/月 非本节点 日 本周期（当日）日/周/月 非本节点 小时/分钟 否 本周期（当日）日/周/月 非本节点 小时/分钟 是 本周期（当日）月/周/日/小时/分钟 非本...
拆分函数概述
否 是 YYYYMM 按年月哈希 是 是 YYYYWEEK 按年周哈希 是 是 YYYYDD 按年日哈希 是 是 拆分函数对全局二级索引的支持情况 PolarDB-X 1.0 支持 全局二级索引，从数据存储的角度看，每个GSI对应一张用于保存索引数据的逻辑表，称为索引表。...
- 产品推荐
- 这些文档可能帮助您