元数据抽取
元数据抽取可以分析数据湖中特定格式的数据，并自动生成元数据信息，通过周期性或手动执行，实现数据湖分析计算shema on read目标。使用限制 抽取的数据存储仅支持数据存储在阿里云OSS标准型中的数据。目前元数据发现仅支持json、csv、...
热力线层
最大透明度：热力线的最大透明度，根据数据中每条线对应的 value 值来设置线透明度。数据面板 该组件数据为GeoJson格式，关于数据格式以及数据获取方法，请参见 地图数据格式。其中每条线的 value 值可在 properties 字段中配置。说明 根据...
查看并管理待生成实例
说明 恢复暂停的待生成实例，系统将判断当前是否已经到达该实例设定的定时运行时间，如果已到达，则系统自动生成补数据实例执行补数据，暂停：对于实例待生成状态的待生成实例，您可以 进行恢复。说明 暂停后将不会生成可以运行的补数据...
准备工作
根据数据源的不同，您需要先在页面左侧选择合适的分析工具：Java堆分析 Java线程栈分析 Java GC日志分析 然后点击 上传文件 按钮上传数据源。目前应用诊断分析平台支持以下上传方式：通过URL上传（为OSS文件生成URL链接请参见 OSS文档）...
运维中心概述
数据集成、数据开发模块开发的任务提交或发布后，将进入开发环境或生产环境的运维中心。运维中心为您提供运维概览、任务运维、实例运维、监控管理、系统配置5大功能模块，您可针对提交的任务和生成的实例进行多方位的运维管理。应用场景 ...
全量数据同步
在 创建表 对话窗中，系统会根据上一步配置的数据源数据对象自动生成表名、备注以及字段。您需要将表名修改为“stg_base_yhkh_demo_di“，分区信息 为“非分区表”。配置完成，单击 确定，返回任务配置页面。stg_base_yhkh_demo_df 写入...
调度周期：年调度
年调度是指调度任务在每年的特定几天，在特定的时间点自动运行一次。例如，调度任务设置为每年一月的最后一天执行。...说明 cron表达式会根据您选择的时间自动生成，不可手动修改。调度详情 调度系统会自动为任务生成实例并运行，如下图所示。
使用节点组
引用节点组时，如果创建的节点组里包含分支节点，则在其他业务流程中引用后，所克隆分支节点的 分支逻辑定义>关联到节点输出 会自动生成一串数字后缀。新建节点组 进入 数据开发 页面。登录 DataWorks控制台，单击左侧导航栏的 数据建模与...
功能简介
质量评估报告 支持根据系统数据质量监测运行结果以天的维度自动生成系统整体质量监控报告。支持根据数据唯一性、准确性、规范性、一致性、时效性和完整性进行多维度评估分析。物理表监控明细 支持以物理表为维度，查看物理表在数据开发-...
诊断报告
当RDS MySQL实例出现性能问题，或者进行日常巡检时，您可以通过数据库自治服务DAS的诊断报告功能，针对指定时间段的实例运行状况发起诊断，帮助您从慢日志、表空间、性能趋势等多方面评估实例的健康状况，快速定位实例的异常情况。...
功能简介
质量评估报告 支持根据系统数据质量监测运行结果以天的维度自动生成系统整体质量监控报告。支持根据数据唯一性、准确性、规范性、一致性、时效性和完整性进行多维度评估分析。物理表监控明细 支持以物理表为维度，查看物理表在数据开发-...
解决方案
根据数据血缘关系和不同的创建方式，自动选择关联的数据资产，保证解决方案的完整性。同时，通过自动检测待生成的解决方案中是否存在异常（如表一致性、数据质量异常等），保证解决方案的一致性和可用性。对于需要在多项目部署的解决方案，...
手动备份MongoDB数据
本文介绍云数据库MongoDB手动备份数据的方法。前提条件 已创建云数据库MongoDB单节点实例、副本集实例或分片集群实例。注意事项 如果您购买的云数据库MongoDB实例数据库版本低于MongoDB 4.0，且备份方法选择 物理备份，当该实例中集合和...
质量评估
质量评估报告 支持根据系统数据质量监测运行结果以天的维度自动生成系统整体质量监控报告。支持根据数据唯一性、准确性、规范性、一致性、时效性和完整性进行多维度评估分析。物理表监控明细 支持以物理表为维度，查看物理表在数据开发和...
功能简介
根据数据血缘关系和不同的创建方式，自动选择关联的数据资产，保证解决方案的完整性。同时，通过自动检测待生成的解决方案中是否存在异常（如表一致性、数据质量异常等），保证解决方案的一致性和可用性。对于需要在多项目部署的解决方案，...
产品优势
数据库备份DBS 支持多种环境的数据库备份，通过专线接入、公网等接入技术，实现用户本地IDC数据库备份、ECS自建数据库的备份、其他云环境和RDS数据库备份，通过简单地配置实现数据库全量备份、增量备份以及数据恢复。低成本 DBS使用飞天...
运维中心概述
数据集成、数据开发模块开发的任务提交或发布后，将进入开发环境或生产环境的运维中心。运维中心为您提供运维概览、任务运维、实例运维、监控管理、系统配置5大功能模块，您可针对提交的任务和生成的实例进行多方位的运维管理。应用场景 ...
产品更新动态
2023年4月 发布时间 2023-04-25 功能名称 功能描述 相关文档 支持数据更新——实现卡片内容的动态数据呈现 通过数据库连接方式的数据源，可以设置数据更新频率，手动/周期完成数据内容的更新，目前支持的可更新数据源是：MySQL、ADB MySQL...
识别规则及识别方式
说明 自动继承开启后，下游会根据字段血缘关系自动继承直接上游字段的敏感等级，同时根据默认脱敏规则的配置，以实现对新增数据的自动保护，减少手动配置成本，也能更大程度上保证关联数据识别结果一致性和相关性。继承场景 支持选择 识别...
添加DataWorks数据服务数据源
本文介绍在DataV中添加DataWorks数据服务数据源，并将通过DataWorks数据表生成的API，快速地展示在DataV可视化大屏中的方法。前提条件 已准备好待添加的DataWorks数据服务数据源。背景信息 DataWorks数据服务生成的API默认不支持HTTPS协议...
流表
本文介绍流表的使用方法及示例。概述 流表：流表用于存储随时间发生的事件，仅支持插入数据，不支持更新和删除数据。流表可以被看作为事件的集合，随着时间的推移，事件不断被添加到表中，因此该集合是无边界的。流表支持设置数据过期时间...
DataV6.0数据集介绍
本教程主要包括数据集的介绍、数据集的创建、数据集的应用场景以及数据集的组件生成方法，并以柱状图和基础平面地图组件为例介绍数据集的创建步骤。介绍 DataV数据集支持多种数据源的接入，如数据库、Excel表格文件等，通过对数据的结构化...
ST_ImportOSGB
表结构：字段 类型 说明 project_id uuid 项目ID，自动生成。project_name text 项目名称。若用户不指定 project_name，则该列值为空。常用于存储多个子项目的表。srid integer 项目使用的空间参考。默认从 metadata.xml 中 ModelMetadata/...
ST_ImportOSGB
表结构：字段 类型 说明 project_id uuid 项目ID，自动生成。project_name text 项目名称。若用户不指定 project_name，则该列值为空。常用于存储多个子项目的表。srid integer 项目使用的空间参考。默认从 metadata.xml 中 ModelMetadata/...
管理问题数据
数据质量支持您保留数据质量监控过程中从数据表中发现的非预期数据，帮助您快速排查、定位问题，提升数据质量。本文为您介绍如何管理数据质量监控过程中从数据表中发现的非预期数据。背景信息 问题数据表 数据质量支持在部分规则校验不通过...
实例生成方式：发布后即时生成实例
DataWorks会为您的周期调度节点自动生成自调度实例，支持 T+1次日生成、发布后即时生成 两种实例生成方式，即发布至生产环境后第二天自动调度及发布至生产环境后立即自动调度。本文为您介绍即时生成实例的规则及配置要点。注意事项 周期...
执行补数据并查看补数据实例（旧版）
补数据可通过补历史或未来一段时间的数据，将写入数据至对应时间分区。代码中的 调度参数，将根据补数据选择的业务时间自动替换为具体值，并结合业务代码将对应时间数据写入指定分区。具体写入的分区与执行的代码逻辑，与任务定义的代码...
添加DataWorks数据服务数据源
本文介绍在DataV中添加DataWorks数据服务数据源，并将通过DataWorks数据表生成的API，快速地展示在DataV可视化大屏中的方法。前提条件 已准备好待添加的DataWorks数据服务数据源。背景信息 DataWorks数据服务生成的API默认不支持HTTPS协议...
数据流管理
数据流管理功能可以实现跨多索引存储，且仅追加时间序列数据，同时为请求提供唯一的命名资源。本文介绍如何创建数据流、查看或删除数据流、滚动更新数据流等。背景信息 数据流管理功能适用于日志、事件、指标和其他连续生成数据的场景。...
ST_As3dTiles
将基于sfmesh对象转换为3dtiles瓦片格式并存储到数据库中。语法 boolean ST_As3dTiles(sfmesh sfmesh_object,cstring table_name,cstring options default '{}');返回值 返回值 描述 true 导出成功。false 导出失败。参数 参数名称 描述 ...
ST_As3dTiles
将基于sfmesh对象转换为3dtiles瓦片格式并存储到数据库中。语法 boolean ST_As3dTiles(sfmesh sfmesh_object,cstring table_name,cstring options default '{}');返回值 返回值 描述 true 导出成功。false 导出失败。参数 参数名称 描述 ...
GenerateDISyncTaskConfigForUpdating
调用GenerateDISyncTaskConfigForUpdating接口，异步生成更新数据集成同步任务的异步线程ID。后续您需要通过该ID，调用 QueryDISyncTaskConfigProcessResult 接口获取异步生成更新数据集成同步任务需要的参数，通过该参数更新数据集成同步...
分析主体说明
默认设备ID为应用级别唯一的设备ID，由 Quicktracking自动生成：Android9及以下设备：SDK自动采集imei、wifimac、androidid、SN生成设备ID，生成后存入本地，只有删除应用获取删除应用数据才会重新生成设备ID。Android10级以上设备：SDK...
使用Copilot生成SQL
本文为您介绍如何使用Copilot生成SQL，以提高工作效率。操作步骤 在SQLConsole或Notebook页面上方单击，在对话框中输入查询、分析的自然语言。Copilot会在当前引入的数据库表作用域中进行查找。提出问题后，Copilot会根据表的描述信息和...
识别规则及识别方式
说明 自动继承开启后，下游会根据字段血缘关系自动继承直接上游字段的敏感等级，同时根据默认脱敏规则的配置，以实现对新增数据的自动保护，减少手动配置成本，也能更大程度上保证关联数据识别结果一致性和相关性。继承场景 支持选择 识别...
DisableAutoThrottleRules-关闭自动SQL限流功能
运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 必填 描述 示例值 ConsoleContext string 否 备用参数。None InstanceIds string 是 数据库实例 ID。说明 数据格式为 ...
查看并管理待提交实例
说明 恢复暂停的待提交实例，系统将判断当前是否已经到达该实例设定的定时运行时间，如果已到达，则系统自动生成补数据实例执行补数据，暂停：对于实例待提交状态的待提交实例，您可以 进行恢复。说明 暂停后将不会生成可以运行的补数据...
入门实践
本文以实现构建数据标准来设计数据模型，并通过规范化的流程，下发模型至计算引擎为例，为您介绍DataWorks数据建模的流程。前提条件 如果您使用的是阿里云主账号，请下载建模工具。如果您使用的是RAM用户，请完成授权并下载建模工具。详情...
数仓分层
基于阿里巴巴OneData方法论最佳实践，在阿里巴巴的数据体系中，建议将数据仓库分为三层：数据引入层（ODS，Operational Data Store）、数据公共层（CDM，Common Dimensions Model）和数据应用层（ADS，Application Data Store）。数据仓库...
数据方案概览
DMS的数据方案提供数据变更、数据导出、数据追踪、环境构建的功能，通过本文您可以了解数据方案的各项功能详情。一级功能 二级功能 功能描述 结构变更 结构设计 可以对目标库、表进行符合研发规范的表结构设计，保障多套环境（例如开发环境...
- 产品推荐
- 这些文档可能帮助您