组件与数据类型的兼容
不支持 不支持 PAI 支持除Decimal之外的其它数据类型 2.0新增的数据类型中仅支持INT 部分功能支持map数据类型 不支持 不支持 PyODPS 支持 DataFrame不支持2.0数据类型 其它功能都支持2.0数据类型 支持 DataFrame不支持2.0数据类型 其它功能...
飞线层
type 对应数据中的 type 字段，如果飞线类型的 type 与数据中 type 字段不一致时，飞线层会使用 默认颜色 进行渲染。图 1.飞线类型样式 图 2.飞线数据 数据面板 配置字段说明 字段 说明 from 飞线起始位置的经纬度，经纬度之间用半角逗号...
飞线层
type 对应数据中的type字段，如果飞线类型的 type 与数据中type字段不一致时，飞线层会使用 默认颜色 进行渲染。数据源面板 字段 说明 from 飞线起始位置的经纬度，经纬度之间用半角逗号分隔。to 飞线终点位置的经纬度，经纬度之间用半角...
转换函数
rawtohex-68656c6c6f20776f726c64 HEXTORAW 描述 HEXTORAW将CHAR、VARCHAR2、NCHAR或NVARCHAR2数据类型中包含十六进制数字的字符转换为RAW类型数据。说明 此函数不直接支持CLOB数据。但是，CLOB可以通过隐式数据转换作为参数传入。语法 ...
配置离线数据集成节点
在画布左侧 任务类型 列表中，拖拽 离线数据集成 节点到画布空白区域。双击离线数据集成节点。可选：在离线数据集成节点的配置页面，单击页面右侧的 变量设置，配置该节点需要引用的变量。您可以单击 变量设置 区域右上角的，查看配置变量...
基于DLF、RDS或Flink、OSS支持Delta Lake或Hudi存储...
对于不带分区的Hudi格式，您也可使用单表离线同步方案，但无需在DataWorks数据开发模块创建离线同步任务，直接在DLF控制台中创建 关系数据库全量入湖 类型的任务即可，具体操作可参考 OSS数据进行格式转换入湖。单表离线同步 在DataWorks ...
添加 MySQL 数据库的白名单
复制 OMA 控制台 选择源端数据库类型 对话框中显示的 OceanBase 数据评估服务器的 IP 地址段。在安全组详情页面的 访问规则>入方向 区域，单击 快速添加。您也可以选择 手动添加，手动输入 端口范围、授权对象 等信息。在 快速添加 对话框...
添加 Oracle 数据库的白名单
复制 OMA 控制台 选择源端数据库类型 对话框中显示的 OceanBase 数据评估服务器的 IP 地址段。在安全组详情页面的 访问规则>入方向 区域，单击 快速添加。您也可以选择 手动添加，手动输入 端口范围、授权对象 等信息。在 快速添加 对话框...
Hive兼容数据类型版本
Hive兼容数据类型版本是MaxCompute三种数据类型版本之一，该数据类型版本下仅支持Hive兼容数据类型。本文为您介绍Hive兼容数据类型版本的定义、支持的数据类型以及与其他数据类型版本的差异。定义 项目空间选择数据类型版本为Hive兼容数据...
功能简介
在数据中台建设过程中，搭建核心处理平台，并根据相关标准要求，将源数据或治理后的数据，按照“全面、高效、统筹”的共享原则，“低延时”、“精准化”地传递给用户，方便更多应用消费数据，实现数据价值。协同管控各种组织机构，为智慧化...
2.0数据类型版本
本文为您介绍MaxCompute 2.0数据类型版本的定义、使用场景、支持的数据类型以及与其它数据类型版本的差异。定义 项目空间选择数据类型版本为2.0数据类型版本时，项目空间的数据类型属性参数定义如下。setproject odps.sql.type.system.odps...
异构数据库间的数据类型映射关系
不同类型的数据库（异构数据库）支持的数据类型不一样，DTS在进行异构数据库之间的数据迁移时，会在结构迁移阶段进行数据类型映射，即将源库中的数据类型转为目标库支持的数据类型。本文为您列出详细数据类型映射关系，便于您查阅和评估...
统一服务
在数据中台建设过程中，搭建核心处理平台，并根据相关标准要求，将源数据或治理后的数据，按照“全面、高效、统筹”的共享原则，“低延时”、“精准化”的传递给用户，方便更多应用消费数据，实现数据价值。协同管控各种组织机构，为智慧化...
功能简介
在数据中台建设过程中，搭建核心处理平台，并根据相关标准要求，将源数据或治理后的数据，按照“全面、高效、统筹”的共享原则，“低延时”、“精准化”地传递给用户，方便更多应用消费数据，实现数据价值。协同管控各种组织机构，为智慧化...
全量数据同步
在 离线数据同步 管理页面，选择新增的全量离线数据同步任务，操作列中单击 上线。预期结果 在 离线数据同步 管理页面，选择上线状态的“信用卡客户数据上云_全量”同步任务，在 操作 列中单击 监控，跳转至 运维监控 下的 离线同步实例 ...
线热力层（v2.x版本）
info（可选）弹窗内容，如果为空，则弹窗信息显示为对应的矢量线数据中的 properties 字段的内容。如果不为空，弹窗信息显示为 info 字段的内容。color（可选）线热力层支持数据优先的渲染，如果您配置了 color（线颜色）、weight（线宽）...
创建MySQL to MaxCompute离线同步周期任务
通过选择已注册的数据源端数据和目标端，实现全量任务自动建表的方式创建离线同步周期任务，本文介绍如何创建MySQL to ...odps_dev stg_base_xykxfmx_demo_di 预期结果 刷新 离线数据同步 页面，周期任务管理 列表中展示新建的周期任务。
创建数据流
在数据管理DMS离线集成中，可以组合各类任务节点，形成数据流，通过周期调度运行达到数据加工、数据同步的目的。本文介绍创建数据流和配置的方法。前提条件 支持的数据库类型：MySQL：RDS MySQL、PolarDB MySQL版、MyBase MySQL、PolarDB...
客户案例
新零售行业：大润发云上数据中台建设 客户架构如下。客户简介 为了快速数字化转型，拥抱新零售，大润发计划两年内将IT系统全面迁移到阿里云上，不再自建IDC。同时与阿里云合作启动数据中台项目，可以帮助大润发降低TCO的同时，更好的依托云...
增量数据同步
在 离线数据同步 管理页面，选择新增的全量离线数据同步任务，操作列中单击 上线。预期结果 在 离线数据同步 管理页面，选择上线状态的“信用卡客户数据上云_增量”同步任务，操作列中单击 监控，跳转至 运维监控，单击左侧导航栏中的 离线...
Dataphin支持的数据源
资产质量概述 数据服务 数据服务（OneService）是基于Dataphin建设数据中台的最后一步。数据服务作为统一的数据服务出口，实现了数据的统一市场化管理，有效地降低数据开放门槛的同时，保障了数据开放的安全。数据服务概述 本文仅列举了...
批量新增离线数据同步任务
本文以同步MySQL数据源到MaxCompute目标端为例，介绍如何批量新增离线数据同步任务。前提条件 已存在对应数据源，具体操作，请参见 新建数据源。已完成源端数据和目标端的物理表同步，具体操作，请参见 获取物理表。已添加离线数据同步任务...
下拉框选择器
可选 auto（默认全部展示）、value（展示数据中 value 字段值）和 title（展示数据中 title 字段值）。边框样式：输入框边框的样式。参数 说明 默认 默认边框下的线粗细、线的可选类型、线颜色和边框圆角的角度值。悬浮 鼠标悬浮在输入框...
使用DataWorks
如果您需要导出多张表数据，需要创建多个离线数据同步节点。操作流程 通过数据集成导出MaxCompute数据的流程如下：添加MaxCompute数据源 将MaxCompute数据源添加至DataWorks的数据源列表。添加目标数据源 将目标数据源添加至DataWorks的...
新增离线数据同步任务
离线数据同步任务支持的云计算资源类型为MySQL、Oracle、SQL Server、Hdfs、ftp、PostgreSQL、Hive、MaxCompute、AnalyticDB PostgreSQL、OSS。本文以同步MySQL数据源到MaxCompute目标端为例，介绍如何新增离线数据同步。前提条件 已存在...
数据类型版本说明
MaxCompute目前提供了三种不同类型的数据类型版本，包括1.0数据类型、2.0数据类型以及Hive兼容数据类型，您可以根据业务需求选择合适的数据类型版本。本文为您介绍三种数据类型版本、选择数据类型版本以及查看和修改项目的数据类型版本。...
OSS Foreign Table数据类型对照表
Parquet文件数据类型对照表 Parquet文件中没有提供Logical Types的情况下，数据类型对照如下：Parquet数据类型 AnalyticDB PostgreSQL版 数据类型 BOOLEAN bool INT32 int4 INT64 int8 INT96 timestamp FLOAT float4 DOUBLE float8 BYTE_...
导出CSV
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。鼠标悬停至 图标，单击 新建业务流程。在 新建业务流程 对话框中，输入 业务名称 和 描述。单击 新建。配置网络与资源...
功能简介
面向数据资产管理者提供服务的统计分析、服务用量统计分析、热门数据统计分析能力，实现数据中台建设后半场“数据应用”的有效落地，支撑数据智能应用的高效开发。通用资源 提供了自定义函数和函数资源的能力，帮助用户在数据开发等过程中...
规格及选型
案例七：大型互联网企业 用户为大型互联网企业，各业务线具有各自独立的业务中台，企业存在统一的数据中台，希望可以快速部署独立资源支持不同的业务负载，且未来不会产生数据孤岛。建议：使用 AnalyticDB PostgreSQL版 Serverless版本，...
弧线层
事件 事件 说明 当飞线请求完成时 飞线数据接口请求返回并经过过滤器处理后抛出的事件，同时抛出处理后的JSON格式的数据。具体数据示例请参见画布编辑器中组件右侧配置面板 数据源 页签的 数据响应结果 区域。动作 动作 说明 请求飞线 重新...
什么是数据资源平台
统一服务：是一款数据中台建设过程中的数据服务化组件，面向数据开发者提供覆盖各个加工阶段统一体验的、便捷的数据查询转服务、服务管理、服务运维能力；面向数据资产管理者提供服务的统计分析、服务用量统计分析能力，实现数据中台建设后...
执行离线评估
源端数据库类型 从下拉列表中选择源端数据库类型，目前支持 Oracle、MySQL 和 DB2 LUW。文件类型 离线评估可以上传您需要评估的文件至云上进行评估，目前支持 SQL 文件、MyBatis 文件、iBatis 文件和采集文件。您可以单击 如何获取文件 ...
使用DataWorks同步数据
离线同步支持的数据源类型，具体请参见 支持的数据源与读写插件。前提条件 已创建工作空间，引擎服务选择为MaxCompute。如何创建，请参见 创建工作空间。已创建并配置独享数据集成资源组。如何创建和配置，请参见 新增和使用独享数据集成...
新建补数据计划
在离线计算任务中新建补数据计划 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 运维监控。在左侧导航栏，单击 图标，选择 离线任务>离线计算任务。在离线计算任务列表中...
Echarts K线图
分割间隔：单击+或-号，或手动输入数值，修改坐标轴分隔线的显示间隔，在类目轴中有效，默认会采用分割线不重叠的策略间隔显示分割线。可以设置成 0 强制显示所有分割线。如果设置为 1，表示 隔一个分割线显示一个分割线，如果值为 2，表示...
Echarts K线图
分割间隔：单击+或-号，或手动输入数值，修改坐标轴分隔线的显示间隔，在类目轴中有效，默认会采用分割线不重叠的策略间隔显示分割线。可以设置成 0 强制显示所有分割线。如果设置为 1，表示 隔一个分割线显示一个分割线，如果值为 2，表示...
新功能发布记录
DMS控制台切换 07月 功能名称 变更类型 功能描述 相关文档 离线集成 新增 离线集成是一种低代码开发数据加工任务的工具，您可以组合各类任务节点，形成数据流，通过周期调度运行达到数据加工、数据同步的目的。离线集成概述 DevOps 新增 ...
功能特性
通过DLA控制台配置数据源（RDS数据源、ECS自建数据库数据）和目标OSS数据仓库，系统按照您设定的数据同步时间自动、无缝的帮您把数据源中的数据同步到目标数据仓库OSS中，同时在数据仓库和DLA中创建与数据源表相同的表结构，基于目标数据...
自定义RDBMS数据库及同步数据
为了满足不同业务场景数据集成的诉求，Dataphin支持用户自定义当前系统不支持的RDBMS数据库（关系型数据库）类型的组件，并进行数据同步。您只需要准备关系型数据库的驱动，即可自定义RDBMS数据库类型的组件。本教程以MySQL为例，为您介绍...
- 产品推荐
- 这些文档可能帮助您