配置逻辑表数据延迟

在数据 开发 页面,选择您需配置数据延迟的逻辑,进入调度配置信息页面。在调度配置页面,配置逻辑的数据延迟。开启数据延迟,系统将自动重跑本逻辑在 最大延迟天数 周期内的全部数据。可选择 1~15天。如下所示:说明 当前逻辑无...

配置逻辑表数据延迟

在数据 开发 页面,选择您需配置数据延迟的逻辑,进入调度配置信息页面。在调度配置页面,配置逻辑的数据延迟。开启数据延迟,系统将自动重跑本逻辑在 最大延迟天数 周期内的全部数据。可选择 1~15天。如下所示:说明 当前逻辑无...

创建元数据

在基于HBase、Elasticsearch或MongoDB数据源创建服务单元之前,需要先创建对应数据源中数据表的元数据,以实现通过元数据确定数据源中数据表的结构。后续您可以通过该元数据读取到对应数据源的数据。本文为您介绍如何创建HBase、...

自定义RDBMS数据库及同步数据

步骤一:配置网络和创建数据表 连通RDS MySQL实例Dataphin实例间的网络。添加RDS MySQL实例的外网地址和端口至Dataphin项目空间的沙箱白名单:获取RDS MySQL实例的外网地址、端口。进入 数据库连接 页面,获取RDS MySQL实例的外网地址和...

自定义RDBMS数据库及同步数据

步骤一:配置网络和创建数据表 连通RDS MySQL实例Dataphin实例间的网络。添加RDS MySQL实例的外网地址和端口至Dataphin项目空间的沙箱白名单:获取RDS MySQL实例的外网地址、端口。进入 数据库连接 页面,获取RDS MySQL实例的外网地址和...

操作流程

数据同步主要内容包括数据源配置、获取物理创建同步任务三方面。本文介绍数据同步的操作流程。流程图 流程说明 流程 说明 配置数据配置数据同步的源端和目标端。数据同步的源端,是数据同步任务的起点。数据同步目标端是同步的终点...

操作流程

数据同步主要内容包括数据源配置、获取物理创建同步任务三方面。本文介绍数据同步的操作流程。流程图 流程说明 流程 说明 配置数据配置数据同步的源端和目标端。数据同步的源端,是数据同步任务的起点。数据同步目标端是同步的终点...

配置数据分类

只有区块链的管理员可以配置数据分类格式。创建数据格式 管理员登录BaaS平台,并 进入管理页面 后,点击左侧导航栏 数据分类,进入数据分类配置页面。首次创建数据格式,需要配置数据格式的名称和描述。在创建数据格式界面,点击 添加数据...

标准代码

标准代码是字段标准的取值范围,在标准代码中可设置某一字段标准可选择的数据的内容以及范围。例如性别字段标准的标准代码内容应该...后续步骤 创建完成后,您可在数据建模配置事实表与维度字段时进行关联,关联方法请参见 发布模型至引擎。

元数据管理

创建元数据 创建完成元数据库后,选择 创建元数据表。配置元数据表参数。输入数据表的名称。选择所属数据目录。选择数据目录下的数据库。(选填)输入元数据表描述。选择元数据表中数据存储的位置。选择元数据表的存储格式。指定元数据表...

配置集成管道质量监控

通过离线集成管道质量监控,Dataphin会自动为您监控数据表的质量,如果数据表有质量风险,系统会自动报警,通知告警接收人,帮助您及时了解数据表质量状况。本文为您介绍如何配置质量规则。权限说明 项目开发者支持创建集成任务、配置质量...

配置集成管道质量监控

通过离线集成管道质量监控,Dataphin会自动为您监控数据表的质量,如果数据表有质量风险,系统会自动报警,通知告警接收人,帮助您及时了解数据表质量状况。本文为您介绍如何配置质量规则。权限说明 项目开发者支持创建集成任务、配置质量...

生命周期管理介绍

功能说明 您可以通过生命周期管理对数据湖中的数据库、数据表配置数据管理规则,可以基于数据最后访问时间、分区值、分区/表最后修改时间、分区/表创建时间四种规则类型,对数据定期进行存储类型转换,从而节省数据存储成本。同时,可以...

创建GreenPlum数据

配置数据Dataphin的连接参数。若您的数据源配置选择 生产+开发数据源,则需配置 生产+开发数据源 的连接信息。如果您的数据源配置为 生产数据源,仅需配置 生产数据源 的连接信息。说明 通常情况下,生产数据源和开发数据源需配置非同...

创建GBase 8a数据

配置数据Dataphin的连接参数。若您的数据源配置选择 生产+开发数据源,则需配置 生产+开发数据源 的连接信息。如果您的数据源配置为 生产数据源,仅需配置 生产数据源 的连接信息。说明 通常情况下,生产数据源和开发数据源需配置非同...

配置Hologres输入组件

如果Hologres数据源中还没有数据表,则需要提前创建数据表。具体操作,请参见 表。输入过滤 配置Hologres输入组件读取数据时需要过滤掉的数据。例如,ID>112。输出字段 输出字段区域展示了已选中表的所有字段。如果不需要将某些字段输出至...

创建GreenPlum数据

配置数据Dataphin的连接参数。若您的数据源配置选择 生产+开发数据源,则需配置 生产+开发数据源 的连接信息。如果您的数据源配置为 生产数据源,仅需配置 生产数据源 的连接信息。说明 通常情况下,生产数据源和开发数据源需配置非同...

创建API数据

配置数据Dataphin的连接参数。说明 通常情况下,生产数据源和开发数据源需配置非同一个数据源,以使开发数据源生产数据源的环境隔离,降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源,即相同参数值。参数 ...

创建API数据

配置数据Dataphin的连接参数。说明 通常情况下,生产数据源和开发数据源需配置非同一个数据源,以使开发数据源生产数据源的环境隔离,降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源,即相同参数值。参数 ...

创建GBase 8a数据

配置数据Dataphin的连接参数。若您的数据源配置选择 生产+开发数据源,则需配置 生产+开发数据源 的连接信息。如果您的数据源配置为 生产数据源,仅需配置 生产数据源 的连接信息。说明 通常情况下,生产数据源和开发数据源需配置非同...

创建KingbaseES数据

配置数据Dataphin的连接参数。若您的数据源配置选择 生产+开发数据源,则需配置 生产+开发数据源 的连接信息。如果您的数据源配置为 生产数据源,仅需配置 生产数据源 的连接信息。说明 通常情况下,生产数据源和开发数据源需配置非同...

创建KingbaseES数据

配置数据Dataphin的连接参数。若您的数据源配置选择 生产+开发数据源,则需配置 生产+开发数据源 的连接信息。如果您的数据源配置为 生产数据源,仅需配置 生产数据源 的连接信息。说明 通常情况下,生产数据源和开发数据源需配置非同...

全量数据同步

通过选择已注册的数据源端数据和目标端,实现全量任务自动建的方式创建离线同步周期任务,本文介绍如何创建MySQL to MaxCompute离线全量数据同步一次性调度的任务。前提条件 已新建工作组,具体操作,请参见 新建工作组。已在工作组中...

创建SAP HANA数据

配置数据Dataphin的连接参数。若您的数据源配置选择 生产+开发数据源,则需配置 生产+开发数据源 的连接信息。如果您的数据源配置为 生产数据源,仅需配置 生产数据源 的连接信息。说明 通常情况下,生产数据源和开发数据源需配置非同...

创建StarRocks数据

配置数据Datahpin的连接参数 若您的数据源配置选择 生产+开发数据源,则需配置 生产+开发数据源 的连接信息。如果您的数据源配置为 生产数据源,仅需配置 生产数据源 的连接信息。说明 通常情况下,生产数据源和开发数据源需配置非同...

创建StarRocks数据

配置数据Datahpin的连接参数 若您的数据源配置选择 生产+开发数据源,则需配置 生产+开发数据源 的连接信息。如果您的数据源配置为 生产数据源,仅需配置 生产数据源 的连接信息。说明 通常情况下,生产数据源和开发数据源需配置非同...

创建AnalyticDB for MySQL 2.0数据

配置数据Dataphin的连接参数。若您的数据源配置选择 生产+开发数据源,则需配置 生产+开发数据源 的连接信息。如果您的数据源配置为 生产数据源,仅需配置 生产数据源 的连接信息。说明 通常情况下,生产数据源和开发数据源需配置非同...

创建DataHub数据

配置数据Dataphin的连接参数。若您的数据源配置选择 生产+开发数据源,则需配置 生产+开发数据源 的连接信息。如果您的数据源配置为 生产数据源,仅需配置 生产数据源 的连接信息。说明 通常情况下,生产数据源和开发数据源需配置非同...

创建OceanBase数据

配置数据Dataphin的连接参数。若您的数据源配置选择 生产+开发数据源,则需配置 生产+开发数据源 的连接信息。如果您的数据源配置为 生产数据源,仅需配置 生产数据源 的连接信息。说明 通常情况下,生产数据源和开发数据源需配置非同...

新建手工

本文为您介绍如何基于Dataphin分析平台新建手工表。操作步骤 在Dataphin首页,单击顶部菜单栏中的 分析。按照下图操作指引,进入 新建手工表 对话框...后续步骤 完成手工表创建后,您可对手工表进行编辑和管理。更多信息,请参见 手工表概述。

新建手工

本文为您介绍如何基于Dataphin分析平台新建手工表。操作步骤 在Dataphin首页,单击顶部菜单栏中的 分析。按照下图操作指引,进入 新建手工表 对话框...后续步骤 完成手工表创建后,您可对手工表进行编辑和管理。更多信息,请参见 手工表概述。

创建SAP HANA数据

配置数据Dataphin的连接参数。若您的数据源配置选择 生产+开发数据源,则需配置 生产+开发数据源 的连接信息。如果您的数据源配置为 生产数据源,仅需配置 生产数据源 的连接信息。说明 通常情况下,生产数据源和开发数据源需配置非同...

创建OceanBase数据

配置数据Dataphin的连接参数。若您的数据源配置选择 生产+开发数据源,则需配置 生产+开发数据源 的连接信息。如果您的数据源配置为 生产数据源,仅需配置 生产数据源 的连接信息。说明 通常情况下,生产数据源和开发数据源需配置非同...

实施步骤

通过DTS实时同步PolarDB for MySQL数据到分析型数据库MySQL版需要以下几个步骤:步骤一:创建DTS同步作业 步骤二:配置同步链路 步骤三:查看同步数据 步骤一:创建DTS同步作业 创建DTS同步作业需要用户支付一定的费用,DTS支持两种付费...

创建ClickHouse数据

配置数据Dataphin的连接参数。若您的数据源配置选择 生产+开发数据源,则需配置 生产+开发数据源 的连接信息。如果您的数据源配置为 生产数据源,仅需配置 生产数据源 的连接信息。说明 通常情况下,生产数据源和开发数据源需配置非同...

导出CSV

选择表类型与表。如果您的表是通过SQL创建的,表类型请选择TableService。如果您的表是通过HBase API创建的,表类型请选择WideColumn。如果表包含动态列,表类型请选择WideColumn。如果没有找到您的表,可以切换表类型。选择读取方式。如果...

确认血缘

任务配置上下游节点依赖前,您需先确认当前节点的血缘关系(例如,表数据间的血缘关系、产出的分区数据),基于血缘关系配置节点的调度依赖。本文为您介绍如何确认血缘,以及未基于血缘配置节点依赖的影响。背景信息 确认血缘,...

功能更新动态(2023年)

支持配置数据源编码,配置数据源编码后,可在Flink SQL任务中通过 数据源编码.table 或 数据源编码.schema.table 的格式引用MySQL、Hologres和MaxCompute数据源中的创建FTP数据源 创建Salesforce数据源 创建OSS数据源 安全设置 安全...

使用DTS同步RDS MySQL数据到AnalyticDB MySQL 2.0

本文以RDS MySQL数据源为例,介绍如何通过DTS将RDS MySQL数据实时同步至 AnalyticDB MySQL版 2.0 中。前提条件 根据 RDS MySQL快速入门,准备好测试...进入 AnalyticDB MySQL版控制台,在 ads_DataBase 数据库中可以查看到同步过来的数据表

增量数据同步

通过选择已注册的数据源端数据和目标端,实现增量任务自动建的方式创建离线同步周期任务,本文介绍如何创建MySQL to MaxCompute离线增量数据同步周期调度的任务。前提条件 已新建工作组“信息中心(xxzx)”,具体操作,请参见 新建工作...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 DBS 云数据库 RDS DataV数据可视化 云服务器 ECS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用