过期欠费
过期欠费 过期欠费行为 1、用户在欠费1天内正常服务，欠费超过1天后系统会下线project/topic停服，相关资源均不会删除，存储会根据生命周期清理，欠费期间您所占用的存储空间的这部分资源仍会继续扣费（累计7天，直到资源被收回收）；...
查看订阅
订阅详情信息的订阅ID会被用来索引，在订阅搜索页面可以根据关键字进行匹配，方便后面订阅查询，尤其在某些Topic订阅量很多的时候这个功能非常有用。查看订阅 订阅详情信息的订阅ID会被用来索引，在订阅搜索页面可以根据关键字进行匹配，...
配置DataHub输出
参数 描述 数据源 选择已经配置好的DataHub数据源，此处仅支持DataHub数据源。如果未配置数据源，请单击右侧的 新建数据源，跳转至 工作空间管理>数据源管理 页面进行新建。详情请参见 配置DataHub数据源。Topic 选择当前数据源下需要同步...
配置DataHub输出组件
前提条件 已创建DataHub数据源。具体操作，请参见 创建DataHub数据源。进行DataHub输入组件属性配置的账号，需具备该数据源的同步读权限。如果没有权限，则需要申请数据源权限。具体操作，请参见 管理数据源权限。操作步骤 在Dataphin首页...
配置DataHub输出组件
前提条件 已创建DataHub数据源。具体操作，请参见 创建DataHub数据源。进行DataHub输入组件属性配置的账号，需具备该数据源的同步读权限。如果没有权限，则需要申请数据源权限。具体操作，请参见 申请、续期和交还数据源权限。操作步骤 在...
配置DataHub输入组件
配置DataHub输入组件后，可以将DataHub数据源中的数据读取至大数据平台对接的存储系统内，并进行数据整合和二次加工。本文为您介绍如何配置DataHub输入组件。前提条件 已创建离线单条管道，详情请参见 通过单条管道创建集成任务。操作步骤 ...
配置DataHub输入组件
配置DataHub输入组件后，可以将DataHub数据源中的数据读取至大数据平台对接的存储系统内，并进行数据整合和二次加工。本文为您介绍如何配置DataHub输入组件。前提条件 已创建离线单条管道，详情请参见 通过单条管道创建集成任务。操作步骤 ...
新建 DataHub 数据源
本文为您介绍如何在数据传输中新建 DataHub 数据源。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建数据源 对话框中，选择 数据源类型 为 DataHub。...
进入数据质量概览（旧版）
报警趋势图 为您展示 近7天、近30天 和 近半年 EMR、MaxCompute和DataHub数据源的任务报警趋势图，单位：次。阻塞趋势图 为您展示 近7天、近30天 和 近半年 EMR、MaxCompute和DataHub数据源的任务阻塞情况趋势图，单位：次。
配置DataHub输入
参数 描述 数据源 选择已经配置好的DataHub数据源，此处仅支持DataHub数据源。如果未配置数据源，请单击右侧的 新建数据源，跳转至 工作空间管理>数据源管理 页面进行新建。详情请参见 配置DataHub数据源。Topic 选择当前数据源下需要同步...
DataHub数据源
本文介绍如何使用DataHub数据源进行数据分析或者交互式开发。建表语法 CREATE TABLE tbName USING datahub OPTIONS(propertyName=propertyValue[,propertyName=propertyValue]*);Table Schema 创建DataHub表时，无需显式定义表的字段信息，...
DataHub通过数据集成批量导入数据
type":"string"},{"value":true,"type":"bool"},{"value":"byte string","type":"bytes"}],"sliceRecordCount":"100000"} },"writer":{"plugin":"datahub","parameter":{"datasource":"datahub",/数据源名。topic":"xxxx",/Topic是...
配置并管理实时同步任务
在 设置目标Topic 页面，选择 目标DataHub数据源、DataHub写入模式 及 分片策略。如果您需要同步无主键的来源表，则可以勾选 支持源表无主键同步。选择目标数据源并配置目标Topic格式。在 设置目标Topic 页面，选择 目标DataHub数据源、...
DataHub数据源
DataHub数据源作为数据中枢，为您提供读取和写入DataHub数据库的双向通道，能够快速解决海量数据的计算问题。本文为您介绍DataWorks的DataHub数据同步的能力支持情况。支持的版本 DataHub Reader通过DataHub的Java SDK读取DataHub中的数据...
支持的数据源及同步方案
AnalyticDB for MySQL 3.0数据源-AnalyticDB for PostgreSQL数据源-ApsaraDB For OceanBase数据源-BigQuery数据源-ClickHouse数据源-DataHub数据源-DB2数据源-Doris数据源-DM（达梦）数据源-DRDS（PolarDB-X）数据源-Elasticsearch数据源-...
Dataphin支持的数据源
创建Log Service数据源 Kafka 支持 支持 不支持 不支持 支持 创建Kafka数据源 RocketMQ 不支持 支持 不支持 不支持 不支持 创建RocketMQ数据源 DataHub 支持 支持 不支持 不支持 支持 创建DataHub数据源 关系型数据源 数据源类型 离线集成 ...
Dataphin支持的数据源
不支持 不支持 不支持 创建Kafka数据源 DataHub 支持 支持 不支持 支持 不支持 不支持 不支持 创建DataHub数据源 关系型数据源 数据源类型 离线集成 实时集成 离线研发 实时研发 全域质量 隐私计算 数据服务 创建指导 PolarDB 支持 不支持 ...
同步 OceanBase 数据库的数据至 DataHub
目标端 如果您已新建 DataHub 数据源，请从下拉列表中进行选择。如果未新建，请单击下拉列表中的 新建数据源，在右侧对话框进行新建。参数详情请参见 新建 DataHub 数据源。单击 下一步。在 选择同步类型 页面，选择当前数据同步项目的同步...
配置数据源
MySQL 支持 支持 配置MySQL数据源 PostgreSQL 支持 支持 配置PostgreSQL数据源 SQL Server 支持 支持 配置SQLServer数据源 Oracle 支持 支持 配置Oracle数据源 说明 请选择连接串形式添加数据源。AnalyticDB for MySQL 2.0（ADS）支持 支持...
数据查询与分析管控
数据源类型 说明 MaxCompute数据源 查看MaxCompute引擎类型数据源访问身份，在数据分析查询该数据源数据时，默认通过当前任务执行者账号操作。示例查看MaxCompute开发数据源的访问身份。非MaxCompute数据源 当选择为非MaxCompute类型的引擎...
添加DTS数据源
本文介绍如何在 云原生多模数据库 Lindorm 控制台上添加DTS数据源。前提条件 云原生多模数据库 Lindorm 实例已开通LTS服务，具体操作请参见 开通LTS服务。操作步骤 登录LTS服务。具体操作，请参见 登录LTS服务。在左侧导航栏，选择 数据源...
全量数据同步
参数 说明 示例 数据源 数据来源端的数据源类型以及该类型下已添加的数据源。MySQL/dataq_dws_rds 数据表 数据源中数据实际来源表。ys_yhkh（未上云）同步模式 数据进行同步的方式，默认全量。全量 自定义条件 支持输入自定义SQL查询条件，...
文档更新动态（2022年）
更新说明 创建Kafka数据源、创建DataHub数据源、创建SAP HANA数据源、创建MongoDB数据源、管理FTP组件、配置脚本模式输入组件 2022年10月25日 资产权限新增权限审计模块 可以对自己的权限进行审计。新增说明 权限操作审计 2022年10月25日 ...
数据集成支持的数据源
数据集成支持离线集成、实时集成、整库迁移集成方式。本文为您介绍离线集成、实时集成、整库迁移支持的数据源类型...目标准数据源 MaxCompute、Kafka、Hive、DataHub 创建MaxCompute数据源 创建Kafka数据源 创建Hive数据源 创建DataHub数据源
外部数据
一个外部数据包装器是一个库，它可以与一个外部数据源通讯，并隐藏连接到数据源和从它获取数据的细节。在 contrib 模块中有一些外部数据包装器。其他类型的外部数据包装器可以在第三方产品中找到。要访问外部数据，我们需要建立一个外部...
新建离线自定义源类型
Dataphin支持自定义离线数据源，以满足不同业务场景数据同步的需求。前提条件 对于RDBMS数据库，已获取数据库驱动文件。对于其他类型数据库，获取数据源连接配置项的JSON代码和读/写插件。背景信息 RDBMS数据库即关系型数据库，如Mysql、...
新建离线自定义源类型
Dataphin支持自定义离线数据源，以满足不同业务场景数据同步的需求。前提条件 对于RDBMS数据库，已获取数据库驱动文件。对于其他类型数据库，获取数据源连接配置项的JSON代码和读/写插件。背景信息 RDBMS数据库即关系型数据库，如Mysql、...
Kafka实时ETL同步至Hologres
添加数据源 新建Kafka数据源 您可以手动添加Kafka数据源至DataWorks，详情请参见：Kafka数据源。新建Hologres数据源 获取Hologres数据源信息 进入 Hologres产品控制台。找到您要进行数据同步的Hologres数据源，在 实例详情 界面获取到...
数据服务入门
步骤一：创建数据源并配置网络连通性 使用数据服务创建API前，您需将数据库或数据仓库添加为DataWorks的数据源，并保障数据服务资源组与您的目标数据源网络连通，以便调用API时DataWorks可成功访问数据源。说明 DataWorks工作空间将集群或...
增量数据同步
在 创建表 对话窗中，系统会根据上一步配置的数据源数据对象自动生成表名、备注以及字段。您需要将表名修改为“stg_base_yhkh_demo_di“，分区信息 为“非分区表”。配置完成，单击 确定，返回任务配置页面。stg_base_yhkh_demo_di 初始化...
新建数据库SQL任务
执行数据库SQL需要获取数据源的执行权限，不支持表级权限校验。更多信息，请参见 申请、续期和交还数据源权限。不支持基于MySQL、Oracle数据源SQL数据更新触发调度数据源质量规则。更新信息，请参见 创建数据表质量规则。查询结果不支持全...
新建数据库SQL任务
执行数据库SQL需要获取数据源的执行权限，不支持表级权限校验。更多信息，请参见 申请、续期和交还数据源权限。不支持基于MySQL、Oracle数据源SQL数据更新触发调度数据源质量规则。更新信息，请参见 创建全域数据表质量规则。查询结果不...
迭代器功能说明
迭代器即列表生成器。在区块编辑器面板中可先添加一个或多个组件组成的...在 数据源配置 面板中，单击 数据源类型 下拉框，选择 从迭代器中获取 数据源选项。重命名迭代器 在区块编辑器图层栏，您可以双击迭代器，重命名输入迭代器的名称。
LogHub（SLS）实时ETL同步至Hologres
新建数据源 配置LogHub（SLS）数据源 您可以手动添加LogHub（SLS）数据源至DataWorks，详情请参见 配置LogHub（SLS）数据源。新建Hologres数据源 获取Hologres数据源信息 进入 Hologres产品控制台。找到您要进行数据同步的Hologres数据源，...
3D Tiles 倾斜摄影
在场景编辑器内配置数据面板时，您还可以使用 空间构建数据源 获取空间地图数据，具体步骤如下：在图层配置面板中选择 数据 页签，单击面板下方的 数据源类型 下拉框，选择 空间构建数据源。在面板下方的 数据项目 下拉列表中，选择一个...
S3M BIM
在场景编辑器内配置数据面板时，您还可以使用 空间构建数据源 获取空间地图数据，具体步骤如下：在图层配置面板中选择 数据 页签，单击面板下方的 数据源类型 下拉框，选择 空间构建数据源。在面板下方的 数据项目 下拉列表中，选择一个...
- 产品推荐
- 这些文档可能帮助您