项目 您可以将创建的数据源绑定到指定项目/不绑定项目。数据源绑定项目后,用户创建的数据库将自动移入项目。说明 数据库系统的内置数据库是否自动同步到项目是通过系统配置项 odc.connect.database.sync.block-internal-database 确定。该...
创建项目 创建数据集 说明 数据绑定将使用创建项目或数据集时所指定的 工作流模板 对文件进行处理。绑定关系创建后,智能媒体管理(IMM)会先对对象存储(OSS)Bucket 中的已有数据进行全量扫描,并抽取文件元数据信息进行索引。完成后,...
若您需要在SQL变更或结构设计中快速载入多个数据库,可以创建一个数据库分组,将多个数据库环境、引擎类型相同的数据库绑定成为一个分组。本文介绍如何创建数据库分组。背景信息 当您的业务部署在多个地域,且存在多个数据库时,您每次做...
用户可以编写应用程序或者使用流计算引擎来处理写入到数据总线 DataHub的流式数据比如实时Web访问日志、应用日志、各种事件等,并产出各种实时的数据处理结果比如实时图表、报警信息、实时统计等。产品概述 数据总线 DataHub基本介绍 阿里...
MongoDB提供如下备份功能:快照备份:保留某一时间点磁盘的数据状态。能够做到在分钟级完成数据库的恢复。物理备份:备份MongoDB实例中数据库相关的物理文件,备份速度较逻辑备份更快,且恢复速度也更快。逻辑备份:通过mongodump工具将对...
名称 类型 描述 示例值 object 绑定信息。ProjectName string 项目名称。immtest DatasetName string 数据集名称。dataset001 URI string 数据集绑定的 OSS Bucket URI。OSS Bucket URI 的格式为 oss:/${bucketname},其中 bucketname 为和...
若地域不一致,则只能创建为跨地域的数据源,此类数据源无法绑定为计算引擎,即无法在DataWorks的数据开发、运维中心页面中执行对应计算任务,仅可进行数据同步任务。已购买所需的DataWorks资源组并完成资源组配置。ClickHouse仅支持使用独...
数据集成是稳定高效、弹性伸缩的数据同步平台,致力于提供复杂网络环境下、丰富的异构数据源之间高速稳定的数据移动及同步能力。使用限制 数据同步:支持且仅支持结构化(例如RDS、DRDS等)、半结构化、无结构化(OSS、TXT等,要求具体同步...
本文介绍如何在 云消息队列 RabbitMQ 版 控制台创建Exchange、查看统计数据、绑定Queue、绑定Exchange、被Exchange绑定以及发送消息。创建Exchange 登录 云消息队列 RabbitMQ 版 控制台,然后在左侧导航栏选择 实例列表。在 实例列表 页面...
若地域不一致,则只能创建为跨地域的数据源,此类数据源无法在DataWorks的数据开发(DataStudio)模块绑定,即无法用于数据开发或周期性调度任务,仅可进行数据同步任务。已购买所需的DataWorks资源组并完成资源组配置。AnalyticDB for ...
若地域不一致,则只能创建为跨地域的数据源,此类数据源无法在DataWorks的数据开发(DataStudio)模块绑定,即无法用于数据开发或周期性调度任务,仅可进行数据同步任务。已购买所需的DataWorks资源组并完成资源组配置。AnalyticDB for ...
说明 建议购买Hologres实例时,地域 与创建Hologres数据源的DataWorks工作空间地域一致,如果地域不一致就只能创建为跨地域的数据源,此类数据源无法绑定为计算引擎,即无法在DataWorks的数据开发、运维中心页面中执行对应计算任务,仅可...
若地域不一致,则只能创建为跨地域的数据源,此类数据源无法在DataWorks的数据开发(DataStudio)模块绑定,即无法用于数据开发或周期性调度任务,仅可进行数据同步任务。已购买所需DataWorks资源组并完成资源组配置。MaxCompute数据源创建...
创建流计算开发作业,将DataHub中的数据实时同步到RDS的目标表中。进入 阿里云流计算开发平台,单击 开发>作业开发>新建作业,创建一个名称为test的开发作业。单击左侧菜单栏的 数据存储,右键单击 DataHub 数据存储,选择 注册数据存储,...
设备点位详情:用来展示绑定设备数据点位(OT数据)的数据详情。在页面配置中勾选“开启设备数据点位信息点击显示”时,可在页面运行时点击查看页面上文字组件绑定的设备数据点位信息:属性名称,属性编码,属性值,设备名称,质量码,最近...
本文介绍数据资源平台的基本概念。任务实例说明 任务(Task):数据处理作业单元,任务定义了...数据API:API的源头为数据表,可以是单表也可以是多表,请求后最终以类SQL的形式到数据库查询并返回符合条件的数据,将数据组装成报文格式返回。
本文以阿里云RDS数据库为例,为您介绍专有网络VPC的数据源如何连通独享数据集成资源组。前提条件 购买RDS MySQL实例。本文以购买MySQL 5.7版本的MySQL实例为例,您可以根据业务需求进行配置。详情请参见 快速创建RDS MySQL实例。在目标实例...
MaxCompute平台提供了丰富的数据上传下载工具,可以广泛应用于各种数据上云的应用场景,本文为您介绍三种经典数据上云场景。Hadoop数据迁移 您可使用MMA、Sqoop和DataWorks进行Hadoop数据迁移。使用DataWorks结合DataX进行Hadoop数据迁移的...
数据项配置 说明 数据源 组件的数据源中通过 代码编辑 或 可视化编辑 展示了组件所包含的数据字段。也可以修改 数据类型,灵活配置组件数据。数据映射 当您需要自定义图表字段配置时,可以在 数据映射 模块设置不同的字段映射内容,将这些...
查询指定的数据集和对象存储(OSS)Bucket绑定关系详情。接口说明 请确保在使用该接口前,已充分了解智能媒体管理产品的收费方式和 价格。请确保已经通过 CreateBinding 接口创建对应的绑定关系。调试 您可以在OpenAPI Explorer中直接运行...
数据源未绑定至数据开发 复制一份生产环境的数据源至开发环境,并将开发环境数据源的 默认访问身份 配置为 执行者。若简单模式工作空间数据源(即生产环境数据源)的 默认访问身份 为 任务责任人,则升级之后,生产环境数据源的 默认访问...
建议您为数据迁移项目创建一个专属的数据库用户,该用户必须具备相关的数据操作权限。详情请参见 创建 TiDB 数据库用户。如果您需要订阅 TiDB 增量日志,请准备 Kafka 数据源和 Kafka Topic。并且,请根据 TiDB 官方文档,提前创建 TiDB ...
图表样式 关系网络是以点线的形式表现事物之间关系的组件,支持自定义点、线和标签的样式,支持多系列的节点配置,能够以点线的形式在数据看板中展示复杂的网络关系。样式面板 搜索配置:单击 样式 面板右上角的搜索配置项图标,可在搜索...
创建数据投递实例 数据投递SDK 通过SDK将各种类型的数据源投递到DTS,再由DTS同步至目标数据库,从而支持更多类型的数据源。使用SDK将源端数据投递到DTS 同构同步 逻辑同构实时同步 支持同构数据库间的数据同步。自建MySQL同步至RDS MySQL ...
删除数据集和对象存储(OSS)Bucket绑定任务。接口说明 请确保在使用该接口前,已充分了解智能媒体管理产品的收费方式和 价格。删除绑定关系会导致 OSS Bucket 新增的变更不会同步到数据集,请谨慎操作。调试 您可以在OpenAPI Explorer中...
数据 显示时间 放置到绑定数据表的DATA数据容器中 日历组件需要配置显示时间数据源。通常将其绑定数据实体的一个字段,字段类型需为 DATETIME。关于 此部分属性的更多信息,请 参见 数据。动态日期格式 日历组件可选配置动态日期格式数据源...
生命周期管理支持多种类型的生命周期管理规则,通过建立不同的规则,您可以方便的管理数据湖内的数据生命周期,以便节约存储成本。本文为您介绍生命周期管理规则的基础操作。功能说明 您可以通过生命周期管理对数据湖中的数据库、数据表...
数据源的端口配置错误或对应的网络端口没有放开,请确保配置正确的数据源端口及确保对应的网络端口已放开。数据源的版本和类型错误,请确保选择正确的数据源版本和类型。数据源的链接地址参数配置错误,请确保数据源链接地址的正确性。...
绑定错误或未绑定数据板块,则规范建模功能不可用。关于项目和数据板块的绑定,请参见 创建项目。规范建模所支持功能由创建项目时所选择的默认功能菜单项确定。关于规范建模和默认功能菜单说明,请参见 创建项目。说明 Basic项目绑定 Basic...
绑定错误或未绑定数据板块,则规范建模功能不可用。关于项目和数据板块的绑定,请参见 创建通用项目。规范建模所支持功能由创建项目时所选择的默认功能菜单项确定。关于规范建模和默认功能菜单说明,请参见 创建通用项目。说明 Basic项目...
使用说明 如果不配合 表单容器 组件使用 平铺明细,绑定变量 的数据源类型需为List类型。如果配合 表单容器 组件使用 平铺明细,对象字段 的数据源类型需为List类型,表单组件绑定变量中的某个Key。主键 为每行数据的唯一标识。使用示例 ...
使用说明 如果不配合 表单容器 组件使用 表格明细,绑定变量 的数据源类型需为List类型。如果配合 表单容器 组件使用 表格明细,对象字段 的数据源类型需为List类型,表单组件绑定变量中的某个Key。主键 为每行数据的唯一标识。使用示例 ...
双开发模式:Dataphin支持 Basic 和 Dev-Prod 的数据开发模式:Basic 项目绑定了 Basic 数据板块,系统支持 规范建模 功能。Basic 项目绑定了 Prod 数据板块,则系统不支持 规范建模 功能,仅支持 数据处理 和 即席查询 功能。Dev 项目支持...
背景信息 通常的数据湖方案是选取大数据存储引擎构建数据湖(例如,阿里云对象存储OSS产品或云下HDFS),然后将产生的各种类型数据存储在该存储引擎中。在使用数据时,通过Spark或Presto对接数据分析引擎并进行数据解析。但该套方案存在...
双开发模式:Dataphin支持 Basic 和 Dev-Prod 的数据开发模式:Basic 项目绑定了 Basic 数据板块,系统支持 规范建模 功能。Basic 项目绑定了 Prod 数据板块,则系统不支持 规范建模 功能,仅支持 数据处理 和 即席查询 功能。Dev 项目支持...
绑定云产品 支持将数据集加速槽绑定到与加速实例配置的数据源类型一致的云产品上。最大容量 配置数据加速槽容量。您可以参考需要加速的具体数据集容量来配置。重要 加速槽容量需要大于等于数据集容量。选定OSS路径 仅 绑定云产品 选择 阿里...
当您需要将业务切换至目标实例时,请务必先结束或释放该任务,避免该任务被自动恢复后,导致源端数据覆盖目标实例的数据。不支持迁移admin和local数据库。阿里云MongoDB实例支持的版本与存储引擎请参见 版本及存储引擎,如需跨版本或跨引擎...
当您需要将业务切换至目标实例时,请务必先结束或释放该任务,避免该任务被自动恢复后,导致源端数据覆盖目标实例的数据。不支持迁移admin和local数据库。阿里云MongoDB实例支持的版本与存储引擎请参见 版本及存储引擎,如需跨版本或跨引擎...
数据库权限级别从高到低依次是:全局级别权限(暂不支持)、数据库级别权限、表级别权限、列级别权限。高级别权限的授予会覆盖低级别权限,移除高级别权限的同时也会移除低级别权限;不支持USAGE授权。给用户授予多个库权限 5.3.6及以上...
2883 UserName string 用于数据迁移或数据同步的数据库用户的名称。user_name Region string 数据源所属的地域。cn-beijing Description string 数据源的备注信息,不能超过 128 个字符。test OracleSid string Oracle 数据库的 SID。null ...