使用OpenAPI

调用方式支持情况 调用方式 支持情况 说明 阿里云SDK 支持 数据库自治服务DAS SDK支持语言及依赖安装方法请参见 数据库自治服务DAS SDK。阿里云CLI 不支持 无。资源编排 不支持 无。Terraform 不支持 无。若以上方案均无法满足您的业务需要...

使用OpenAPI

调用方式支持情况 调用方式 支持情况 备注 阿里云SDK(推荐)支持 数据湖构建SDK支持语言及依赖安装方法请参考 数据湖构建SDK。阿里云SDK集成方式说明请参见 阿里云SDK。阿里云CLI 不支持 阿里云CLI调用方式说明请参见 阿里云CLI。资源编排...

应用评估

迁移分组是一个迁移单位的最小子集,即迁移任何一个迁移分组不会影响到其他迁移分组外的数据依赖。说明 应用之间调用关系不在考虑范围。迁移评分:ADAM对迁移与改造难度进行的量化打分,分数越高说明迁移改部分的应用改造成本越低。说明 ...

预检查常见问题

原因 目标库中未安装迁移对象依赖数据库插件。软件版数据库可能由于内核原因出现校验不准确的现象,以现场查询结果为准。解决方案 使用创建迁移计划时填入的目标库高权限账号登录目标数据库。执行安装缺失插件的SQL语句。例如,在 Schema...

离线同步数据质量排查

没有合理的节点依赖 数据同步任务和数据分析任务没有配置合理的节点依赖,但是有数据依赖,比如下游使用max_pt找到MaxCompute的最大分区并读取分区的数据,但是最大分区对应的数据同步任务还未完成。上下游节点要建立节点依赖,避免使用max...

集成概览

调用方式支持情况 调用方式 支持情况 备注 阿里云SDK 支持 数据安全中心支持的语言及依赖安装方法,请参见 数据安全中心SDK。说明 阿里云SDK集成方式说明,请参见 阿里云SDK。阿里云CLI 不支持 阿里云CLI调用方式的说明,请参见 阿里云CLI...

部署代码包

本文以安装第三方依赖emoji为例,介绍如何为您的Python代码安装依赖,打包并部署代码至 函数计算。准备工作 创建一个用于测试的代码目录,如 mycode。Linux或macOS系统 您可以执行 mkdir-p/tmp/mycode 创建。Windows系统 在任意位置新建...

为函数安装第三方依赖

使用Dockerfile文件构建层 如果依赖包含底层动态链接库,或者在本地安装依赖失败,可以使用Dockerfile的方式安装。具体操作,请参见 如何基于Dockerfile构建层。通过函数计算控制台安装依赖 通过打包依赖并上传到控制台 将第三方依赖与代码...

部署代码包

本文以安装第三方依赖emoji为例,介绍如何为您的Python代码安装依赖,打包并部署代码至 函数计算。准备工作 创建一个用于测试的代码目录,如 mycode。Linux或macOS系统 您可以执行 mkdir-p/tmp/mycode 创建。Windows系统 在任意位置新建...

为函数安装第三方依赖

使用Dockerfile文件构建层 如果依赖包含底层动态链接库,或者在本地安装依赖失败,可以使用Dockerfile的方式安装。具体操作,请参见 如何基于Dockerfile构建层。通过函数计算控制台安装依赖 通过打包依赖并上传到控制台 将第三方依赖与代码...

配置同周期调度依赖

节点产出表删除:当自动解析的节点输出,由于节点产出表变更导致节点输出变更时,可能会导致下游变为 孤立节点 不被调度,或由于下游任务缺少数据依赖导致下游被数据污染。节点产出表变更:若当前节点产出的表需转移至其他节点,请参考 ...

关联和管理依赖数据

依赖数据源页面添加依赖数据源后,您可以在服务方法的编排中使用关联的数据源的应用服务方法。本文介绍如何关联和管理关联数据源。关联和管理数据源 关联数据源 在 应用列表 页面,单击目标轻应用名称。在目标轻应用导航栏中,选择 服务...

集成概览

调用方式 调用方式 支持情况 备注 阿里云SDK(推荐)支持 数据库文件存储DBFS支持的语言及依赖安装方法,请参见 数据库文件存储 SDK。阿里云SDK集成方式说明请参见 阿里云 SDK。Terraform 支持 如何使用Terraform自动化创建和管理资源,请...

PyODPS制作第三方包

打包所有依赖 安装完PyODPS后,您可以在本地命令行中使用以下命令为Python 3打包pandas以及pandas的依赖项。使用Docker模式打包:pyodps-pack pandas 使用非Docker模式打包:pyodps-pack-without-docker pandas 打包时指定所需版本:pyodps...

必读:复杂依赖场景调度配置原则与示例

挂载依赖:就近原则 2 DataWorks上任务一旦设置依赖,即表示上下游任务间存在数据依赖。无论下游任务定时运行时间为几点,均需等上游任务执行完成后,下游才满足可执行条件。依赖关系对任务执行的影响 3 您可通过具体场景示例,进一步理解...

数据代理请求常见问题

登录您安装数据代理的机器,通过浏览器访问 ip:8001/status(例如 128.23.*.*:8001/status,8001 为数据代理服务的默认端口),检查您的数据代理服务是否正常启动。是,执行下一步。否,请启动您的数据代理服务。检查安装数据代理的机器...

概述

按备份集恢复:依赖数据备份恢复数据,仅支持将数据恢复至数据备份的时刻。按时间点恢复:依赖数据备份+日志备份恢复数据,支持将数据恢复至备份时间范围内的 任意时间点(精确至秒)。例如,实例有2021年01月01日00:00:01的数据备份集以及...

应用场景

ECS自建数据库审计 通过在ECS中安装数据库审计Agent,获取数据库操作日志,实现对ECS自建数据库的审计。支持目前流行的各类数据库,保证数据审计兼容、有效。说明 关于数据库审计系统(C100)如何部署Agent,请参见 安装Agent。关于数据库...

数据集成概述

说明 以业务数据数据同步到MaxCompute数据仓库为例,当有大量的数据存储在数据库系统里,需要将数据库中的全量及增量数据同步到MaxCompute进行数仓分析时,数据集成传统方式是通过全量同步或者依赖数据库表中的 modify_time 等字段进行...

DMS调度XIHE SQL

依赖数据库内核:内核需要支持并开启事件调度器。受限单个数据库:只能针对单个数据库进行调度,无法与其他数据库或工具进行联动。难追踪:无法查看调度事件的执行状态、执行历史、运行时长等信息。难运维:无法对事件执行暂停、重跑等...

资产质量概述

因业务系统的原始数据的规范性无法得以保障,所以Dataphin需要定义数据分析的质量,以满足资产质量的时效性、准确性、完整性、一致性、有效性,助您真正能够依赖数据进行经营决策。数据质量流程引导 数据质量流程引导帮助您从(可选)配置...

资产质量概述

因业务系统的原始数据的规范性无法得以保障,所以Dataphin需要定义数据分析的质量,以满足资产质量的时效性、准确性、完整性、一致性、有效性,助您真正能够依赖数据进行经营决策。数据质量流程引导 数据质量流程引导帮助您从(可选)配置...

产品优势

特性 Lindorm时序引擎 OpenTSDB 运维管控 服务可用性 99.9%需自行保障,自行搭建集群,自建组件依赖 数据可靠性 99.9999%需自行保障,自行搭建集群,自建组件依赖 软硬件投入 无软硬件投入,按需付费 数据库服务器成本相对较高 维护成本 ...

DLA Lakehouse实时入湖

您需要在DTS中进行以下操作:说明 目前DLA中RDS数据源的入湖分析工作负载,会先利用RDS做数据的全量同步,然后依赖DTS数据订阅功能做增量同步,最终实现完整的RDS数据入湖。创建RDS MySQL数据订阅通道 说明 由于DLA Lakehouse只支持专有...

DLF数据探索快速入门-淘宝用户行为分析

DLF产品(数据湖构建)提供数据发现和数据探索的功能,本文介绍如何通过DLF完成对淘宝用户行为样例的分析。操作流程 服务开通:开通阿里云账号及DLF和OSS相关服务。样例数据集下载和导入:下载样例数据(csv文件),并上传至OSS。DLF数据...

使用OpenAPI

支持情况 阿里云账号 支持 RAM用户(推荐)支持 RAM角色(推荐)支持 调用方式支持情况 调用方式 支持情况 说明 阿里云 SDK(推荐)支持 云原生数据仓库AnalyticDB PostgreSQL版 SDK支持语言及依赖安装方法,请参见 云原生数据仓库...

使用OpenAPI

用户身份 支持情况 阿里云账号 支持 RAM用户(推荐)支持 RAM角色(推荐)支持 调用方式支持情况 调用方式 支持情况 说明 阿里云SDK(推荐)支持 云原生数据仓库AnalyticDB MySQL版 SDK支持语言及依赖安装方法,请参见 云原生数据仓库...

Tablestore

Tablestore表会自动增加一列,默认为NULL 如果报Tablestore的DataSource找不到的错误,说明依赖数据源jar包还没有安装生效 注意明确元数据库的Location,推荐使用oss,`desc database default;`命令查看 3.将数据写入到Tablestore%spark/...

mysqlclient 连接 OceanBase 数据库

本文将介绍如何使用 mysqlclient 和 OceanBase 数据库构建一个应用程序,实现创建表、插入数据和查询数据等基本操作。点击下载 python-mysqlclient 示例工程 前提条件 您已安装 Python 3.x 和 pip。您已安装 OceanBase 数据库并且创建了 ...

确认表血缘

开发环境确认上下游表数据依赖 您可进入上游节点的编辑界面,查看上游节点调度参数配置与节点代码详情。生产环境确认上下游表数据产出 跨空间依赖确认上游表血缘 若您需依赖其他工作空间的节点,可通过数据地图确认表数据每日写入情况。...

连接SQL Server实例

完成初始化配置后,您可以通过多种方式连接到SQL Server实例(例如通过数据管理DMS、SSMS客户端等),实现您的业务目标。...A:您可以为函数安装第三方依赖,使用内置模块获取RDS数据。具体操作,请参见 为函数安装第三方依赖

连接SQL Server实例

完成初始化配置后,您可以通过多种方式连接到SQL Server实例(例如通过数据管理DMS、SSMS客户端等),实现您的业务目标。...A:您可以为函数安装第三方依赖,使用内置模块获取RDS数据。具体操作,请参见 为函数安装第三方依赖

连接MariaDB实例

初始化配置后,您可以让ECS连接MariaDB实例,也可以本地连接到MariaDB实例,实现业务目标。前提条件 已完成如下操作:快速创建RDS MariaDB实例...A:您可以为函数安装第三方依赖,使用内置模块获取RDS数据,详情请参见 为函数安装第三方依赖

连接PostgreSQL实例

购买RDS PostgreSQL实例并完成必要配置(创建账号、设置白名单)后,您就可以通过数据管理DMS、pgAdmin客户端、PostgreSQL命令行工具或应用...A:您可以为函数安装第三方依赖,使用内置模块获取RDS数据,详情请参见 为函数安装第三方依赖

连接MariaDB实例

本文介绍通过DMS、客户端连接RDS MariaDB实例的方法及常见问题。前提条件 已完成如下操作:快速创建RDS MariaDB实例 设置白名单 创建账号 操作...A:您可以为函数安装第三方依赖,使用内置模块获取RDS数据,详情请参见 为函数安装第三方依赖

连接PostgreSQL实例

RDS PostgreSQL实例支持通过多种方式连接(如通过数据管理DMS、pgAdmin客户端、PostgreSQL命令行工具、应用程序等),实现您的业务目标。...A:您可以为函数安装第三方依赖,使用内置模块获取RDS数据,详情请参见 为函数安装第三方依赖

配置VPC数据

获取VPC ID 如果您的数据安装在VPC内的ECS上,则需要配置该ECS的 VPC ID 和 实例ID。图 3.获取ECS的实例ID 图 4.获取ECS的VPC ID 配置完成后,系统会自动进行测试连接,验证数据库是否能连通正常。重要 如果您的RDS for MySQL数据库是从...

CREATE EXTENSION

如这些扩展的文档中所述,应将它们安装到安全模式中,或与它们所依赖的扩展安装在相同的模式中,或拓展和其依赖安装到安全模式。示例 安装 hstore 扩展到当前数据库中,将其对象放置在 addons 模式中:CREATE EXTENSION hstore SCHEMA ...

调度依赖配置指引

方式一:自定义依赖关系 若DataWorks上任务间不存在强血缘依赖(例如,不强依赖上游某个分区数据,仅取上游当前时间点最大分区数据),或依赖数据非周期调度节点产出的表数据(例如,本地上传的表数据),则您可自定义节点的依赖关系。...

连接方式概述

客户端 在连接 OceanBase 数据库的 MySQL 租户时,支持的客户端如下:MySQL 客户端 MySQL 数据库的命令行客户端,需要单独安装。说明 OceanBase 数据库租户包括 MySQL 模式租户和 Oracle 模式租户。MySQL 客户端,只能访问 MySQL 模式租户...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 DBS 云数据库 RDS 数据传输服务 数据管理 云数据库 Redis 版 弹性公网IP
新人特惠 爆款特惠 最新活动 免费试用