创建HBase数据源
说明 通常情况下，生产数据源和开发数据源需配置非同一个数据源，以使开发数据源与生产数据源的环境隔离，降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源，即相同参数值。参数 描述 连接地址 连接地址的格式为 hb-...
创建Hive数据源
说明 通常情况下，生产数据源和开发数据源需配置非同一个数据源，以使开发数据源与生产数据源的环境隔离，降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源，即相同参数值。Hive数据源基本信息配置 参数 描述 数据源...
源库Binlog检查
在启动MySQL之间的增量数据迁移任务时，DTS将在预检查阶段对源数据库进行Binlog检查。本文将介绍源库Binlog检查涉及的检查项及修复方法。源库Binlog是否开启检查 该检查项主要检查源数据库是否开启Binlog功能。如果检查失败，请参考下述...
迁移RDS SQL Server数据到本地SQL Server
RDS SQL Server支持通过物理备份文件将云上的数据迁移到本地数据库。说明 除了本文介绍的迁移方法外，您还可以使用 数据传输服务DTS（Data Transmission Service），将RDS SQL Server数据迁移至自建SQL Server。操作步骤 下载RDS SQL ...
GetDbfs-查询单个数据库文件系统
调用GetDbfs查询数据库文件系统详细信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句...
删除配置文件
使用DROP PROFILE命令可删除配置文件。语法如下：DROP PROFILE[IF EXISTS]profile_name[CASCADE|RESTRICT];包括IF EXISTS子句，以指示服务器在所指定配置文件不存在时不引发错误。如果配置文件不存在，服务器将发出通知。包括可选的CASCADE...
配置脚本模式组件
配置文件 编辑脚本：单击 生成同步配置文件，页面右侧 配置文件 区域，展示输出组件模板。在 配置文件 区域，编写配置文件代码，示例如下。{"table":"tableName","columnMapping":[{"sourceColName":"","dstColName":""}],"parameter":{ } ...
DROP PROFILE
删除用户定义的配置文件。语法 DROP PROFILE[IF EXISTS]profile_name[CASCADE|RESTRICT];说明 包括 IF EXISTS 子句，以指示服务器在所指定配置文件不存在时不引发错误。如果配置文件不存在，服务器将发出通知。包括可选的 CASCADE 子句可将...
配置数据保护规则
配置文件方式 全密态数据库支持通过配置文件的方式管理数据保护规则，具体配置规则请参见 数据保护规则简介。您可以通过两种方式配置数据保护规则：在RDS实例中通过SQL UDF函数配置：为了方便管理员进行规则配置，全密态数据库提供了一组...
配置脚本模式组件
配置文件 编辑脚本：单击 生成同步配置文件，页面右侧 配置文件 区域，展示输出组件模板。在 配置文件 区域，编写配置文件代码，示例如下。{"table":"tableName","columnMapping":[{"sourceColName":"","dstColName":""}],"parameter":{ } ...
配置脚本模式输入组件
配置文件 编辑脚本：单击 生成同步配置文件，页面右侧 配置文件 区域，展示输入组件模板。在 配置文件 区域，{"table":"tableName",/"tables":["tableName"]"column":[{"name":"","type":""}],"parameter":{} } 其中：table和tables：输入...
备份配置文件管理功能
虽然配置文件是全局对象，但用户定义的函数是数据库对象。调用带 –g 或 –r 选项的 pg_dumpall 将创建一个脚本，该脚本重新创建任何现有配置文件的定义，但不会重新创建 PASSWORD_VERIFY_FUNCTION 子句引用的用户定义函数。应使用 pg_dump...
配置脚本模式输入组件
配置文件 编辑脚本：单击 生成同步配置文件，页面右侧 配置文件 区域，展示输入组件模板。在 配置文件 区域，{"table":"tableName",/"tables":["tableName"]"column":[{"name":"","type":""}],"parameter":{} } 其中：table和tables：输入...
通过整库迁移配置集成任务
离线整库迁移可用于将本地数据中心或在ECS上自建的数据库同步数据至大数据计算服务，包括MaxCompute、Hive、TDH Inceptor等数据源。本文为您介绍如何新建并配置整库迁移任务。前提条件 已完成所需迁移的数据源创建。整库迁移支持MySQL、...
功能特性
数据源配置管理 您可以在产品中添加多种不同类型的数据源配置，每个数据来源配置代表一个核对系统在后续核对工作中可以用来读取数据的数据来源配置，当前支持如下类型的数据源配置：OSS：OSS 文件系统的读取配置，需要您输入访问信息，...
DBA_PROFILES
DBA_PROFILES 视图提供有关现有配置文件的信息。该表为每个配置文件/资源组合包含一行。名称 类型 说明 profile CHARACTER VARYING(128)配置文件的名称。resource_name CHARACTER VARYING(32)与配置文件关联的资源的名称。resource_type ...
功能特性
挂载DBFS 卸载DBFS 从ECS云服务器上卸载数据库文件存储 卸载DBFS 扩容DBFS 支持业务友好地在线扩充存储容量 在线扩容 格式化DBFS 格式化数据库文件存储操作会清空已写入的数据，建议操作前创建快照备份数据库文件存储的数据-重命名DBFS ...
更改配置文件
使用ALTERPROFILE命令修改定义的配置文件。PolarDB PostgreSQL版（兼容Oracle）支持两种形式的命令：ALTER PROFILE profile_name RENAME TO new_name;ALTER PROFILE profile_name LIMIT {parameter value}[.];包含 LIMIT 子句和一个或多个...
安装Agent
例如您在09:50下载了授权Token文件，数据库审计系统会在10:00更新授权Token文件，即该文件在10:00会过期。建议您关注授权Token的有效期，执行验证时避开整点时间，避免验证失败。下载完成后，授权Token文件将保存在您浏览器默认的下载路径...
Database外表联邦分析
云原生数据仓库AnalyticDB PostgreSQL（简称ADB PG）支持通过JDBC的方式访问Oracle、PostgreSQL、MySQL外部数据源。说明 本特性只支持存储弹性模式实例，且需要 云原生数据仓库 AnalyticDB PostgreSQL 版 实例和目标访问的外部数据源处于同...
数据配置指令
数据配置节点功能一般需与创建参数文件功能一起使用，详情请参见 文件数据源。使用说明如下：进行文件参数配置时，参数名不可修改。若需修改参数名，需要在 自定义参数 页签进行二次定义。轮询一次 和 基准列 均只能指定一个参数，设置轮询...
数据配置指令
数据配置节点功能一般需与创建参数文件功能一起使用，详情请参见 文件数据源。使用说明如下：进行文件参数配置时，参数名不可修改。若需修改参数名，需要在 自定义参数 页签进行二次定义。轮询一次 和 基准列 均只能指定一个参数，设置轮询...
通过 Go 客户端连接 OceanBase 数据库
为您介绍使用 Go 客户端通过代理模式连接数据库的操作。前提条件 在使用 GO 客户端时，尽量使用最新版本的客户端，最新版本客户端请详见 GitHub go 客户端仓库。引入 obkv-table-client-go 依赖，在本地 GO 仓库上执行以下命令，获取最新 ...
配置GoldenDB输出组件
同步其他数据源的数据至GoldenDB数据源的场景中，完成源数据源的信息配置后，需要配置GoldenDB输出组件写入数据的目标数据源。本文为您介绍如何配置GoldenDB输出组件。前提条件 已创建GoldenDB数据源，如何创建，请参见 创建GoldenDB数据源...
MySQL节点
您可以参考 配置MySQL数据源 进入 数据源管理 页面，单击目标数据源 操作 列的 编辑，在数据源编辑页面查看创建数据源时所使用的模式。当前节点类型不支持MySQL8.0及以上版本。网络联通说明 网络连通说明 MySQL节点需要访问MySQL服务，您...
备份数据库
数据库备份DBS 的 批量备份 功能支持备份单个数据库和多个数据库。本文以批量配置MySQL逻辑备份为例，向您介绍如何备份数据库。说明 关于各类数据库备份方案，请参见 备份方案概览。前提条件 已添加数据源。如何添加数据源，请参见 手动...
ossimport概述
└─workers#Worker列表├─console.sh#命令行工具，目前支持只Linux├─logs#日志目录└─README.md#说明文档，强烈建议使用前仔细阅读 配置文件 单机模式下有两个配置文件 sys.properties、local_job.cfg，分布式模式下有三个配置文件 ...
在文件存储 HDFS 版上使用Apache Spark
本文主要介绍如何在挂载 文件存储 HDFS 版 的Hadoop集群上安装及使用Apache Spark。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK，且JDK...
MySQL连接器
例如，创建的配置文件名称为 sales.properties，Presto会使用该文件配置的连接器创建一个名为 sales 的Catalog。配置示例 在EMR集群中，如果需要配置多个MySQL服务，可以使用 connector[x].properties 添加自定义配置项来配置MySQL服务，...
创建新配置文件
使用CREATE PROFILE命令可创建新配置文件。语法如下：CREATE PROFILE profile_name[LIMIT {parameter value}.];包括 LIMIT 子句以及一个或多个空格分隔的parameter/value 对，以指定 PolarDB PostgreSQL版（兼容Oracle）强制实施的规则。...
在文件存储 HDFS 版上使用Apache Flink
本文介绍如何在挂载 文件存储 HDFS 版 的Hadoop集群上安装及使用Apache Flink。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK，且JDK版本不...
安装目录
本文主要说明阿里云数据库存储服务DBFS创建后的安装目录。DBFS安装目录说明：DBFS服务申请成功后，将会在用户的ECS中创建“/opt/dbfs/”目录，请用户务必不要删除此目录：/opt/dbfs/app/：DBFS服务二进制软件目录。opt/dbfs/data/：DBFS...
配置资源组与网络连通
在数据同步任务配置前，您需要确保用于执行同步任务的独享数据集成资源组与您将要同步的数据来源端与目的端数据库的网络连通性，您可以根据数据库所在网络环境，选择合适的网络解决方案来实现网络连通。本文为您介绍数据库在不同网络环境中...
ALTER PROFILE
更改现有配置文件。语法 ALTER PROFILE profile_name RENAME TO new_name;ALTER PROFILE profile_name LIMIT {parameter value}[.];说明 使用 ALTER PROFILE 命令修改用户定义的配置文件；PolarDB PostgreSQL版（兼容Oracle）支持两种形式...
配置config.xml参数
本文介绍了修改 云数据库ClickHouse 集群config.xml配置文件中全局参数的方法。背景信息 云数据库ClickHouse 集群有若干参数，参数默认值通常配置在config.xml和user.xml，您可以修改参数进行实例优化，其中：user.xml配置文件：您可以通过...
恢复数据库
数据库备份DBS 提供数据恢复能力，通过创建恢复任务将已完成备份的数据恢复到云数据库、本地数据库或DBS沙箱中，可用于误操作后恢复以及分析历史数据等场景。前提条件 DBS备份计划的运行状态为 运行中。已完成数据库备份。相关操作，请参见...
集成概览
本文为您介绍数据库文件存储DBFS支持的集成方案。OpenAPI集成 数据库文件存储DBFS提供实例、快照、标签等功能的OpenAPI，您可在业务系统中进行集成。关于如何使用阿里云OpenAPI，请参见 使用OpenAPI。版本说明 版本说明 说明 2020-04-18 ...
创建Impala数据源
说明 通常情况下，生产数据源和开发数据源需配置非同一个数据源，以使开发数据源与生产数据源的环境隔离，降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源，即相同参数值。参数 描述 JDBC URL 链接地址的格式为 ...
数据上传
DataWorks的数据上传功能支持将本地文件、数据分析的电子表格、OSS文件等数据上传至MaxCompute、EMR Hive、Hologres等引擎进行分析及管理，为您提供便捷的数据传输服务，助力您快速实现数据驱动业务。本文为您介绍如何使用数据上传功能上传...
迁移服务（MMA）
更多操作 更新或删除数据源信息 在 数据源管理 页签，单击目标数据源 操作 列中 编辑 或 删除，进行更新或删除数据源信息。管理迁移计划 在 迁移计划管理 页签，您可以进行以下操作：停止迁移计划：单击目标迁移计划 操作 列中的 停止。...
- 产品推荐
- 这些文档可能帮助您