数据保护机制
注意事项 设置Exception Policy可能存在TOCTOU（Time-of-Check to Time-of-Use）数据泄露问题（即Race Condition问题）：问题描述 假设，用户的数据流出流程如下：（TOC阶段）用户A向项目所有者申请导出表t1的数据。项目所有者对t1的数据...
使用程序进行大数据导入
背景信息 假设当前数据库有一个表需要导入到 PolarDB-X 1.0 数据库中，数据量大致为814万，表结构如下。CREATE TABLE `post`(`postingType` int NOT NULL,`id` bigint(20)unsigned NOT NULL AUTO_INCREMENT,`acceptedAnswer` bigint(20)...
GraphCompute数据导出MaxCompute表
本文介绍如何将图计算GraphCompute的数据快速导出到MaxCompute项目表。当前我们支持按照节点或者边表数据独立导出，暂不支持全图数据导出。操作步骤：步骤一：开启GraphCompute图中需要导出的表：对于需要导出功能的点/边 1、在数据配置...
导出CSV
步骤一：导出数据到OSS 1.添加Lindorm数据源 进入管理中心。单击左侧导航栏的 数据源管理。单击页面右上角的 新增数据源，选择数据源类型为Lindorm。按弹窗提示，填写数据源的配置项。2.添加OSS数据源 进入管理中心。单击左侧导航栏的 数据...
Db2 for LUW同步至云原生数据仓库 AnalyticDB ...
注意事项 说明 在库表结构同步过程中，DTS会将源数据库中的外键同步到目标数据库。在全量同步和增量同步过程中，DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行时源库存在级联更新、删除操作，可能会导致数据不一致。...
数据库对象的逻辑结构
AnalyticDB PostgreSQL 数据库由许多数据库对象组成，包括表（table）、索引（index）、序列（sequence）、视图（view）、以及数据库（database），数据库对象在逻辑上是彼此分离，相互之间可以有包含关系。一个 AnalyticDB PostgreSQL ...
湖仓一体
本章节介绍如何通过 云数据库 SelectDB 版 提供的联邦查询技术，对数据湖、数据库、远端文件等外部数据源进行联邦分析。为您提供简单、快速的数据分析体验。概述 云数据库 SelectDB 版 提供多源数据目录功能（Multi-Catalog或Catalog），...
自建SQL Server同步至云原生数据仓库 AnalyticDB ...
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
分区表自动冷存
postgres 数据库中执行以下 SQL，为 db01 数据库创建一个名为 task1 的任务，该任务为每分钟检查子分区表数据，并自动将超过3个子分区的历史子分区转为冷存，并返回任务 ID：每分钟执行 postgres=>SELECT cron.schedule_in_database('task1...
分区表自动冷存
postgres 数据库中执行以下 SQL，为 db01 数据库创建一个名为 task1 的任务，该任务为每分钟检查子分区表数据，并自动将超过3个子分区的历史子分区转为冷存，并返回任务 ID：每分钟执行 postgres=>SELECT cron.schedule_in_database('task1...
数据导出服务
参数 说明 导出数据字段 Jq Filter 表达式，从导出数据中选择出数据库该列对应的数据 字段名称 数据库该列的名称 字段类型 选择数据库该列的数据类型 字段大小 数据库该列的数据大小 字段描述 可选，数据库该列的描述 向导4.完成创建 单击 ...
同步时源库为Db2 for LUW的注意事项及限制
Db2 for LUW同步至PolarDB-X 2.0 说明 DTS默认同步到目标数据库中时会取消外键约束，因此源数据库的级联、删除等操作不会同步到目标数据库。类型 说明 源库限制 带宽要求：源库所属的服务器需具备足够出口带宽，否则将影响数据同步速率。待...
如何清理孤立文档
数据库列表 var databasesToProcess=["database1","database2","database3"];shardNames.forEach(function(shardName){/遍历指定的数据库列表 databasesToProcess.forEach(function(dbName){ var dbInstance=db.getSiblingDB(dbName);获取...
功能更新动态（2024年）
配置FTP输出组件 配置MySQL输出组件 配置AnalyticDB for MySQL 3.0输出组件 配置TiDB输出组件 配置OSS输出组件 配置Amazon S3输出组件 通过整库迁移配置集成任务 离线研发 支持基于MySQL、Oracle数据源的数据库SQL任务调度和即席查询。...
文档更新动态（2024年）
通过表映射创建离线数据集 通过SQL加工创建离线数据集 通过表单加工创建离线数据集 标签资产市场概述 创建及管理标签离线服务任务 分析平台-基于分析平台创建SQL查询/基于分析平台创建NoteBook Notebook和SQL查询支持访问MySQL、Oracle数据...
表结构发布流程化
结构设计节点 设计结构（Dev）测试（Test）生产发布（Product）对应数据库实例名称 Schema_Design-dev Schema_Design-test Schema_Design-product 环境类型 dev test product 数据库名称 dev_database test_database product_database 步骤...
RDS MySQL同步至AnalyticDB for PostgreSQL ...
除MySQL外，DTS还支持以PostgreSQL、SQL Server和DB2作为数据源，具体支持的数据库请参见 支持的数据库。注意事项 说明 DTS默认同步到目标数据库中时会取消外键约束，因此源库的级联、删除等操作不会同步到目标数据库。类型 说明 源库限制 ...
SQL窗口介绍
（导出）：通过导出功能可导出数据库、数据库的表结构或建表语句，同时可以访问 管理表结构版本 页面。（操作审计）：操作审计保存了所有数据查询和变更记录，可查询执行的操作、操作人和操作时间等信息。更多信息，请参见 操作审计。风险...
Quick BI新交叉表导出后部分数值为空
问题描述 Quick BI新交叉表导出excel，部分单元格显示为"-。解决方案 是后端查询数据超出限制了，非独立部署环境，超过10000个单元格会查不出来。建议使用明细表进行导出。适用于 Quick BI-新交叉表
自建Oracle同步至云原生数据仓库AnalyticDB ...
开启表级别补充日志，则更节约源Oracle数据库的磁盘空间。开启库级别补充日志 打开最小补充日志：alter database add supplemental log data;开启库级主键、唯一键补充日志：alter database add supplemental log data(primary key,unique ...
API概览
Label表 API 标题 API概述 UpdateLabelTable 更新label表 更新label表信息，例如更新表名 ListLabelTables 获取label表列表 获取label表列表。GetLabelTable 获取label表详细信息 获取label表详细信息。DeleteLabelTable 删除label表 删除...
DESCRIBE
如果您想要新建结构相似的表或数据库，可以通过DESCRIBE语法获取原表或原数据库的结构。适用引擎 DESCRIBE语法适用于宽表引擎和时序引擎。语法 describe_statement:={ DESCRIBE|DESC }[{ DATABASE|TABLE }]identifier 差异说明 宽表引擎和...
数据库权限模型
DB：数据库级别。TABLE：表级别。COLUMN：列（字段）级别。如果您希望某个用户只查询某一张表的某一列数据，可以将该列的SELECT权限授予该用户，例如 GRANT select(customer_id)ON customer TO 'test321'。操作和权限关系 操作 需要的权限 ...
发送量统计
您发送短信后，可以在控制台或调用API接口查看...在 短信发送数据详情 区域右上角，根据业务需要单击 导出记录 或 导出，导出发送数据表。常见问题 短信服务显示发送记录和实际发送量不符？相关API QuerySendStatistics-查询短信发送统计信息
MySQL分库分表同步至Hologres（方案1.0）
同时，为了便于在Hologres表里区分某条记录属于源端哪个物理库、物理表，则需要在Hologres表中添加上三个附加字段（src_datasource、src_database、src_table），标识某条记录的来源数据源实例、数据库以及表，这三个附加字段和物理表中的...
MongoDB数据导入
返回结果：+-+-+-+|id|name|age|+-+-+-+|1|james|10|2|bond|20|3|jack|30|4|lock|40|+-+-+-+4 rows in set(0.35 sec)在 AnalyticDB for MySQL 湖仓版（3.0）集群中创建数据库和表，用于存储从MongoDB中导入的数据。创建名为 adb_demo 的...
Spark SQL
登录 DLA控制台，单击左侧导航栏的 SQL执行，您可以看到所有数据湖中的数据库和表结构，对表进行在线分析查询，以及管理子用户对库表的权限，如下图所示。纯SQL作业 DLA Spark支持直接在控制台写Spark SQL。无需用户打包jar包或者写python...
实时数据导出
产品定价 实时数据导出定价详情 计费示例 假设某一天您通过实时数据导出获取监控指标的总数据点为28000万个，则一天的数据导出费用如下：费用=20000万个数据点×0.0056元/万个+（28000-20000）万个数据点×0.0041元/万个=144.8元 重要 计费...
接口说明
在指定的数据库database下进行DDL等操作，比如在指定的database下创建表 Result execute(String database,String sql);其中，Result对象表示SQL的执行结果，比如提交数据库的列表语句（"SHOW DATABASES"）后，可以通过Result获取到已经存在...
管理序列
导出 导出单表数据，具体信息请查看本手册文档 导入和导出。下载 下载序列对象的 SQL 文件。刷新 对当前序列对象进行一些管理操作后，刷新列表以展示最新信息。序列管理页面 您可以在序列管理页面查看以下信息：基本信息：展示 序列名称 和...
DataWorks数据集成
详情请参见 创建RAM用户 AnalyticDB PostgreSQL版 准备：进行数据导入操作前，请通过PostgreSQL客户端创建好 AnalyticDB PostgreSQL版 中需要迁入数据的目标数据库和表。对于数据导出，请登录 AnalyticDB PostgreSQL版 的管理控制台进行IP ...
Quick BI新交叉表导出的地方提示是最大一万条为什么...
问题描述 Quick BI新交叉表导出的地方提示是最大一万条为什么实际导出只有一千条。问题原因 在新交叉表的结果展示设置的是一千条。解决方案 在新交叉表右侧设置的结果展示设置切换为全部或者设置到自己需要的条数。适用于 Quick BI
Quick BI趋势分析表导出后百分比数值精度丢失怎么解决
问题描述 Quick BI趋势分析表导出后百分比数值精度丢失怎么解决。问题原因 目前趋势分析表格导出的格式化精度是由数据集里配置的字段精度控制的，用户的字段数值未设置展示格式，导出时会自动展示默认的格式，因此会出现精度丢失的问题。...
REINDEX
重建一个特定数据库中的所有索引，且不假设系统索引已经可用：$export PGOPTIONS="-P"$psql broken_db.broken_db=>REINDEX DATABASE broken_db;broken_db=>\q 重建表的索引，在重建索引过程中不阻止对相关关系进行读写操作：REINDEX TABLE ...
通过主外键约束消除多余的JOIN
示例 创建名为 db 的数据库，并在该数据库下创建一个名为 item 的表，主键为 i_item_sk，示例如下：CREATE DATABASE db;USE db;CREATE TABLE item(i_item_sk bigint NOT NULL,i_current_price bigint,PRIMARY KEY(i_item_sk))DISTRIBUTE BY...
派生指标
本文为您介绍创建派生指标及与派生指标相关的其他操作：批量创建派生指标 创建单个派生指标 版本管理及关联表 导出派生指标 批量删除及提交 进入派生指标页面 登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据建模，在下拉框中...
存储池
基本设计 存储资源池将存储节点划分为若干资源池，数据库中的对象（数据库、表、分区）通过关联到不同的资源池隔离存储资源：对存储资源提供 全局完整 的划分，并基于已有的划分方式提供 完整 的数据库对象绑定语义。在实例变更过程中遵守...
GetAutoIncrementUsageStatistic-获取表自增ID使用数据
传入此参数时，查询指定数据库中表自增 ID 使用情况，不传入时查询实例上所有数据库的表自增 ID 使用情况。说明 数据格式为 JSONArray，例如['db1','db2']，数据库名间用英文逗号（,）分隔。['db1','db2']RatioFilter double 是 自增 ID ...
JDBC数据源
本文介绍 云数据库 SelectDB 版 与JDBC数据源进行对接使用的流程，帮助您对兼容JDBC协议的数据源进行联邦分析。概述 JDBC Catalog支持通过标准JDBC协议连接其他数据源。连接后，SelectDB会自动同步数据源下的Database和Table的元数据，以便...
资产权限审计
使用限制 超级管理员、系统管理员和安全管理员支持导出数据源或数据表的权限审计详情。资产权限审计入口 在Dataphin首页，单击顶部菜单栏的 管理中心。按照下图操作指引，进入 资产权限审计 页面。数据表权限审计 在 数据表 页签，可查看...
- 产品推荐
- 这些文档可能帮助您