概述
将数据存储在表中的概念现今是如此常见，以致于似乎本来就很明显，但存在许多其他组织数据库的方式。Unix 类操作系统上的文件和目录构成层次数据库的示例。更现代的开发是面向对象的数据库。每个表是指定的行集合。给定表的每行具有相同的...
配置PolarDB输入组件
切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量条数 每个并发SQL语句读取数据的条数，默认的批量条数为1024。输入过滤 填写输入字段的过滤信息，例如 ds=${bizdate}。输入过滤适用于以下两种场景：...
配置Greenplum输入组件
您可以将源数据表中某一列作为切分键，该字段类型必须是整型数字，建议使用主键或有索引的列作为切分键。批量条数 每个并发SQL语句读取数据的条数。输入过滤 填写输入字段的过滤信息，例如 ds=${bizdate}。输入过滤适用于以下两种场景，...
数据质量教程概述
在本教程中，您需要重点关注数据的生产环节（MaxCompute外部表引用的表格存储数据）和加工环节（数据仓库CDM及ADS层）中表行数是否大于0、表行数波动是否正常以及字段是否出现空值或重复的情况。准确性 准确性是指数据记录中信息和数据是否...
数据质量教程概述
在本教程中，您需要重点关注数据的生产环节（MaxCompute外部表引用的表格存储数据）和加工环节（数据仓库CDM及ADS层）中表行数是否大于0、表行数波动是否正常以及字段是否出现空值或重复的情况。准确性 准确性是指数据记录中信息和数据是否...
配置MaxCompute输出
大数据计算服务MaxCompute（原名ODPS）为您提供完善的数据导入方案，能够快速解决海量数据的计算问题。前提条件 配置MaxCompute输出节点前，您需要先配置好相应的输入或转换数据源，详情请参见 实时同步能力说明。背景信息 写入数据不支持...
配置AnalyticDB for MySQL 3.0输入组件
切分建 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量条数 配置数据同步过程中每个并发SQL语句读取数据的条数。输入过滤 填写输入字段的过滤信息，例如 ds=${bizdate}。输入过滤 适用于以下两种场景：...
基本概念
因此，复制表中的数据量不宜过大，最好不超过2万行。由于维度表的变更会广播到集群的所有节点，确保所有节点的数据一致性，影响写入性能，因此不建议频繁增删改维度表的数据。EIU EIU，全称为Elastic IO Unit，中文名称为弹性IO资源，是 ...
基本概念
云数据库SelectDB版 支持的表引擎如下：Aggregate表引擎 Unique表引擎 Duplicate表引擎 索引（Index）索引是对表中一列或多列的值进行排序的一种结构，使用索引 可以快速过滤表中的数据，提高数据的查询效率。目前 云数据库SelectDB版 支持...
Spark SQL创建C-Store表
AnalyticDB MySQL 支持使用Spark SQL创建C-Store表，本文主要介绍使用Spark SQL创建C-Store表的语法、示例以及数据类型的映射关系。背景信息 AnalyticDB MySQL Spark SQL创建C-Store表的语法与开源社区Spark SQL的建表语法存在差异，...
配置MySQL输入组件
切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量条数 每个并发SQL语句读取数据的条数。输入过滤 填写输入字段的过滤信息，例如 ds=${bizdate}。输入过滤 适用于以下两种场景：固定的某一部分数据。...
配置MySQL输入组件
切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量条数 每个并发SQL语句读取数据的条数。输入过滤 填写输入字段的过滤信息，例如 ds=${bizdate}。输入过滤 适用于以下两种场景：固定的某一部分数据。...
名词解释
PRIMARY KEY 〇 〇 Primary Key（主键）用于唯一标识表中每个记录的一列或一组列。主键的值在表中是唯一的，且不允许为空。在宽表中，主键可以由一个或多个列组成。在时序表中，主键必须由一个时间戳列和一个或多个标签列组成。重要 在宽表...
数据清理
背景信息 ODC 支持在源数据库中的数据归档到目标数据库后，删除源数据库中的数据，以提高数据库查询性能，降低在线存储成本。本文档旨在介绍如何通过提交数据清理工单实现归档数据。原理介绍 前提条件 清理的表中必须包含主键。注意事项 ...
修复同步作业预检查失败的问题
约束完整性检查 待同步子表依赖的父表没有被选择为同步对象，从而破坏了外键约束完整性。删除约束完整性检查失败的子表的外键依赖。在同步对象中加入相应父表，详情请参见 新增同步对象。从同步对象中移除相应子表，详情请参见 移除同步...
配置TiDB输入组件
切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量条数 每个并发SQL语句读取数据的条数。输入过滤 填写输入字段的过滤信息，例如ds=${bizdate}。输入过滤 适用于以下两种场景：固定的某一部分数据。...
依赖跟踪
简介 当我们创建一个涉及到很多具有外键约束、视图、触发器、函数等的表的复杂数据库结构时，我们隐式地创建了一张对象之间的依赖关系网。例如，具有一个外键约束的表依赖于它所引用的表。为了保证整个数据库结构的完整性，本数据库确保...
配置TiDB输入组件
切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量条数 每个并发SQL语句读取数据的条数。输入过滤 填写输入字段的过滤信息，例如ds=${bizdate}。输入过滤 适用于以下两种场景：固定的某一部分数据。...
配置DM（达梦）输入组件
切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量条数 每个并发SQL语句读取数据的条数。输入过滤 填写输入字段的过滤信息，例如 ds=${bizdate}。输入过滤 适用于以下两种场景：固定的某一部分数据。...
外部数据
说明 这种用法不要和外键混淆，后者是数据库中的一种约束 外部数据可以在一个外部数据包装器的帮助下被访问。一个外部数据包装器是一个库，它可以与一个外部数据源通讯，并隐藏连接到数据源和从它获取数据的细节。在 contrib 模块中有一些...
多表连接
连接条件 连接条件指定了两张数据表之间使用哪些字段进行连接，当数据表中某条数据（假定为a）的所有连接字段的值与另一张数据表某条数据（假定为b）的所有连接字段的值相同，则这a、b两条数据成功连接。多表连接算子支持指定多张数据表...
配置OpenGauss输入组件
切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量条数 每个并发SQL语句读取数据的条数。输入过滤 填写输入字段的过滤信息，例如ds=${bizdate}。输入过滤 适用于以下两种场景：固定的某一部分数据。...
配置KingbaseES输入组件
切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量条数 每个并发SQL语句读取数据的条数。输入过滤 填写输入字段的过滤信息，例如ds=${bizdate}。输入过滤 适用于以下两种场景：固定的某一部分数据。...
配置Impala输入组件
切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量条数 每个并发SQL语句读取数据的条数。输入过滤 填写输入字段的过滤信息，例如ds=${bizdate}。输入过滤 适用于以下两种场景：固定的某一部分数据。...
配置OpenGauss输入组件
切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量条数 每个并发SQL语句读取数据的条数。输入过滤 填写输入字段的过滤信息，例如ds=${bizdate}。输入过滤 适用于以下两种场景：固定的某一部分数据。...
配置GoldenDB输入组件
切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量条数 每个并发SQL语句读取数据的条数。输入过滤 填写输入字段的过滤信息，例如ds=${bizdate}。输入过滤 适用于以下两种场景：固定的某一部分数据。...
填充数据库
更重要的是，当你在已有外键约束的情况下向表中载入数据时，每个新行需要一个在服务器的待处理触发器事件（因为是一个触发器的触发会检查行的外键约束）列表的条目。载入数百万行会导致触发器事件队列溢出可用内存，造成不能接受的交换或者...
配置GBase 8a输入组件
切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量条数 每个并发SQL语句读取数据的条数。输入过滤 填写输入字段的过滤信息，例如ds=${bizdate}。输入过滤 适用于以下两种场景：固定的某一部分数据。...
配置KingbaseES输入组件
切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量条数 每个并发SQL语句读取数据的条数。输入过滤 填写输入字段的过滤信息，例如ds=${bizdate}。输入过滤 适用于以下两种场景：固定的某一部分数据。...
配置StarRocks输入组件
切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量条数 每个并发SQL语句读取数据的条数。输入过滤 填写输入字段的过滤信息，例如ds=${bizdate}。输入过滤 适用于以下两种场景：固定的某一部分数据。...
配置StarRocks输入组件
切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量条数 每个并发SQL语句读取数据的条数。输入过滤 填写输入字段的过滤信息，例如ds=${bizdate}。输入过滤 适用于以下两种场景：固定的某一部分数据。...
配置Impala输入组件
切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量条数 每个并发SQL语句读取数据的条数。输入过滤 填写输入字段的过滤信息，例如ds=${bizdate}。输入过滤 适用于以下两种场景：固定的某一部分数据。...
配置GBase 8a输入组件
切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量条数 每个并发SQL语句读取数据的条数。输入过滤 填写输入字段的过滤信息，例如ds=${bizdate}。输入过滤 适用于以下两种场景：固定的某一部分数据。...
数据建模
本文将为您介绍如何载入DataWorks中处理好的数据到人工智能平台PAI中，构建窃漏电用户的识别模型。前提条件 开始本文的操作前，请首先完成 加工数据 中的操作。新建实验 新建空白工作流并进入工作流，具体操作，请参见 新建自定义工作流。...
表数据管理
查看数据 进入数据页签后，ODC 以表格的形式展示表中的数据，并导航栏中提供了以下功能键查看和管理表中的数据：功能 说明 编辑 单击编辑图标进入编辑态，以修改表中的数据。提交（Oracle 模式）Oracle 模式下自动提交默认设置为关（OFF）...
表属性管理
分区信息 在属性页签的左导航栏中单击 分区 标签查看当前表中所包含的 分区名称、顺序、分区方法、表达式（Oracle 模式下展示分区键）、区间上限值 或 枚举值 等信息（展示新建表时设置的分区方法，不同分区方法展示的分区信息不同）。...
操作流程
设置运行配置参数 通过对计算节点中的脚本、自定义函数、节点输入、节点输出、参数等配置和管理，实现处理多种类型的数据，以及查看同一租户内不同工作组中的任务依赖信息，并支持根据需要设置告警上报信息。具体操作，请参见 步骤三：设置...
操作流程
设置运行配置参数 通过对计算节点中的脚本、自定义函数、节点输入、节点输出、参数等配置和管理，实现处理多种类型的数据，以及查看同一租户内不同工作组中的任务依赖信息，并支持根据需要设置告警上报信息。具体操作，请参见 步骤三：设置...
数据归档
背景信息 ODC 支持定时将源数据库中的表数据归档至其它目标数据库中，以解决因线上数据增多影响查询性能与业务运作的问题。本文档旨在介绍如何通过提交数据归档工单实现归档数据。原理介绍 前提条件 归档的表中必须包含主键。注意事项 前置...
如何使用T+1全量同步一键建仓
一键创建OSS数据仓库 创建一键建仓任务后，根据业务需要，您也可以在 数据入湖 页面的 任务列表 页签中，在 操作 列单击 执行 随时手动发起数据同步操作，在目标数据仓库OSS中创建与数据源（RDS数据源、ECS自建数据库数据）相同的表结构、...
- 产品推荐
- 这些文档可能帮助您