插入或覆写动态分区数据（DYNAMIC PARTITION）
使用限制 通过 insert into 和 insert overwrite 操作向动态分区中插入数据的使用限制如下：insert into 最多可以生成10000个动态分区，insert overwrite 最多可以生成60000个动态分区。分布式环境下，在使用动态分区功能的SQL语句中，单个...
MULTI INSERT
使用示例 示例1：将表 sale_detail 的数据插入到表 sale_detail_multi 的2010年及2011年中国的销售记录中。命令示例如下：创建表sale_detail_multi。create table sale_detail_multi like sale_detail;开启全表扫描，仅此Session有效。将表...
多路输出（MULTI INSERT）
使用示例 示例1：将表 sale_detail 的数据插入到表 sale_detail_multi 的2010年及2011年中国的销售记录中。命令示例如下：创建表sale_detail_multi。create table sale_detail_multi like sale_detail;开启全表扫描，仅此Session有效。将表...
概述
原理 在 PolarDB-X 中，如果创建表时通过 AUTO_INCREMENT 指定了自增列，为了保证自增列的全局唯一性，则自动为该表创建并关联一个Sequence对象，在插入数据时使用关联的Sequence对象分配全局唯一值并进行自动填充。根据数据库模式的不同，...
INSERT INTO
注意事项 如果插入数据时不指定列名，则要插入的数据必须和 CREATE TABLE 语句中声明的列的顺序一致。示例 创建CUSTOMER和COURSES表。CREATE TABLE customer(customer_id bigint NOT NULL COMMENT '顾客ID',customer_name varchar NOT NULL...
使用须知
访问宽表数据 lindorm_cdc 读写Lindorm CDC数据使用的数据源。访问Lindorm CDC数据的介绍 访问语法示例：Lindorm宽表引擎（lindorm_table）中有一个Database名称为DB1，DB1中有一个表名为tableX，可以通过以下两种方式查询表的数据。示例一...
批量或异步插入数据
批量插入数据 默认情况下，每个发送到云数据库ClickHouse的插入操作都会导致云数据库ClickHouse立即在存储中创建一个包含插入的数据以及其他需要存储的元数据信息。因此，相比较发送包含较少数据的大量插入操作，发送包含更多数据的较少...
设置资产数据源
说明 如果您使用的是API数据源，还可以根据需要，进行跨域数据配置以及获取用户cookie，详情请参见 跨域数据配置 和 使用cookie实现可视化应用数据隔离。在编辑框中，修改数据源脚本。单击数据源脚本编辑框右下角的 图标，全屏编辑数据源；...
CREATE VIEW
当数据写入视图中 SELECT 子句所指定的源表时，插入的数据会通过 SELECT 子句查询进行转换并将最终结果插入到视图中。说明 SELECT 查询可以包含 DISTINCT、GROUP BY、ORDER BY 和 LIMIT 等，但是相应的转换是在每个插入数据块上独立执行的...
创建并管理数据源
若您想在DataWorks操作您的数据库或数据仓库（例如，MaxCompute项目数据），需先在DataWorks的数据源管理页面，将数据库或数据仓库创建为DataWorks的数据源，并将该数据源绑定至DataWorks相应的功能模块使用。例如，同步MaxCompute数据前，...
适配组件数据
背景信息 本文以使用 静态数据源 为例，因此可以直接在组件的数据源配置区域粘贴准备好的数据。如果您的数据源为 CSV文件、数据库 等其他类型的数据，需要首先 添加数据源。如果您需要使用的数据源为 API，直接在数据源配置栏输入API即可。...
功能简介
资产使用方：主要进行数据查找和使用申请，目标是找到需要使用的数据资产，进行权限获取以完成后续业务使用。资产管理员：对所有可对外服务的高价值数据资产进行管理维护与编目上线，进行资产对外服务的生命周期维护，同时针对申请使用进行...
功能简介
资产使用方：主要进行数据查找和使用申请，目标是找到需要使用的数据资产，进行权限获取以完成后续业务使用。资产管理员：对所有可对外服务的高价值数据资产进行管理维护与编目上线，进行资产对外服务的生命周期维护，同时针对申请使用进行...
运营
资产使用方：主要进行数据查找和使用申请，目标是找到需要使用的数据资产，进行权限获取以完成后续业务使用。资产管理员：对所有可对外服务的高价值数据资产进行管理维护与编目上线，进行资产对外服务的生命周期维护，同时针对申请使用进行...
我的资产
通过我的资产清晰掌握可使用、可管理、已授权的数据表和数据服务API数据资产相关信息。通过不同的权限来源，用户可获取数据表、API等类型数据资产的使用权限。我的资产以用户的视角展示自有权限或申请授权成功的数据表、数据服务API数据...
ALTER TABLE.ENABLE/DISABLE CONSTRAINT
为表 table_name 添加一个约束，约束 constraint_name 为禁用状态，即对当前表中的数据和新插入的数据都不起作用。目前该语法支持如下四种类型的约束：主键约束 唯一性约束 外键约束 CHECK约束 ALTER TABLE table_name ENABLE CONSTRAINT ...
数据使用诊断
DataWorks的数据使用诊断，为您提供了对当前DataWorks工作空间的数据内容及数据隐私的安全保护能力，以及诊断相关安全问题的最佳实践及解决方案，帮助您快速建立数据使用时和使用后的基本安全体系。进入数据使用诊断 登录 DataWorks控制台...
适配组件数据
背景信息 本文以使用 静态数据源 为例，因此可以直接在组件的数据配置区域粘贴准备好的数据。如果您的数据源为 CSV文件、数据库 等其他类型的数据，需要首先 添加数据源。如果您需要使用的数据源为 API，直接在数据配置栏输入API即可。具体...
垃圾回收机制
回收垃圾数据释放的空间并不会返还给操作系统，但是新插入或更新的数据可以使用该空间。在上图中，tuple1 和 tuple2 代表有效数据行，unused 代表无效数据行，通过垃圾回收后，无效数据行占用的空间得到释放，可以被重新利用。PolarDB ...
资产安全概述
通过数据分类分级、敏感数据识别、敏感数据脱敏等措施，帮助客户建立完善的数据安全体系，确保数据使用的安全合规性。前提条件 已购买 资产安全 增值服务，详情请参见 开通Dataphin。应用场景 基于Dataphin实现数据安全保护的一些典型的...
资产安全概述
通过数据分类分级、敏感数据识别、敏感数据脱敏等措施，帮助客户建立完善的数据安全体系，确保数据使用的安全合规性。前提条件 已购买 资产安全 增值服务并且当前租户已开通 资产安全 模块。应用场景 基于Dataphin实现数据安全保护的一些...
数据上传
DataWorks的数据上传功能支持将本地文件、数据分析的电子表格、OSS文件等数据上传至MaxCompute、EMR Hive、Hologres等引擎进行分析及管理，为您提供便捷的数据传输服务，助力您快速实现数据驱动业务。本文为您介绍如何使用数据上传功能上传...
应用场景
数据脱敏 支持通过灵活多样的内置或自定义脱敏算法，支持生产类敏感数据脱敏到开发测试等非生产环境使用的静态脱敏场景，同时也支持原始数据不做调整，返回数据动态脱敏的场景，并确保脱敏后的数据保真可用。数据审计 智能解析数据库及大...
场景管理器
数据响应结果 实时展示了组件所使用的数据。当组件数据源发生变化时，数据响应结果会对应展示最新的数据。如果系统反应延迟，您可以单击右侧的 图标，查看数据响应结果，也可以单击右侧的 图标，获取组件的最新数据。您也可以单击查看示例...
离线同步能力说明
如果数据同步任务中的数据源与使用的DataWorks资源组不在同一个时区，则会导致同步的数据有误。费用说明 数据集成同步任务运行会占用数据集成任务执行资源，DataWorks会根据您使用的资源进行收费，此外，离线同步任务通过调度系统下发至...
飞线层
数据响应结果 实时展示了组件所使用的数据。当组件数据源发生变化时，数据响应结果会对应展示最新的数据。如果系统反应延迟，您可以单击右侧的 图标，查看数据响应结果，也可以单击右侧的 图标，获取组件的最新数据。您也可以单击查看示例...
独享资源组
独享调度资源组使用场景 如果非数据集成任务需要访问VPC环境下的数据库、有白名单访问控制的数据库时，需要使用独享调度资源组，独享调度资源组的使用详情请参见 新增和使用独享调度资源组。独享数据集成资源组使用场景 如果您需要同步VPC...
区域热力层
图表样式 区域热力层是3D地球的子组件，支持独立的样式和数据配置，能够使用GeoJson数据展示区域边界信息并渲染区域样式，适用于在3D地球上展示某个区域的数据信息。样式面板 搜索配置：单击 样式 面板右上角的搜索配置项图标，可在搜索...
日志报表
操作指标 累计插入行数 单值 1小时（相对）插入操作累计插入的数据行数。累计更新行数 单值 1小时（相对）更新操作累计更新的数据行数。累计删除行数 单值 1小时（相对）删除操作累计删除的数据行数。累计查询行数 单值 1小时（相对）查询...
常见问题
开通DAS企业版（原专业版）后可以使用SQL洞察和审计功能。开通不同版本的企业版，SQL洞察和审计功能、数据的...在 服务设置 按钮旁边，查看SQL洞察和审计的数据使用的存储空间。说明 在 搜索 功能中，可以查询和导出SQL洞察和审计的历史数据。
配置SQLServer数据源
您需要测试每个资源组的连通性，以保证同步任务使用的数据集成资源组能够与数据源连通，否则将无法正常执行数据同步任务。如果您需要同时测试多种资源组，请选中相应资源组后，单击 批量测试连通性。详情请参见 配置资源组与网络连通。说明...
数据写入AnalyticDB
本文以在DLA中读取OSS中的数据（dla_table_1、dla_table_2表），并通过INSERT…SELECT将符合条件的数据写入AnalyticDB（shipping、order_table）为例，介绍如何通过DLA向AnalyticDB中写入数据。操作步骤 步骤一：创建OSS Schema CREATE ...
用户价值
业务应用方 应用开发 业务分析 使用数据资产获得业务价值 更便捷的使用数据和算法资源：通过统一服务，应用开发人员可以快速开发数据智能应用，提高智能应用开发效率，发挥数据价值。自主挖掘数据的业务价值：通过画像分析、业务模型编辑器...
ETL工作流快速体验
说明 该教程使用的数据为真实数据，且每小时更新。案例配套文档（与函数计算配合使用）：通过函数计算节点实现GitHub实时数据分析与结果发送。零售电商GMV分析 DataWorks MaxCompute 数据集成 数据开发 基于DataWorks提供的 智能数据建模 ...
CREATE CQ
每当流表中有数据插入，如果符合预设的查询条件，则可以将该数据存储下来，作为实时计算的数据来源。本文介绍如何通过DML语句创建持续查询。语法 CREATE CQ cq_name INSERT INTO[catalog_name.][db_name.]table_name[column_list]select_...
迁移MongoDB实例至其他地域
单节点实例不支持使用DTS执行增量数据迁移，为保障数据一致性，全量数据迁移期间请勿在源实例中写入新的数据。MongoDB实例支持的版本与存储引擎请参见 版本及存储引擎，如需跨版本或跨引擎迁移，请提前确认兼容性。如果您的数据库小版本...
迁移MongoDB实例至其他地域
单节点实例不支持使用DTS执行增量数据迁移，为保障数据一致性，全量数据迁移期间请勿在源实例中写入新的数据。MongoDB实例支持的版本与存储引擎请参见 版本及存储引擎，如需跨版本或跨引擎迁移，请提前确认兼容性。如果您的数据库小版本...
功能特性
SQL变更规则 用数规范 支持配置数据使用规范，通过配置规则来规范数据的使用，例如数据导出规则、查询规则、执行规则等。规范策略 支持自定义配置各类型数据的管控规范策略。创建安全规则 安全规则DSL语法 功能规范 支持对DMS中所有功能...
库表结构优化
冷热数据优化 分析数据表的使用情况，对长期未使用的数据表，建议将其迁移至冷盘存储，以减低数据表存储成本。此类型的优化建议针对数据表级别。迁移数据表到冷盘存储的具体操作，请参见 数据存储冷热分离。说明 数据表迁移至冷盘后，该...
跨阿里云账号迁移MongoDB实例
单节点实例不支持使用DTS执行增量数据迁移，为保障数据一致性，全量数据迁移期间请勿在源实例中写入新的数据。MongoDB实例支持的版本与存储引擎请参见 版本及存储引擎，如需跨版本或跨引擎迁移，请提前确认兼容性。如果您的数据库小版本...
- 产品推荐
- 这些文档可能帮助您