访问列存数据
完成数据整理后，如果想要进一步提升后续查询的效率，可以执行以下语句设置表的相关参数来加速后续查询：ALTER TABLE mydb.mytable SET TBLPROPERTIES('read.scan-major-rewritten-files-only'=true);参数说明 read.scan-major-rewritten-...
数据膨胀诊断
AnalyticDB PostgreSQL版 提供的智能诊断数据膨胀功能，可以定期自动诊断数据库内的所有表，并生成诊断信息表。您可以通过诊断信息表，查看表的膨胀...同时由于该命令需要重新整理储存的Page，所以它需要额外的储存空间来储存整理完的数据。
文档修订记录
DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发...
表数据管理
ODC 中用颜色标识您对表中数据的操作，新增的数据用绿色标识，删除的数据用红色标识，修改后的数据用橙色标识。编辑态下，导航栏提供了以下操作键功能编辑表中的数据：功能 说明 添加行 单击该功能键将在表中指定位置插入一个空行。双击...
纠删码
开启纠删码功能后，在进行数据整理（Compaction）时，数据将被自动转化为EC格式。CREATE TABLE dt(p1 integer,p2 integer,primary KEY(p1))WITH(EC_POLICY='RS-4-2');说明 建议将 EC_POLICY 设置为 RS-4-2。在存储效率上，RS-4-2算法等价于...
常见问题
支持的数据库部署位置（接入方式）阿里云实例 有公网IP的自建数据库 通过数据库网关DG接入的自建数据库 通过云企业网CEN接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能接入网关接入的自建数据库 阿里云实例 通过数据库网关DG接...
通过HTTP API写入数据
多点写入 通过用换行符来分隔多个数据点，可以将它们同时发送到多个时间序列，这种批量发送的方式可以获得更高的性能。下面的例子展示了将3个数据点写入数据库 mydb。第一个点属于measurement为 cpu_load_short、tag为 host=server0 的时间...
新建数据元
用“教育水平”这个数据元来统一描述人的受教育程度或者文化水平等类似的概念。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。说明 若您已在 资产加工...
新建数据元
用“教育水平”这个数据元来统一描述人的受教育程度或者文化水平等类似的概念。操作步骤 登录企业数据智能平台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。说明 若您已在 资产加工 ...
如何对JSON类型进行高效分析
PolarDB 列存索引（In Memory Column Index，IMCI）功能推出了完备的虚拟列与列式JSON功能等，可以快速处理大数据和多种数据类型（包括结构化数据与半结构化数据等），并提供高效的数据分析、查询与流计算能力，适用于数据分析、数据仓库与...
新功能发布记录
OceanBase 数据库之间的数据迁移 支持 TiDB 数据库至 OceanBase 数据库 MySQL 租户的结构迁移、全量迁移、增量同步、全量校验和反向增量 迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL 租户 支持 PolarDB-X 1.0 数据库至 OceanBase ...
教程概述
本文为您介绍当需要通过DataV展示海量数据的分析结果时，如何使用...在DataV中调用数据服务API。参考文档 一分钟零代码生成API，DataWorks数据服务上手指南。DataWorks数据服务帮助文档。MaxCompute Lightning帮助文档。DataV帮助文档。
表设计规范
SDK SDK执行INSERT INTO语句，数据上传至表或者分区后，使用MERGE语句整理小文件。说明 MaxCompute导入数据的通道只能是Tunnel SDK或执行INSERT INTO语句，请避免流式插入数据。以上各通道本身均由自身逻辑进行流式数据写入、批量数据写入...
功能特性
时序协议支持 搜索引擎 单点查询 用主键或唯一索引来进行查询，可以用来快速查询或更新某个数据项。单点查询 多维检索 面向复杂的多维查询场景，Lindorm内部会自动为Tag建立索引，支持根据Tag来进行多维检索查询。多维检索 自定义词典 搜索...
Oracle数据源
Oracle数据源为您提供读取和写入Oracle双向通道的功能，方便您后续可以通过向导模式和脚本模式配置数据同步任务。本文为您介绍DataWorks的Oracle数据同步能力支持情况。支持的版本 离线读写 版本 离线读（Oracle Reader）离线写（Oracle ...
OPTIMIZE PARTITION
描述 如果从分区或子分区中删除了大量的行，或者对一个带有可变长度的行（即存在VARCHAR、BLOB或TEXT类型的列）进行修改，可以使用 ALTER TABLE…OPTIMIZE PARTITION 来回收任何未使用的空间和整理分区数据文件的碎片。语法 ALTER TABLE....
使用DataV可视化应用展示数据返回结果
在可视化应用中调用数据服务API：在组件的数据配置中，配置API数据源参数。操作步骤 添加DataWorks数据源。使用HTTP协议进入 DataV控制台，选择 我的数据>添加数据。单击 类型 下拉箭头，选择数据类型为 DataWorks数据服务。在 添加数据 ...
XML 类型
使用这种数据类型要求在安装时用 configure-with-libxml 选项编译。xml 类型可以存储格式良好的遵循 XML 标准定义的“文档”，以及“内容”片段，它是通过引用更宽泛的“document node”XQuery 和 XPath 数据模型来定义的。大致上说，这...
区域柱状图
区域柱状图是三维城市构建器的图层，用来表达面状区域上的动态变化指标，如停车场的已用车位数。区域柱状图支持独立的样式和数据配置，包括区域柱状图的默认颜色、默认高度和内外柱半径比等。本文介绍区域柱状图配置项的含义。在场景编辑器...
区域柱状图
区域柱状图是三维城市构建器的图层，用来表达面状区域上的动态变化指标，如停车场的已用车位数。区域柱状图支持独立的样式和数据配置，包括区域柱状图的默认颜色、默认高度和内外柱半径比等。本文介绍区域柱状图配置项的含义。在场景编辑器...
区域柱状图
区域柱状图是三维城市构建器的图层，用来表达面状区域上的动态变化指标，如停车场的已用车位数。区域柱状图支持独立的样式和数据配置，包括区域柱状图的默认颜色、默认高度和内外柱半径比等。本文介绍区域柱状图配置项的含义。在场景编辑器...
识别任务说明
识别任务用来扫描资产中的敏感数据，对数据进行分类分级。数据安全中心提供两种识别任务模式：系统默认任务和自定义识别任务。完成资产授权后，数据安全中心会为每一个数据库或Bucket自动创建敏感数据识别任务，即系统默认任务；您可以根据...
DescribeDataAssets-查询数据资产敏感信息
取值：1：未识别到敏感数据，无风险 2：1 级敏感数据风险 3：2 级敏感数据风险 4：3 级敏感数据风险 5：4 级敏感数据风险 6：5 级敏感数据风险 7：6 级敏感数据风险 8：7 级敏感数据风险 9：8 级敏感数据风险 10：9 级敏感数据风险 11：10 ...
逻辑解码概念
在本数据库中，逻辑解码通过解码预写式日志的内容来实现，预写式日志描述了存储层面上的更改，而逻辑解码则会把更改解码成一种应用相关的形式，例如一个元组流或者 SQL 语句流。复制槽 在逻辑复制的环境下，一个槽表示一个更改流，这些更改...
数据保护规则简介
说明 进行任意查询时，涉及的数据都可以用<数据库，数据表，数据列>来表示。只有当数据库、数据表、数据列都被一条规则中的 meta 数据匹配上时，数据才会按照规则中指定的算法进行处理。在设置数据保护规则时，您需要保证 不同规则作用的...
应用案例
OSS与Lindorm数据源 DLA Ganos可以用来构建ETL工具，实现数据在不同数据库之间的流转。如用户可以将数据上传到OSS，然后进行重投影、拼接、创建金字塔并写入Lindorm（HBase）等。相关代码链接请参见 Code。机器学习 本节我们展示如何基于...
飞线层（v2.x版本）
飞线层是基础平面地图的子组件，支持独立的样式和数据配置，能够以飞线的形式表现地理位置上两个点之间的OD数据，可以用来展示两地之间的关联信息，如物流、交易等。本文为您介绍飞线层各配置项的含义。注意 当前为v2.x版本的飞线层子组件...
数据仓库研发规范概述
数据仓库研发规范旨在为广大数据研发者、管理者提供规范化的研发流程指导方法，目的是简化、规范日常工作流程，提高工作效率，减少无效与冗余工作，赋能企业、政府更强大的数据掌控力来应对海量增长的业务数据，从而释放更多人力与财力专注...
RDS术语
DMS Data Management，数据管理，是一种阿里云提供的图形化的数据管理工具，集数据管理、结构管理、访问安全、BI图表、数据趋势、数据轨迹、性能与优化和服务器管理于一体的数据管理服务。支持MySQL、SQL Server、PostgreSQL、MongoDB、...
RDS术语
A AliPG 阿里云支持一系列兼容PostgreSQL的云数据库服务产品，这些云数据库服务采用统一的数据库内核（简称AliPG），AliPG兼容PostgreSQL开源数据库，于2015年正式商用，支持PostgreSQL主流大版本，已稳定运行多年，支撑了大量阿里巴巴集团...
RDS术语
DMS Data Management，数据管理，是一种阿里云提供的图形化的数据管理工具，集数据管理、结构管理、访问安全、BI图表、数据趋势、数据轨迹、性能与优化和服务器管理于一体的数据管理服务。支持MySQL、SQL Server、PostgreSQL、MongoDB、...
RDS术语
DMS Data Management，数据管理，是一种阿里云提供的图形化的数据管理工具，集数据管理、结构管理、访问安全、BI图表、数据趋势、数据轨迹、性能与优化和服务器管理于一体的数据管理服务。支持MySQL、SQL Server、PostgreSQL、MongoDB、...
RDS术语
DMS Data Management，数据管理，是一种阿里云提供的图形化的数据管理工具，集数据管理、结构管理、访问安全、BI图表、数据趋势、数据轨迹、性能与优化和服务器管理于一体的数据管理服务。支持MySQL、SQL Server、PostgreSQL、MongoDB、...
功能特性
OSS数据源 一键入湖 通过DLA控制台配置数据源（RDS数据源、ECS自建数据库数据）和目标OSS数据仓库，系统按照您设定的数据同步时间自动、无缝的帮您把数据源中的数据同步到目标数据仓库OSS中，同时在数据仓库和DLA中创建与数据源表相同的表...
DescribeInstances-查询数据资产实例列表
接口说明 在调用 DescribeInstances 接口时，您可以设置搜索关键词、数据资产实例的风险等级等参数来获取符合要求的数据资产实例的列表信息。QPS 限制 本接口的单用户 QPS 限制为 10 次/秒。超过限制，API 调用将会被限流，这可能影响您的...
DescribeTables-查询数据资产表的数据
接口说明 在调用 DescribeTables 接口时，您可以设置搜索关键词、数据资产表的风险等级等参数来获取符合要求的数据资产的表信息。QPS 限制 本接口的单用户 QPS 限制为 10 次/秒，超过限制，API 调用会限流，这可能会影响您的业务，请合理...
基本概念
DTS 数据传输服务（Data Transmission Service，简称DTS）支持关系型数据库（RDBMS）、非关系型数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，帮助您构建安全、可扩展、高可用的...
RDS MySQL迁移至Elasticsearch
Elasticsearch与关系型数据库的映射关系如下表所示：Elasticsearch 关系型数据库 索引（index）数据库（Database）文档类型（type）表（Table）文档（document）一行数据（Row）字段（field）一列数据（Column）映射（mapping）数据库的...
RDS SQL Server空间不足问题
数据空间的回收通常有如下几种方式：归档数据 删除数据库中不常用的数据（例如早期的历史数据），或者根据需要迁移到其他数据库实例中，或者以其他形式归档保存，通过直接减少数据量来降低已使用数据空间大小。这种方式是控制数据空间增长...
RDS SQL Server实例间数据迁移
如为增量迁移任务，DTS要求源数据库的数据日志保存24小时以上，如为全量迁移和增量迁移任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量迁移完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志而导致...
- 产品推荐
- 这些文档可能帮助您