日志节点发布说明
优化数据表数量达到几十万规模时，CDC元数据信息的恢复速度。修复 修复透明消费binlog时可能发生的位点计算错误问题。修复针对 text(0)进行元数据一致校验时的兼容性问题。发布日期：2023-02-06 版本号：polarx-cdc-kernel-2.0.0-3985896 ...
V5.1.x系列实例版本说明
V5.1.28-1349132 日期 2017.08.10 类别 说明 修复问题 修复由于新增关键字DB，导致无法使用DB作为列名或表名，并且影响Navicat 从 PolarDB-X 1.0 导入或导出数据的问题。修复字符串类型拆分键的哈希值出现负最大值时会导致路由结果不正确的...
数据服务概述
说明 如果使用数据服务过程中遇到问题，请单击 群邀请 加入DataWorks交流群|主群进行咨询。相关概念 API（Application Programming Interface，应用程序编程接口）：API是让应用、软件、系统能够面向数据源进行数据交互的接口，数据服务API...
敏感数据溯源
解决方案：使用 数据水印 功能生成的水印信息需要提供充足的数据量，才能保证通过溯源任务还原出可靠的水印信息，进而定位出可能的数据泄露责任人。建议您使用数据量大于500条，并且不包含重复数据的文件进行溯源。原因二：被泄漏的数据非...
管理数据
企业管理员使用数据域可以基于业务属性、组织架构、数据特征等维度对数据资产进行分类管理。通过将拥有共同属性的数据资产集中到同一个数据域中，管理员可以高效管理数据资产及资产中的敏感数据。本文介绍首次使用数据域功能的具体操作。...
调用方式
您可以通过API来使用优化求解器控制台的功能，下面的内容描述如何发起API调用。请求结构 每篇 API 文档均给出了URL请求示例供您参考，我们并没有编码这些 URL 示例，您需要在发起请求前自行编码。如果你使用 SDK 来发起 API 请求，您只需要...
什么是数据库网关
使用指引 如果您是第一次使用数据库网关，您可以参考下述步骤开始使用：准备工作 新建数据库网关 添加数据库 为什么选择数据库网关 数据库网关提供安全可靠、低成本的数据库接入服务，通过数据库网关您可以安全且低成本地将第三方云或本地...
使用数据传输迁移数据
本文以迁移 MySQL 数据库的数据至 OceanBase 数据库为例，介绍如何使用数据传输迁移数据。前提条件 在迁移数据之前，您需要确认以下信息：数据传输已具备云资源访问权限。详情请参见 数据传输迁移角色授权。您已创建源端和目标端的数据源。...
数据接口配置说明
可视化应用中查看并使用数据接口 在区块编辑器中配置完数据接口后，您可以在画布编辑器中使用区块时，查看到区块的所有数据接口信息，具体在可视化应用中配置并查看接口信息的步骤如下。在区块编辑器中，对配置的数据接口内容，进行预览和...
数据分析概述
说明 如在2022年6月1日前未授权 数据分析师 角色权限，则在此之前仅具有 访客 及 自定义角色 的用户将无法继续使用数据分析产品。除 访客 及 自定义角色 外的其他角色，默认拥有数据分析产品操作权限，该类角色仍然可以正常使用数据分析...
数据接口配置说明
可视化应用中查看并使用数据接口 在区块编辑器中配置完数据接口后，您可以在画布编辑器中使用区块时，查看到区块的所有数据接口信息，具体在可视化应用中配置并查看接口信息的步骤如下。在区块编辑器中，对配置的数据接口内容，进行预览和...
数据归档OSS
使用数据归档功能 通过如下步骤，您可以开启数据归档功能，并使用数据归档功能来实现在线数据库与冷存数据库之间的转换。步骤一：开启 数据归档 在实例售卖页或实例详情页开启该功能：实例售卖页 点此打开RDS实例新版创建页面。选择存储...
修改组件数据
如果您需要使用数据源为API，直接在数据配置栏输入API即可。具体配置API数据源时，是否勾选 服务器代理请求 等操作，详情请参见 跨域数据配置。操作步骤 登录 DataV控制台。以模板画布中 轮播列表 组件为例，单击选中该组件后，在画布右侧...
Hive作业调优
作业调优方案 作业调优方向 调优方案 参数调优 内存参数 CPU参数 Task数量优化 并行运行 Fetch task 开启向量化 合并小文件 代码优化 代码优化 代码优化 数据清洗 读取表时分区过滤，避免全表扫描。数据过滤之后再JOIN。重复使用数据时，...
修改名单抽奖数据
如果您需要使用数据源为API，直接在数据配置栏输入API即可。具体配置API数据源时，是否勾选 服务器代理请求 等操作，详情请参见 跨域数据配置。操作步骤 登录 DataV控制台。在 我的可视化 页面内，单击 名单抽奖 可视化应用，进入画布编辑...
概览
为了更好地指导您使用数据管理DMS（Data Management），DMS推出解决方案系列文档，旨在通过最佳实践（Step by Step）的形式向您介绍DMS研发流程、数据安全、数据开发的解决方案。研发流程解决方案 DMS为在线流程化系统，可统一管理企业内...
修改名单抽奖数据
如果您需要使用数据源为API，直接在数据配置栏输入API即可。具体配置API数据源时，是否勾选 服务器代理请求 等操作，详情请参见 跨域数据配置。操作步骤 登录 DataV控制台。在 我的可视化 页面内，单击 名单抽奖 可视化应用，进入画布编辑...
管理敏感数据
如果您需要对RDS实例中的敏感数据进行管控和脱敏，可以使用数据管理DMS提供的敏感数据保护功能。费用 请参见 敏感数据保护功能定价。功能介绍 数据管理DMS的敏感数据管理提供如下功能：提供敏感数据资产大盘，解决企业敏感数据分布的统一纳...
使用流程
若您初次使用数据库备份DBS，请先了解 什么是数据库备份DBS。如需了解DBS是否支持备份恢复您的数据库，以及各类数据库备份恢复的具体粒度等，请参见 支持的数据库引擎与功能 或 各类数据库备份配置指导文档。备份恢复方案 您可以通过如下两...
使用DataWorks
当您需要将MaxCompute中的数据导出至其他数据源执行后续数据处理操作时，您可以使用数据集成功能导出数据。本文为您介绍如何将MaxCompute的数据导出至其他数据源。背景信息 数据集成的导出方式有如下两种：向导模式：创建离线同步节点后，...
Delta Lake概述
在使用数据时，通过Spark或Presto对接数据分析引擎并进行数据解析。但该套方案存在如下问题：数据导入可能会失败，失败后清理脏数据和恢复作业困难。方案中没有ETL（Extract Transform Load）过程，缺少必要的数据质量监管。方案中没有事务...
创建Kafka数据源
重要 Flink_SQL任务中使用数据源编码方式进行开发，目前仅支持MySQL、Hologres、MaxCompute、Hadoop、Oracle、StarRocks数据源。数据源编码配置成功后不支持修改。数据源描述 对数据源的简单描述。不超过128个字符。数据源配置 选择需要...
数据库迁移
费用说明 现阶段您可以免费使用数据库迁移功能。操作步骤 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 解决方案>数据库迁移。说明 若您使用的是极简模式的控制台，请单击控制台左上角的 图标，选择 全部功能>解决方案>数据库迁移。在 新建...
API概览
GetAutoIncrementUsageStatistic 获取表自增ID使用数据 调用GetAutoIncrementUsageStatistic接口，获取表自增ID的使用数据。锁优化 API 标题 API概述 GetDeadLockDetailList 查询RDS SQL Server实例的死锁列表 调用GetDeadLockDetailList...
库表结构优化
冷热数据优化 分析数据表的使用情况，对长期未使用的数据表，建议将其迁移至冷盘存储，以减低数据表存储成本。此类型的优化建议针对数据表级别。迁移数据表到冷盘存储的具体操作，请参见 数据存储冷热分离。说明 数据表迁移至冷盘后，该...
数据使用诊断
DataWorks的数据使用诊断，为您提供了对当前DataWorks工作空间的数据内容及数据隐私的安全保护能力，以及诊断相关安全问题的最佳实践及解决方案，帮助您快速建立数据使用时和使用后的基本安全体系。进入数据使用诊断 登录 DataWorks控制台...
文档更新动态（2022年）
更新说明 周期任务通用说明 手动任务 周期实例通用说明 手动实例 配置离线监控报警规则 2022年02月 更新时间 特性 描述 类别 产品文档 2022年02月09日 优化数据服务概述 优化数据服务概述中使用场景说明的图片。更新说明 数据服务概述 2022...
Tair小版本发布日志
24.4.0.0 MEDIUM 2024-04-16 功能优化 优化基础数据结构的内存占用，在少量复杂结构元素时降低内存占用。优化TairVector全文检索、标量检索组合的检索性能。与TairVector单Index检索一样，多Index检索支持返回非向量字段。缺陷修复 增强...
文档修订记录
独享数据服务资源组 独享数据服务资源组计费说明：包年包月 2023.11.21 新增功能 数据保护伞 使用数据保护伞识别敏感数据时，可基于脱敏场景配置数据脱敏规则。数据保护伞默认提供了 数据开发/数据地图展示脱敏、数据集成静态脱敏 等多种...
费用优化
其他优化建议 使用Logtail：有 Batch 与断点续传功能，在保障实时性的同时以最优算法传输数据。Logtail 消耗资源是开源软件（Logstash，FluentD）的1/4，减少CPU消耗。API写入用户尽量使用64KB~1MB大包写入，减少请求次数。索引关键字段，...
数据标准
数据标准使用 数据标准创建完成后，需要将数据标准导入DataWorks，再使用建模工具DDM客户端同步导入DataWorks中的数据标准，以供后续数据建模使用，具体请参见 入门实践。说明 目前使用DDM进行数据建模可以进行逻辑建模和物理建模，但物理...
数据订阅操作指导
数据订阅使用流程 通常，使用数据传输服务DTS（Data Transmission Service）执行数据订阅的操作，您需要经历如下步骤。操作流程 适用的订阅版本 说明 1.准备工作概览 新版 在使用DTS执行数据订阅前，您需要对源数据库做一些准备工作，以...
表数据格式
数据优化管理操作例如小文件clustering、compaction等都可按照Bucket粒度来并发执行计算，提高执行效率，缩短运行时间。记录类型 目前记录只支持upsert、delete两种数据类型进行写入和存储，upsert包含insert/update两种隐含语义，如记录不...
流利说
本文介绍数据库自治服务DAS助力流利说，实现数据...客户感言 数据库自治服务DAS帮助流利说更专业、更高效地使用数据库服务。DAS的AI数据库优化引擎让DBA的工作压力大幅降低的同时也成倍提高了线上问题的处理效率，真正实现了自治。——流利说
数据量
在数据库备份场景下，有4个概念：数据库磁盘空间、数据文件空间、备份数据量、存储数据量。数据量 说明 数据库磁盘空间 由数据库的数据文件空间、数据库的日志文件空间、操作系统文件空间和空闲空间组成。说明 RDS中为：购买时选择的存储...
新功能发布记录
CacheFS内存优化：减少冷热数据Cache内存使用，增强集群稳定性。无 V3.1.5.8 类别 名称 说明 相关文档 新增 全文检索 全文索引新增支持多种内置分词器，包括Standard分词器、Ngram分词器、Edge_ngram分词器和Pattern分词器。全文索引的分词...
快速体验
数据展示：Quick BI 通过Quick BI搭建面向不同业务需求的可视化大屏，可视化展示数据结果，便于进行业务数据分析。操作演示说明 本文以下的操作演示为操作示例，随产品迭代更新，部分操作示例图可能与您的实际操作环境有细微出入，一般情况...
Delta Engine 概述
Delta Engine 是与 Apache Spark 兼容的高性能查询引擎，提供了一种高效的方式来处理数据湖中的数据，包括存储在开源...通过文件管理优化性能 自动优化 通过缓存优化性能 动态文件修剪 隔离级别 Bloom 筛选器索引 优化联接性能 优化的数据转换
数据同步操作指导
数据同步使用流程 通常，使用数据传输服务DTS（Data Transmission Service）执行数据同步的操作，您需要经历如下步骤。操作流程 说明 1.准备工作概览 在使用DTS执行数据同步前，您需要对源或目标数据库做一些准备工作，以满足DTS对环境的...
成本优化概述
本文介绍了成本优化的流程。MaxCompute的成本优化是一个持续不断的过程。由于大数据的动态性和不断...详情请参见 计算成本优化、存储成本优化、数据上传下载成本优化。及时查看账单，对账单中的异常点进行分析和优化。详情请参见 成本追踪。
- 产品推荐
- 这些文档可能帮助您