命令行工具、DMS
全密态功能可以避免非授权人员通过云平台软件或工具接触到被保护数据的明文，实现了数据在数据库内可用不可见。文本介绍通过命令行工具、DMS查询全密态数据库的方法，以及查询结果中的被保护数据对非授权人员不可见的详情。前提条件 已开通...
管理从集群
说明 当集群中的节点状态为 创建中 时，整个集群可能仍未创建完成，此时集群不可用。只有当集群状态为 运行中 时，集群才可以正常使用。请确认已选中正确的地域，否则无法看到您创建的集群。当您的数据量较大时，推荐您购买 PolarDB 存储包...
JindoCube使用说明
注意事项 JindoCube并不保证Cache数据和源表数据的一致性，而是需要用户通过手工触发或者设置定期策略触发更新任务同步Cache中的数据，用户需要根据查询对于数据一致性的需求，触发Cache的更新任务。在对查询的执行计划进行优化的时候，...
JindoCube使用说明
注意事项 JindoCube并不保证Cache数据和源表数据的一致性，而是需要用户通过手工触发或者设置定期策略触发更新任务同步Cache中的数据，用户需要根据查询对于数据一致性的需求，触发Cache的更新任务。在对查询的执行计划进行优化的时候，...
JindoCube使用说明
注意事项 JindoCube并不保证Cache数据和源表数据的一致性，而是需要用户通过手工触发或者设置定期策略触发更新任务同步Cache中的数据，用户需要根据查询对于数据一致性的需求，触发Cache的更新任务。在对查询的执行计划进行优化的时候，...
JindoCube使用说明
注意事项 JindoCube并不保证Cache数据和源表数据的一致性，而是需要用户通过手工触发或者设置定期策略触发更新任务同步Cache中的数据，用户需要根据查询对于数据一致性的需求，触发Cache的更新任务。在对查询的执行计划进行优化的时候，...
JindoCube使用说明
注意事项 JindoCube并不保证Cache数据和源表数据的一致性，而是需要用户通过手工触发或者设置定期策略触发更新任务同步Cache中的数据，用户需要根据查询对于数据一致性的需求，触发Cache的更新任务。在对查询的执行计划进行优化的时候，...
JindoCube使用说明
注意事项 JindoCube并不保证Cache数据和源表数据的一致性，而是需要用户通过手工触发或者设置定期策略触发更新任务同步Cache中的数据，用户需要根据查询对于数据一致性的需求，触发Cache的更新任务。在对查询的执行计划进行优化的时候，...
迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle ...
迁移类型 描述 结构迁移 结构迁移任务开始后，数据传输会迁移源库中的数据对象定义（表、索引、约束、注释和视图等）至目标端数据库中，并自动过滤临时表。全量迁移 全量迁移任务开始后，数据传输会迁移源库表的存量数据至目标端数据库对应...
确定需求
需求分析 在未考虑数据分析师和业务运营人员的数据需求的情况下，单纯根据业务调研结果构建的数据仓库可用性差。完成业务调研后，您需要进一步收集数据使用者的需求，进而对需求进行深度的思考和分析。需求分析的途径有两种：根据与分析师...
JindoCube使用说明
注意事项 JindoCube并不保证Cache数据和源表数据的一致性，而是需要用户通过手工触发或者设置定期策略触发更新任务同步Cache中的数据，用户需要根据查询对于数据一致性的需求，触发Cache的更新任务。在对查询的执行计划进行优化的时候，...
服务等级说明
2.3 除外情形 因下述原因导致的服务不可用的时长不计入服务不可用时间：（1）阿里云预先通知客户后进行系统维护所引起的，包括割接、维修、升级和模拟故障演练；（2）任何阿里云所属设备以外的网络、设备故障或配置调整引起的；（3）客户的...
确定需求
需求分析 在未考虑数据分析师和业务运营人员的数据需求的情况下，单纯根据业务调研结果构建的数据仓库可用性差。完成业务调研后，您需要进一步收集数据使用者的需求，进而对需求进行深度的思考和分析。需求分析的途径有两种：根据与分析师...
Cassandra数据建模
数据模型建立建议和原则 在进行操作Cassandra之前需要基于我们对Cassandra的使用进行业务建模，基于我们的应用具有什么特性延伸到如何组织Cassandra的数据（设计primary key）到最终数据在cassandra上的存取。No JOIN：Cassandra不支持JOIN...
Presto概述
Presto当前不支持高可用架构。在EMR集群中，Coordinator仅会部署在master-1-1节点上；Worker部署在全部Core和Task节点上。应用场景 Presto是定位在数据仓库和数据分析业务的分布式SQL引擎，适合以下应用场景：ETL Ad-Hoc查询 海量结构化...
PolarDB HTAP实时数据分析技术解密
最后，列存中的大块存储结构，结合MIN、MAX等粗糙索引信息可以实现大范围的数据过滤。所有这些行为都极大的提升了IO的效率。在存储计算分离架构下，减少网络读取的数据量，可以缩短对查询处理的响应时间。列式存储同样能提高CPU在处理数据...
Quick BI v3.11.0版本说明
分页实现 1W条在前端分页，会导致分页与合并同类单元格等功能不可用。后端分页，单击下一页会重新触发取数查询，合并同类单元格只是一种展示。结果有差异，合并同类格场景下有差异，保证数据展示的正确性。请参见 新交叉表。新增LBS符号...
手动更换可用区
PolarDB 支持手动更换主可用区或备可用区，您可以通过该功能将数据库集群计算节点迁移到其他可用区。使用场景和注意事项 更换主可用区 更换集群主可用区的功能适用于灾难恢复或者让ECS就近访问的场景。主备可用区切换过程中，会出现1~2次约...
pg_database
目录 pg_database 存储有关可用数据库的信息。数据库通过CREATE DATABASE命令创建。和大部分系统目录不同，pg_database 是在集簇的所有数据库之间共享的：在一个集簇中只有一份 pg_database 拷贝，而不是每个数据库一份。列名称 列类型 ...
列存索引技术架构介绍
目前，白名单规则校验的内容包含SQL语句中的数据类型、算子、计算表达式以及其他场景。其他场景如不支持multi statement等。MySQL已经发展了数十年，其支持的各种列类型和SQL语法非常丰富。在IMCI中，初期重点优化在分析型查询语句中最常见...
数据安全治理的必要性
数据安全治理的本质则是要处理好各类人员（身份）对组织资产（IAAS/PAAS/SAAS/各类数据）所施加的行为，若某人员对组织资产采取了不恰当的行为，将导致资产所承载信息的机密性（Confidentiality）、完整性（Integrity）、可用性...
暂停实例
实例暂停后，仅保留存储空间中的数据，内存中的数据会清空。实例暂停后，不能进行其它运维操作。例如变配、迁移可用区、重启等，但是实例的待处理事项不会移除。实例暂停期间 所有 功能均会失效，包括连接实例、备份、变配等，请在暂停前...
多可用区部署和更换主可用区
说明 如果目标可用区是备可用区，则不需要迁移数据。系统只需要切换数据库计算节点，因此可以达到比较快的跨机房切换效果（平均耗时5分钟/节点），该操作常用于容灾演练。如果目标可用区不在备可用区，则需要迁移数据。系统执行迁移时间...
多可用区部署和更换主可用区
说明 如果目标可用区是备可用区，则不需要迁移数据。系统只需要切换数据库计算节点，因此可以达到比较快的跨机房切换效果（平均耗时5分钟/节点），该操作常用于容灾演练。如果目标可用区不在备可用区，则需要迁移数据。系统执行迁移时间...
2023年
通过Paimon外部表，您可以访问存储在OSS上的Paimon表中的数据。本文介绍如何创建Paimon外部表。Paimon外部表 2023-09-14 新增授权实践 新说明 为确保MaxCompute项目数据的安全性，项目所有者或者具备授权权限的用户需要对项目内成员的权限...
新功能发布记录
购买实例 集群实例工作台 标准版（Key-Value）标准版（Key-Value）是 OceanBase 的 No SQL 数据库模型，可以绕过 SQL 引擎直接读取存储引擎中的数据。同时，提供多种更加简单高效的非关系型 API 接口，充分发挥 NoSQL 和 SQL 共处的新架构...
确定需求
需求分析 在未考虑数据分析师、业务运营人员的数据需求的情况下，单纯根据业务调研建设的数据仓库，可能可用性较差。完成业务调研后，您需要进一步收集数据使用者的需求，进而对需求进行深度思考和分析，并改进数据仓库。需求分析的途径有...
公开数据集概述
MaxCompute将GH Archive提供的海量公开事件数据进行离线处理并开发，生成以下表：dwd_github_events_odps（GitHub公开事件数据事实表）dws_overview_by_repo_month（GitHub公开事件月度指标数据聚合表）说明 表中的数据源于 GH Archive。...
实例选型和集群规划
云原生数据仓库PostgreSQL版也支持OSS外表的扩展，可通过gzip实现外部存储上的数据压缩，将不需要参与实时计算的数据存储到数据库外部以进一步节省存储成本。相关文档 AnalyticDB PostgreSQL版7.0版本 Serverless模式 规格及选型
组复制简介
当某个节点故障或抖动时，它既不能发出数据又不能发出Noop，在故障恢复或节点抖动期间，就会导致后续节点的数据无法发出，集群将完全不可用。这是多主模式的一个严重缺陷。说明 图中（m,n）表示第n个组发出的第m条数据。例如，（2,1）表示...
数据膨胀诊断
重要 诊断信息表 diag_bloat_tables 中的数据是按照 ORDER BY bloat_coeff desc,real_size DESC 排序的，即膨胀率越大的表越靠前。如果两个表的膨胀率相同时，数据量大的表更靠前。诊断信息表内部原理是基于PostgreSQL的Statistic ...
TPC-DS数据
简介 TPC Benchmark TM DS（TPC-DS）是全球最知名的数据管理系统评测基准标准化组织TPC（事务性管理委员会）制定的标准规范，并由TPC管理测试结果的发布。MaxCompute通过TPC-DS官方工具生成了10GB、100GB、1TB、10TB四个规格的TPC-DS数据，...
大数据安全治理的难点
通常，大数据系统中的工作流涉及多部门、多责任人且跨系统的数据，如何才能协调好这些业务系统准时、保质保量地产出数据，避免出现因业务系统宕机/脏数据导致数据延时产出、产出脏数据，关乎到企业数据业务的连续性问题甚至高层的信任问题...
Github实时数据同步与分析
本文以使用DataWorks实时同步公共数据至Hologres，并通过Hologres进行实时数据分析为例，为您示例DataWorks的数据同步能力与Hologres的实时分析能力。本教程以申请免费资源为例为您示例详细操作步骤，您也可以使用付费资源，操作类似。教程...
创建数据库
本文将介绍如何在 PolarDB-X 1.0 控制台上根据不同存储类型创建对应的数据库。前提条件 您需要 创建实例 后才能创建数据库。说明 创建实例时所选择的存储类型将决定您在创建数据库时所使用的存储类型，例如您在创建实例时选择的是 RDS ...
DataWorks产品安全能力介绍
为充分契合数据安全治理的核心理念与通用思路，DataWorks针对资产梳理、技术体系/运营体系建设提供了一系列全面的数据安全产品能力，基于“I（Identify）P（Protect）D（Detect）R（Respond）”理论框架，从资产识别、安全防护、行为检测、...
常见问题
由于Hyperledger Fabric本身的数据结构的特点，区块通过HASH构成一个链式结构，在区块和交易上均包含对应参与组织的证书及签名，伪造签名是极为困难的，这导致修改数据的代价非常大，任何数据的修改会导对应的签名失去有效性。同时，...
敏感数据保护
敏感数据的数据集成加解密 如果在数据上云、数据交换等场景，需要对传输中的数据进行加解密保护，则可以使用Dataphin的集成加解密能力，对集成的数据进行加解密保护。加密后的数据只有拥有密钥权限的用户才能够进行查看，从而更好地保护...
产品服务等级协议
1.3服务不可用分钟数：当某一分钟内，客户所有试图与指定区域的数据资源平台实例建立连接的连续尝试均失 败，则视为该分钟内该账号该区域的数据资源平台实例服务不可用。在一个服务周期内同一区域内数据资源平台实例不可用分钟数之和即服务...
敏感数据保护
敏感数据的数据集成加解密 如果在数据上云、数据交换等场景，需要对传输中的数据进行加解密保护，则可以使用Dataphin的集成加解密能力，对集成的数据进行加解密保护。加密后的数据只有拥有密钥权限的用户才能够进行查看，从而更好地保护...
- 产品推荐
- 这些文档可能帮助您