公共规范
数据拆分 数据的水平和垂直拆分是按照访问热度分布和数据表非空数据值、零数据值在行列二维空间上分布情况进行划分的。在物理上划分核心模型和扩展模型，将其字段进行垂直划分。将访问相关度较高的列在一个表存储，将访问相关度较低的字段...
功能简介
功能特性 支持以用户的视角展示自有权限或申请授权成功的数据表、数据服务API资产。支持特定角色对数据表、数据服务API等数据资产进行管理。工作组管理员对本工作组的数据资产具有管理权限。租户资产管理员对该租户下的所有工作组的数据...
我的资产
我的资产展示用户有管理权限的数据表、数据服务API等数据资产，并提供资产详情查看等功能，帮助用户清晰了解管理数据资产和已授权的数据资产情况。我可使用的 支持展示自有权限或申请授权成功的数据表、数据服务API资产，并提供资产详情...
用户组权限管理
管理数据表权限 在数据表权限详情页面，您可以查看数据表基本信息及对数据表执行申请、续期及交还操作。区域 描述 ① 筛选及搜索区 支持快捷筛选 7天内到期 的数据表。您也可以单击 筛选 按钮，按照 表类型、数据板块、所属项目、表环境 ...
用户组权限管理
管理数据表权限 在数据表权限详情页面，您可以查看数据表基本信息及对数据表执行申请、续期及交还操作。区域 描述 ① 筛选及搜索区 支持快捷筛选 7天内到期 的数据表。您也可以单击 筛选 按钮，按照 表类型、数据板块、所属项目、表环境 ...
添加及管理监控对象
Dataphin数据表：根据表类型、环境、所属项目（表类型为物理表）/所属板块（表类型为逻辑表）筛选数据表。全域数据表：根据数据源类型、数据源筛选数据表。指标：根据数据板块、汇总逻辑表筛选指标。数据源：根据数据源类型筛选数据源。...
添加及管理监控对象
Dataphin数据表：根据表类型、环境、所属项目（表类型为物理表）/所属板块（表类型为逻辑表）筛选数据表。全域数据表：根据数据源类型、数据源筛选数据表。指标：根据数据板块、汇总逻辑表筛选指标。数据源：根据数据源类型筛选数据源。...
授权与回收表权限
表类型为 物理表 时：支持选择 查表数据、改表数据、删除表、改表结构。表类型为 元表、镜像表 时，支持选择 查表数据、改表数据。授权原因 填写授予表权限的原因。不超过128字符。单击 确定，完成表权限的授权。批量回收表权限 按照下图...
授权与回收表权限
表类型为 物理表、物化视图 时：支持选择 查表数据、改表数据、删除表、改表结构。表类型为 元表、镜像表 时，支持选择 查表数据、改表数据。授权原因 填写授予表权限的原因。不超过128字符。单击 确定，完成表权限的授权。批量回收表权限 ...
方案设计
本章节主要为您介绍基于表格存储的海量气象格点数据解决方案的...因此我们采取一种折中的方案，对平面的二维数据再次进行切分，切分成更小的平面数据块，这样就可以做到只读取部分数据块，而不总是读取整个平面，因此极大的提高了查询性能。
管理数据树
您可以查看当前表的数据条数、空间大小、项目引用和数据表。若当前表为空间表，可以查看地图数据。说明 非空间表不支持地图预览。若当前数据为栅格数据，您还可以做以下操作。查看栅格元数据：在数据表 操作 栏单击 图标，查看栅格元数据。...
加速服务
数据服务支持对部分数据源表的查询提供加速能力，加速能力包含DataWorks数据服务提供的加速能力和MaxCompute本身支持的加速方案（MCQA）。通过使用加速服务，您可以在调用API时提高数据查询的速率和性能。本文为您介绍两种加速方案的使用...
资产全景
在 流动 页面，为您可视化展示 数据引入、物理表数 和 逻辑表数，为您提供数据输出后的数据查询及应用功能：将鼠标悬停在 数据引入 模块上，为您展示的 数据源 个数、数据表接入量Top5 和 数据表接入量Least5。数据源：统计昨天有数据同步...
资产全景
在 流动 页面，为您可视化展示 数据引入、物理表数 和 逻辑表数，为您提供数据输出后的数据查询及应用功能：将鼠标悬停在 数据引入 模块上，为您展示的 数据源 个数、数据表接入量Top5 和 数据表接入量Least5。数据源：统计昨天有数据同步...
通过脚本模式配置离线同步任务
如果不填写splitPk，包括不提供splitPk或者splitPk值为空，数据同步视作使用单通道同步该表数据。并非所有插件均支持指定切分键配置任务切分逻辑，以上仅为示例，请以具体插件说明为准。详情请参见 支持的数据源与读写插件。为目标字段赋值...
3D环图
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
通过向导模式配置离线同步任务
如果不填写splitPk，包括不提供splitPk或者splitPk值为空，数据同步视作使用单通道同步该表数据。并非所有插件均支持指定切分键配置任务切分逻辑，以上仅为示例，请以具体插件说明为准。详情请参见 支持的数据源与读写插件。写入端 操作 ...
离线同步并发和限流之间的关系
关系数据库（如MySQL、Polardb、SQLServer、PostgreSQL、Oracle等等）读取，没有配置切分键splitPk（切分列支持整型数字类型，Oracle在整型之外额外支持时间类型）或切分键配置无效，导致任务无法将数据表数据拆分，进而无法并行数据读取。...
表
说明 DataWorks的数据开发模块可以对MaxCompute表进行新建、收藏、修改数据生命周期管理、修改表结构和数据表/资源/函数权限管理审批等操作。MaxCompute的表格有两种类型：内部表和外部表（MaxCompute 2.0版本开始支持外部表）。对于内部表...
pg_dump
说明 此选项备份表数据、大型对象和序列值。b 即-blobs 备份时默认包含大对象。当指定了-schema、-table 或-schema only 时，备份将不包含大对象。重要 blob被视为数据，因此在备份时使用-data only 将包含数据，使用-schema only 则不包含...
产品架构
其整体架构与宽表引擎一致，基于数据自动分区+分区多副本+Lucene的结构设计，具备全文检索、聚合计算、复杂多维查询等能力，支持水平扩展、一写多读、跨机房容灾、TTL等，满足海量数据下的高效检索需求，具体如下：LindormSearch 的数据...
社区兼容版集群垂直变配和水平扩缩容
MergeTree类型引擎表水平扩容后，会将原有历史数据迁移写入新的集群中并自动完成重分布。非MergeTree类型（如外表，Log表等）水平扩容后，仅进行表结构迁移，不进行数据迁移。物化视图仅进行结构迁移，不进行数据迁移。水平扩容后内部节点...
ACL权限体系
AnalyticDB for MySQL 2.0支持基于数据库表的层级权限管理模型，提供类似MySQL的ACL授权模式。一个ACL授权由被授权的用户、授权对象和授予的对象权限组成。和MySQL不同的是，AnalyticDB for MySQL 2.0目前不支持针对用户在Host上授权。以下...
数仓分层
公共指标汇总数据一般根据维表数据和明细事实数据加工生成。CDM层又细分为维度层（DIM）、明细数据层（DWD）和汇总数据层（DWS），采用维度模型方法作为理论基础，可以定义维度模型主键与事实模型中外键关系，减少数据冗余，也提高明细数据...
数据方案概览
环境构建 数据库克隆 支持将源数据库的表结构和表数据复制至目标数据库中，实现全部表或部分表备份，适用多环境数据库初始化。测试数据构建 提供根据字段类型按照多种规则，自动化构建数据的能力。数据追踪/提供数据库Binlog日志的解析处理...
数据库克隆
数据管理DMS的数据库克隆功能支持将源数据库的表结构和表数据复制至目标数据库中，实现全部表或部分表备份，适用多环境数据库初始化，例如将开发环境复制到测试环境。前提条件 源数据库与目标数据库类型相同，且都为MySQL。数据库实例的...
数据脱敏
用户在执行查看表数据、SQL 窗口查询、结果集导出、导出工单、数据库变更工单操作时，包含的敏感列输出为脱敏数据。前提条件 项目管理员或者 DBA 支持管理敏感列和识别规则。所有用户均可查看、测试脱敏效果，不允许新建、编辑或者删除脱敏...
离线同步日志分析
本文为您介绍如何查看离线同步任务执行过程中的日志详情。进入日志详情页 您可以在运维中心或DataStudio界面查看任务运行日志。...如果不填写 splitPk，包括不提供 splitPk 或者 splitPk 值为空，数据同步视作使用单通道同步该表数据。
查看元数据
表 页签：展示当前数据库下的所有表和物化视图，单击对应的表名称，可以逐层查看相关的表信息（包括表的大小、缓存数据大小和类型）、分区信息、节点分片情况和分片信息。此外，还支持按表大小排序的功能，允许您按升序或降序显示这些信息...
HBase数据源
HBase数据源为您提供读取和写入HBase的双向通道，本文为您介绍DataWorks的HBase数据同步的能力支持情况。支持的版本 支持HBase0.94.x、HBase1.1.x、HBase2.x和Phoenix5.x版本。如果您的HBase版本为HBase0.94.x，Reader和Writer端的插件请...
气泡卡片
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
将自建ClickHouse向企业版迁移
云数据库 ClickHouse 企业版 集群会自动处理垂直和水平扩展，您无需担心复制和分片的具体实现方式。在本示例中，自建ClickHouse以下称为源集群，云数据库 ClickHouse 企业版 集群以下称为目标集群。操作概述 从自建ClickHouse向 云数据库 ...
表数据格式
为了支持增全量存储和处理一体化架构，Transaction Table2.0（简称TT2）设计了统一的表数据组织格式，既可支持MaxCompute普通表的所有功能，同时也能很好的支持增量处理链路的新场景，包括time travel查询、upsert操作等。本文为您介绍...
流式气泡层（v2.x版本）
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
地图容器（v3.x版本）
发光效果 设置背景网格材质的发光贴图的颜色、可选四种类型的贴图样式、贴图强度值、在水平和垂直方向平铺的值以及在水平和垂直方向的发光速率值。单击 图标控制发光贴图的显隐。边界：设置 国界、海岸 和 省界 的边界颜色和边界线的粗细值...
查看我可管理的资产
我可管理的资产指的是有管理权限资产，包括在数据建模模块创建逻辑表并物理化成功的表资产，在统一服务模块创建API并上线的API资产，以及申请的其他资产。本文介绍如何查看我可管理的资产。前提条件 已具备租户管理员或工作组管理员角色。...
查看我可管理的资产
我可管理的资产指的是有管理权限资产，包括在数据建模模块创建逻辑表并物理化成功的表资产，在统一服务模块创建API并上线的API资产，以及申请的其他资产。本文介绍如何查看我可管理的资产。前提条件 已具备租户管理员或工作组管理员角色。...
分词
例如“杭州”会切分成“杭”和“州”，通过MatchQuery或MatchPhraseQuery查询“杭”可以查询到含有“杭州”内容的数据。英文字母或数字会按照空格或标点符号切分，然后转换为小写。例如“Hang Zhou”会切分成“hang”和“zhou”，通过...
锦鲤翻牌器列表
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
垂直堆叠柱状图（4.0及以上版本）
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
- 产品推荐
- 这些文档可能帮助您