Echarts 堆叠柱状图
不设置时会自动计算最小值保证坐标轴刻度的均匀分布。最大值：坐标轴刻度最大值，默认值为 数据最大值，表示取数据在该轴上的最大值作为最大刻度。不设置时会自动计算最大值保证坐标轴刻度的均匀分布。自动伸缩：勾选后，坐标刻度不会强制...
Echarts 大规模散点图
不设置时会自动计算最小值保证坐标轴刻度的均匀分布。需要注意的是这个分割段数只是个预估值，最后实际显示的段数会在这个基础上根据分割后坐标轴刻度显示的易读程度作调整。在类目轴中无效。最小间隔大小：单击+或-号，或手动输入数值，...
Echarts 柱状图
不设置时会自动计算最小值保证坐标轴刻度的均匀分布。需要注意的是这个分割段数只是个预估值，最后实际显示的段数会在这个基础上根据分割后坐标轴刻度显示的易读程度作调整。在类目轴中无效。最小间隔大小：单击+或-号，或手动输入数值，...
新建表
对于分布规则不明显的数据，并没有明显的范围查找等特征，可以使用HASH分区，将数据分区列的值按照HASH算法打散到不同的分区上，将数据随机分布到各个分区。Key 分区：类似于按 HASH 分区，区别在于 KEY 分区只支持计算一列或多列，且 ...
Echarts 阶梯瀑布图
图表样式 Echarts 阶梯瀑布图是柱状图的一种，支持自定义x轴和y轴、多类目数据差值配置以及瀑布式的数据升降展示，可以在较小的可视化应用空间内，智能地展示数据总计上升或者下降的差异。配置面板 搜索配置：单击 配置 面板右上角的 搜索...
开通敏感数据保护
说明 若您使用的是极简模式的控制台，请单击控制台左上角的 图标，选择 全部功能>安全与规范>敏感数据管理>敏感数据资产。在 实例列表 区域，选择 未开启 页签。搜索目标实例，在目标实例 操作 列，单击 立即开启。说明 未开启敏感数据保护...
Echarts 标注气泡柱状图
不设置时会自动计算最小值保证坐标轴刻度的均匀分布。需要注意的是这个分割段数只是个预估值，最后实际显示的段数会在这个基础上根据分割后坐标轴刻度显示的易读程度作调整。在类目轴中无效。最小间隔大小：单击+或-号，或手动输入数值，...
新建数据探查任务
数据探查可以帮助您快速了解数据概况，提前评估数据可用性和潜在风险，您可对数据表进行全量探查、抽样探查。本文为您介绍如何新建数据探查任务。前提条件 需开通数据质量功能模块才可使用数据探查功能。使用限制 当计算引擎为AnalyticDB ...
新建数据探查任务
数据探查可以帮助您快速了解数据概况，提前评估数据可用性和潜在风险，您可对数据表进行全量探查、抽样探查。本文为您介绍如何新建数据探查任务。前提条件 需开通数据质量功能模块才可使用数据探查功能。使用限制 当计算引擎为AnalyticDB ...
表结构设计
语法 DISTRIBUTED BY HASH(column_name,.)注意事项 尽可能选择值分布均匀的字段作为分布键，例如交易ID、设备ID、用户ID或者自增列作为分布键。说明 尽量不要选择日期、时间和时间戳类型的字段作为分布键，写入时容易发生倾斜影响写入性能...
PolarDB PostgreSQL版：ePQ架构详解
执行流程如下所示：在传统的mpp执行引擎中，数据被打散到不同的节点上，不同节点上的数据可能具有不同的分布属性，例如哈希分布、随机分布、复制分布等。传统的mpp执行引擎会针对不同表的数据分布特点，在执行计划中插入算子来保证上层算子...
流量诊断
同时，流量分布不均匀的问题导致部分节点负载过高并出现热点，进一步造成系统卡顿，影响正常使用。集群管理系统提供流量诊断功能，帮助用户定位热点分片和Key，方便用户掌握热点信息。前提条件 已登录目标集群的集群管理系统，具体操作，请...
快速体验
DataWorks的数据分析功能为企业提供了全面的数据分析和服务共享能力，可便捷地连接多种数据源、支持SQL查询，并提供电子表格等多样化的数据分析工具，以满足企业日常的数据提取和分析需求。本文将通过MaxCompute引擎在SQL查询中对公共数据...
PolarDB PostgreSQL版：ePQ架构详解
执行流程如下所示：在传统的mpp执行引擎中，数据被打散到不同的节点上，不同节点上的数据可能具有不同的分布属性，例如哈希分布、随机分布、复制分布等。传统的mpp执行引擎会针对不同表的数据分布特点，在执行计划中插入算子来保证上层算子...
检查索引使用
如果系统仍然选择使用一个顺序扫描或嵌套循环连接，则索引没有被使用的原因可能更加根本，例如查询条件不匹配索引（哪种查询能够使用哪种索引已经在前面的小节中解释过了）。如果强制索引使用确实使用了索引，则有两种可能性：系统是正确的...
通过脚本模式配置离线同步任务
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。离线同步支持的数据源及其配置详情请参见 支持的数据源与读写插件。说明 数据...
如何分析数据分布不均衡
当数据分布不均匀，大部分数据集中在一两个节点时，将导致节点负载过高、查询缓慢，甚至造成节点故障，这种现象称之为数据倾斜。这类问题无法通过扩容来解决，需要使用本文介绍的方法分析和处理。问题分析 数据倾斜问题，DRDS模式数据库可...
边界生成器功能介绍
升降序属性表内容 单击属性表中的 gid 列标题处，单击即可选择数据的升序排列或者降序排列。快速定位 单击属性表中的 操作 列内的某行数据的 图标处，即可在上方地图面板中快速定位该几何数据类型的位置。查看点位数据热力分布 当筛选查看...
边界生成器功能介绍
升降序属性表内容 单击属性表中的 gid 列标题处，单击即可选择数据的升序排列或者降序排列。快速定位 单击属性表中的 操作 列内的某行数据的 图标处，即可在上方地图面板中快速定位该几何数据类型的位置。查看点位数据热力分布 当筛选查看...
ApsaraDB For OceanBase数据源
ApsaraDB for OceanBase数据源提供读取和写入ApsaraDB for OceanBase数据的双向功能，您可以使用ApsaraDB for OceanBase数据源配置同步任务同步数据。本文为您介绍DataWorks的ApsaraDB For Oceanbase数据同步能力支持情况。支持的版本 离线...
HDFS DiskBalancer介绍
当您的集群因大量的写入和删除，或者由于磁盘更换和扩容等操作，导致数据在节点上的磁盘之间分布不均匀，引起HDFS并发读写性能的下降等问题时，可通过HDFS Diskbalancer将数据均匀地分布在DataNode的所有磁盘上。本文为您介绍HDFS ...
AUTO模式数据库与DRDS模式数据库
AUTO模式的数据库支持自动分区，即创建表时无需指定分区键，数据即可自动在集群内均匀分布；同时也支持使用标准的MySQL分区表语法，对表进行手动分区。可以让您便捷地享受到分布式数据库的透明式分布、弹性伸缩和分区管理等诸多红利。...
K近邻
模型地址 字符 算法参数 参数名 参数描述 是否必填 参数默认值 参数范围 建模类型 选择使用分类模型还是回归模型进行建模。是 分类 分类 回归 选取最近邻样本数 否 5[1,100]权重 均匀：每个邻域中的所有点均被加权。距离：权重和距离成反比...
功能更新动态（2024年）
创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 新建Doris数据源 创建GreenPlum数据源 新建Amazon S3数据源 离线集成 新增集成任务...
使用说明
说明 如果在执行某条SQL语句时不指定RW节点，那么数据库代理会随机选择一个RW节点执行该SQL语句。执行以下命令可以解锁指定执行SQL语句的RW节点：RESET SESSION POLARDB_WRITE_NODE;查询节点信息 执行以下命令可以查询某个RW节点上的数据库...
表设计规范
选择值分布均匀的列，而不要选择数据倾斜的列作为分区列。常用SQL语句中如果包含某列的等值或IN的查询条件，则选择该列作为分区列。select…from table where id=123 and….;分区个数定义依据 时间分区 建议按天或月进行分区。如果按小时...
模型配置
算法模型使用的行为数据集的数据要求与一般数据集有所不同，请参见 行为数据集样例 准备数据。数据存储于ADB3.0类型的数据源中，且数据源已接入Quick Audience，请参见 新建数据源 或 数据源表授权。将准备好的数据创建为数据集，请参见 ...
文档修订记录
DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发...
topRegion分析
同时，流量分布不均匀的问题导致部分节点负载过高并出现热点，进一步造成系统卡顿，影响正常使用。集群管理系统提供流量诊断功能，帮助您掌握热点信息，定位热点分片。TopRegion实时分析 您可以通过TopRegion实时分析，查询实时热点分片。...
Oracle数据源
Oracle数据源为您提供读取和写入Oracle双向通道的功能，方便您后续可以通过向导模式和脚本模式配置数据同步任务。本文为您介绍DataWorks的Oracle数据同步能力支持情况。支持的版本 离线读写 版本 离线读（Oracle Reader）离线写（Oracle ...
文档更新动态（2024年）
更新说明 创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 新建Doris数据源 创建GreenPlum数据源 数据引入-离线集成-离线单条管道-...
MaxCompute表数据
查看表的使用记录 数据预览 可以预览当前表中的随机20条数据。重要 您需要拥有权限，才可以预览生产环境的表。如果没有权限，请参见 申请表权限 进行申请。如果表所在工作空间在 项目管理配置 开启了表预览权限，即使没有在安全中心申请表...
创建Hologres内部表
Hologres可通过DDL方式创建Hologres内部表，也可使用DataWorks提供的可视化方式创建。本文为您介绍如何使用DataWorks可视化方式创建Hologres内部表。前提条件 工作空间已绑定Hologres引擎。详情请参见 绑定Hologres计算引擎。创建表的用户...
设置数据分片以充分利用Shard性能
片键的值存在单调递增或递减、片键的值基数大且重复的频率低、需要写入的数据随机分发、数据读取随机性较大等业务场景。除了上述两种分片策略，您还可以配置复合片键，例如由一个低基数的键和一个单调递增的键组成，详情请参见 如何选择...
2023年
使用do-while节点实现复杂的数据分析 2023-09-20 新增通过跨项目数据访问实现不同地域MaxCompute项目数据迁移 新说明 本文为您介绍如何通过跨项目数据访问实现不同Region的MaxCompute项目数据迁移，包括两种使用场景：同云账号内不同Region...
数据库高级特性管理
您可以在RDS管理控制台查看或修改数据库中的各类属性，也可以手动收缩数据库事务日志和更新数据库统计信息，以优化数据库性能和提高查询效率。前提条件 已创建数据库。创建方法，请参见 创建数据库。实例所在地域必须在：华东1（杭州）、...
实时消费Kafka数据
当您需要将Kafka数据写入 云原生数据仓库AnalyticDB PostgreSQL版，且不希望使用其他数据集成工具时，可以通过实时数据消费功能直接消费Kafka数据，减少实时处理组件依赖，提升写入吞吐。Apache Kafka是一个容错、低延迟、分布式的发布-...
MongoDB 6.0新特性概览
MongoDB 6.0新推出可查询加密功能，允许用户从客户端加密敏感数据，将其作为完全随机的加密数据存储在数据库服务器端，并对加密数据进行丰富的查询。可查询加密只允许在客户端查看敏感数据的明文，在查询到达服务器端时会同时包含从KMS获取...
配置数据识别规则
说明 对CDH引擎中数据进行识别和脱敏时，您需要通过DataWorks的数据抽样采集器功能，从CDH Hive表中随机抽取表的部分数据用于数据保护伞的敏感数据识别，抽样采集的数据不会存储至DataWorks中，没有数据泄漏风险。详情请参见：CDH Hive数据...
如何选择文件引擎规格
Lindorm文件引擎（LindormDFS）是面向海量非结构化数据的分布式文件存储服务，与多模引擎共享存储底座，提供数据库级的安全可靠性。LindormDFS与开源HDFS保持100%通信协议兼容，使用开源客户端可直接访问，无缝接入所有开源大数据生态与云...
- 产品推荐
- 这些文档可能帮助您