文档修订记录
Check节点 2024.1.12 新增功能 最佳实践 新增DataWorks大数据安全治理实践新增指南，为您介绍数据安全治理的常见思路、DataWorks产品的安全能力，以及在DataWorks上基于“基础防护建设”、“数据安全防护措施”、“数据安全持续运营”三个...
加载样本数据集
为方便您快速体验或测试 AnalyticDB PostgreSQL版 实例，您可以将样本数据集加载至数据库中。如果您在创建实例时选择了 加载 样本数据，则可跳过此步骤。前提条件 已根据快速入门，完成了 创建实例。已根据快速入门，完成了 登录数据库。...
管理样本数据集
AnalyticDB PostgreSQL版 提供了样本数据集，方便您快速体验或测试 AnalyticDB PostgreSQL版 实例。样本数据集的相关查询语句，请参见 示例查询。注意事项 存储弹性模式实例内核小版本需为V6.3.10.3及以上，Serverless模式实例内核小版本需...
管理内置数据集
AnalyticDB for MySQL 湖仓版（3.0）支持加载内置数据集，方便您快速体验或测试 AnalyticDB for MySQL 集群。您可以在创建集群时自动加载内置数据集，或通过控制台手动加载内置数据集。本文介绍如何加载和删除内置数据集。注意事项 仅 湖仓...
TPC-H
本次测试的挑战主要有：30 TB大数据集：本次选用30 TB数据集，最大表1800亿行，对数据的导入、存储、计算性能都是巨大的挑战。复杂关联分析：多表Join、相关查询、数据多维过滤和高精度数值计算等，不仅对优化器是挑战（如何解相关、选择最...
查询报错问题
提示 scanRows exceed limit 分析型数据库MySQL版查询时报错，错误信息为：ErrMsg:ErrCode:2001 ErrType:QUERY_EXCEED_LIMIT ErrMsg:scanRows exceed limit:xxx>为避免用户输入的SQL误写或性能较差，从而导致扫描表的大量数据集，分析型...
区域图（v4.0及以上版本）
数据点标记：区域图内数据点的标记样式，可单击 图标控制数据点标记样式的显隐。参数 说明 数据点形状 数据点形状，可选 圆点、方形、三角形 和 菱形。数据点大小 数据点的大小值，单位为px。值标签：每个折线数据点值标签的样式，可单击 ...
基本折线图（v4.0及以上版本）
数据点标记：基本折线图内数据点的标记样式，可单击 图标控制数据点标记样式的显隐。参数 说明 数据点形状 数据点形状，可选 圆点、方形、三角形、菱形、六角形 和 蝶形。数据点大小 数据点的大小值，单位为px。值标签：折线数据点值标签的...
雷达图
数据点：雷达图的图表内数据点样式，可单击 图标控制数据点的显隐。参数 说明 形状 数据点的形状，可选 实心圆 和 正方形。大小 数据点的大小值。描边 数据点的描边样式，包括调整数据点的颜色和描边的宽度大小。图例：雷达图的图例样式，...
雷达图
数据点：雷达图的图表内数据点样式，可单击 图标控制数据点的显隐。参数 说明 形状 数据点的形状，可选 实心圆 和 正方形。大小 数据点的大小值。描边 数据点的描边样式，包括调整数据点的颜色和描边的宽度大小。图例：雷达图的图例样式，...
基础折线图
数据点：基础折线图的图表内数据点样式，可单击 图标控制数据点的显隐。参数 说明 形状 数据点的形状，可选 实心圆 和 正方形。大小 数据点的大小值。描边 数据点的描边样式，包括调整数据点的颜色和描边的宽度大小。图例：基础折线图的...
基础折线图
数据点：基础折线图的图表内数据点样式，可单击 图标控制数据点的显隐。参数 说明 形状 数据点的形状，可选 实心圆 和 正方形。大小 数据点的大小值。描边 数据点的描边样式，包括调整数据点的颜色和描边的宽度大小。图例：基础折线图的...
基础区域图
数据点：基础区域图的图表内数据点样式，可单击 图标控制数据点的显隐。参数 说明 形状 数据点的形状，可选 实心圆 和 正方形。大小 数据点的大小值。描边 数据点的描边样式，包括调整数据点描边的颜色和宽度大小。图例：基础区域图的图例...
堆叠区域图
数据点：堆叠区域图的图表内数据点样式，可单击 图标控制数据点的显隐。参数 说明 形状 数据点的形状，可选 实心圆 和 正方形。大小 数据点的大小值。描边 数据点的描边样式，包括调整数据点描边的颜色和宽度大小。图例：堆叠区域图的图例...
基础区域图
数据点：基础区域图的图表内数据点样式，可单击 图标控制数据点的显隐。参数 说明 形状 数据点的形状，可选 实心圆 和 正方形。大小 数据点的大小值。描边 数据点的描边样式，包括调整数据点描边的颜色和宽度大小。图例：基础区域图的图例...
堆叠区域图
数据点：堆叠区域图的图表内数据点样式，可单击 图标控制数据点的显隐。参数 说明 形状 数据点的形状，可选 实心圆 和 正方形。大小 数据点的大小值。描边 数据点的描边样式，包括调整数据点描边的颜色和宽度大小。图例：堆叠区域图的图例...
创建湖仓版集群
加载内置数据集 集群创建成功后是否自动加载内置数据集。选择 是，将在集群创建成功后自动加载内置数据集。选择 否，不会自动加载内置数据集。后续如有需求可手动加载内置数据集。详情请参见 手动加载内置数据集。说明 仅当 默认分配行为 ...
SSB性能测试说明
sh ssb_dataload.sh 该命令将自动完成SSB数据加载过程，包括数据库、表和数据集的生成以及加载。步骤三：执行查询并 查看测试 结果 通过执行以下命令，您可以方便地查看SSB测试的概览结果，并在当前目录下生成result.csv文件，您可以了解...
E-MapReduce本地盘实例大规模数据集测试
本文介绍如何使用阿里云E-...详情请参见 E-MapReduce本地盘实例大规模数据集测试最佳实践。说明 本文的TPC-DS的实现基于TPC-DS的基准测试，并不能与已发布的TPC-DS基准测试结果相比较，本文中的测试并不符合TPC-DS的基准测试的所有要求。
功能发布记录（2023年）
2023.4.18 所有地域 所有DataWorks用户 SQL查询 大数据公共数据集上线 基于大数据AI公共数据集（淘宝、飞猪、阿里音乐、Github、TPC等），通过DataWorks与MaxCompute快速完成TB级别大数据分析。2023.4.11 所有地域 所有DataWorks用户 SQL...
Paimon概述
支持在流模式与批模式下读写大规模数据集。支持分钟级到秒级数据新鲜度的批查询和OLAP查询。支持消费与产生增量数据，可作为传统数仓与流式数仓的各级存储。支持预聚合数据，降低存储成本与下游计算压力。支持历史版本回溯。支持高效的数据...
在EMR集群运行TPC-DS Benchmark
A：Spark ThriftServer服务的默认内存不适合较大规模数据集测试，如果在测试过程中出现Spark SQL作业提交失败，原因可能是Spark ThriftServer出现OutOfMemory异常。针对这种情况的解决方法为调整Spark服务配置 spark_thrift_daemon_memory ...
数据服务集群
特别适用于需要实时读写随机访问超大规模数据集的场景。Apache HBase和Apache Hadoop生态系统无缝集成，并且可以和Apache Phoenix搭配使用以对HBase表进行类似于SQL的查询。Apache HBase基于HDFS作为底层存储系统，在云上的场景可以使用...
采集数据
本教程以MySQL中的用户基本信息（ods_user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构...
采集数据
本教程以MySQL中的用户基本信息（ods_user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构...
基于DLF、RDS或Flink、OSS支持Delta Lake或Hudi存储...
支持字符集 数据库的字符集。Collate 字符串排序规则。Ctype 字符分类。授权账号 设置数据库的所有者，对数据库拥有ALL权限。备注说明 填写备注信息。为RDS数据库创建表并插入少量测试数据，具体操作请参见 通过DMS登录RDS MySQL。如表名为...
结果集缓存
大部分时间数据保持不变,无更新或写入。查询存在一定重复率，即在一段时间内请求端发起多次相同查询。注意事项 由于当前多主架构设计的限制，底层库表数据发生更新后，数据更新需要经过存储层同步到接入层，并在接入层内部节点间同步。因此...
概述
您可以将数据库中的表或单条SQL查询结果作为数据集，在仪表盘或大屏中对数据集中的数据以表格、交叉表、折线图、柱条形图、饼图、双轴图等图形或组件展现出来，并对这些图形或组件进行自由组合、布局，以某种分析思路对业务进行直观呈现。...
点热力层（v3.x版本）
图表样式 点热力层是3D平面地图（v3.x版本）的子组件，支持独立的样式、数据和交互配置，包括热力颜色、热力半径和热力模糊度等。样式面板 搜索配置：单击 样式 面板右上角的搜索配置项图标，可在搜索配置面板中输入您需要搜索的配置项名称...
功能特性
按备份集恢复RDS数据 按备份集恢复PolarDB数据 按备份集恢复MongoDB数据 按备份集恢复Redis数据 按备份集恢复Tair数据 恢复任意时间点数据 通过全量备份集和日志备份集实现任意时间点数据的恢复。按时间点恢复RDS数据 按时间点恢复PolarDB...
时序异常检测
anomalyScore DOUBLE[0,Double.MAX_VALUE]取值越大，当前数据点的异常越明显。threshold DOUBLE[0,Double.MAX_VALUE]判断阈值，用于判断当前数据点是否异常。当anomalyScore取值大于threshold的取值时，当前数据点异常；anomalyScore取值...
数据集管理
本文介绍数据集的一般操作，包括新建、搜索、重命名、编辑和删除等操作。新建数据集 具体操作请参见 添加适配数据集。搜索数据集 登录 DataV控制台。在 功能导航 模块单击 数据集，进入数据集管理页面。在数据集卡片页右上角可以做以下操作...
DataWorks快速入门指引
教程指南 教程列表 示例场景 操作难度 预计时长 大数据AI公共数据集分析 DataWorks、MaxCompute 使用DataWorks快速分析公共数据集的数据。15分钟 Github实时数据同步与分析 DataWorks、Hologres、DataV 基于GitHub Archive公开数据集实时...
API概览
UnbindEndpoint 取消关联数据集加速端点 取消挂载点关联和指定数据集加速槽的关联关系。ListEndpoints 获取数据集加速端点列表 获取数据集加速槽挂载点的信息列表。DescribeEndpoint 获取数据集加速端点详情 获取指定数据集加速槽挂载点的...
备份简介
您可以恢复备份集所在时间点的数据。日志备份：也叫 增量备份。开启日志备份后，本地日志会上传，形成日志备份。基于“数据备份+日志备份”，您可以恢复时间范围内 任意时间点的数据。例如，实例有2021年01月01日00:00:01的数据备份集以及...
备份简介
例如，实例有某时刻的数据备份集以及之后的所有日志备份，则可以恢复该时刻以来任意时间点（精确至秒）的数据。备份的存放位置 数据备份和日志备份存放于阿里云提供的备份空间，不占用实例的存储空间。存放备份的地域是RDS实例所在的地域；...
添加适配数据源
在使用数据集前需要先添加支持的数据源内容，本文介绍添加适配数据源的方法。如果通过上传本地数据源文件方式创建数据集请跳过本章节。背景信息 说明 当前数据集功能支持以下数据源类型：RDS for PostgreSQL、RDS for MySQL、兼容MySQL数据...
删除数据集
本文为您介绍如何在DataV中数据集管理面板内删除数据集。操作步骤 登录 DataV控制台。选择 我的数据 页签，在左侧列表中单击 数据集管理。在 数据集管理 页面，将鼠标移至页面内某个待删除的数据集上，单击左侧的 图标。在弹出的确认删除...
概述
您可以恢复备份集所在时间点的数据。日志备份：也叫增量备份，备份了记录数据变更的Binlog日志。开启日志备份后，基于“数据备份+日志备份”，您可以恢复时间范围内任意时间点（精确至秒）的数据。例如，实例中创建了2021年01月01日00:00:...
常见问题
1.售前咨询渠道 尊敬的“准”大数据专家服务用户您好：如果您准备购买阿里云大数据专家服务，但是遇到如服务范围、规格、服务选择等售前方面的问题，您可以通过钉钉与我们联系，您将“当面”获得阿里云大数据专家咨询专家的建议。...
- 产品推荐
- 这些文档可能帮助您