Quick BI数据可视化
Quick BI支持连接 云数据库 SelectDB ...将SelectDB数据库中的数据表或自定义的SQL添加到Quick BI，请参见 创建并管理数据集。添加可视化图表并分析数据，请参见 新建仪表板 和 可视化图表概述。钻取并深度分析数据，请参见 钻取设置与展示。
申请、续期和交还表权限
若关闭生产数据安全模式，则您加入目标项目，且您在项目中的角色包含项目 资产权限-新建 的权限点，即可在开发环境创建表，如何开启生产数据安全模式，请参见 安全设置。若开启跨项目安全模式，则仅可在任务所在的项目中创建表，不能跨项目...
申请、续期和交还表权限
若关闭生产数据安全模式，则您加入目标项目，且您在项目中的角色包含项目 资产权限-新建 的权限点，即可在开发环境创建表，如何开启生产数据安全模式，请参见 安全设置。若开启跨项目安全模式，则仅可在任务所在的项目中创建表，不能跨项目...
开发前准备：绑定数据源或集群
绑定后，才可读取数据源或集群中的数据，并进行相关开发操作。前提条件 您需根据后续要开发和调度的任务类型，提前创建好对应的数据源或集群。该数据源或集群需参考本文绑定至数据开发（DataStudio）。数据开发（DataStudio）支持绑定的...
概述
DataHub数据同步功能 DataHub提供数据Sink/Source功能，即数据同步功能，DataHub支持将对应Topic中的数据 实时/准实时 的同步到第三方阿里云产品中，打通阿里云产品间的数据流通。目前支持MaxCompute（原ODPS）、分析型数据库MySQL(ADS)、...
Quick BI
数据可视化分析 单击左侧导航栏中的 数据集>新建数据集，选择之前配置的AnalyticDB链接，选择表的种类，将数据集添加进数据决策系统并进行后续的数据分析和仪表板展示。您可以使用如下两种方式进行数据的可视化分析：拖拽表对应列方式：...
查看数据迁移项目的详情
结构迁移 负责迁移源库中的数据对象定义（表、索引、约束、注释和视图等）至目标库中，会自动过滤临时表。当源端数据库非 OceanBase 数据库时，会依据目标 OceanBase 租户类型的语法定义标准进行数据类型和 SQL 语法的自动转换和拼装，然后...
数据保护机制
MaxCompute已提供数据保护机制能力，如果项目中的数据敏感度很高，则需要项目所有者自行设置数据保护机制。MaxCompute项目的数据保护机制默认为关闭状态。项目所有者可以在项目中执行 set projectProtection=true;命令开启数据保护机制，...
Kafka单表实时入湖OSS（HUDI）
在弹出对话框中指定好 开始时间 和 采样条数 后，单击 开始采集 按钮，可以对指定的Kafka Topic进行数据采样，同时您可以预览Topic中的数据，为后续数据处理节点的数据预览和可视化配置提供输入。编辑数据处理节点。单击 图标可以增加数据...
迁移方案概览
云企业网CEN 源为自建MySQL或RDS MySQL的迁移方案 重要 PolarDB-X 1.0中的数据库须基于RDS MySQL创建，DTS暂不支持基于 PolarDB MySQL版 创建的数据库。PolarDB-X 1.0为目标时不支持库表结构迁移，PolarDB-X 2.0为目标时均支持。PolarDB-X ...
同步方案概览
云企业网CEN 源为自建MySQL或RDS MySQL的同步方案 重要 PolarDB-X 1.0中的数据库须基于RDS MySQL创建，DTS暂不支持基于 PolarDB MySQL版 创建的数据库。PolarDB-X 1.0为目标时不支持结构同步以及结构初始化，PolarDB-X 2.0为目标时均支持。...
Iceberg概述
实时机器学习 通常在机器学习场景中，需要花费大量的时间处理数据，例如，数据清洗、转换和提取特征等，还需要对历史数据和实时数据进行处理。而Iceberg简化了工作流程，整个数据处理过程是一条完整的、可靠的实时流，其数据的清洗、转换和...
支持的数据库
源为自建MySQL或RDS MySQL的同步方案 重要 PolarDB-X 1.0中的数据库须基于RDS MySQL创建，DTS暂不支持基于 PolarDB MySQL版 创建的数据库。PolarDB-X 1.0为目标时不支持结构同步以及结构初始化，PolarDB-X 2.0为目标时均支持。PolarDB-X 2....
散点层
说明 该配置项为一个数组，配合数据分级使用，从类型1到类型n为递增的设置，例：类型1设置为10，则表示 value 值为0~10的数据将展示为10的大小，类型2设置为20，则表示 value 值为11~20的数据将展示为20的大小，如果数据分级配置项设置为3...
散点层
重要 该配置项为一个数组，配合数据分级使用，从类型1到类型n为递增的设置，例：类型1设置为10，则表示value值为0~10的数据将展示为10的大小，类型2设置为20，则表示value值为11~20的数据将展示为20的大小，如果数据分级配置项设置为3级，...
主备方案介绍
A：存储的是数据D1和数据D2中时间戳更大的数据，数据在LTS同步过程中不会改变数据原有的时间戳，一般情况下存储的是数据D2，但是由于主备实例不同可能存在时间戳毫秒级的时间差异造成数据D2的时间戳比数据D1的时间戳小，在这种情况下存储的...
概述
向量数据库简介 在现实世界中，绝大多数的数据都是以非结构化数据的形式存在的，如图片，音频，视频，文本等。这些非结构化数据随着智慧城市、短视频、商品个性化推荐、视觉商品搜索等应用的出现而爆发式增长。为了能够处理这些非结构化...
Delta Lake概述
Delta数据湖方案如下：在大数据存储层之上提供了数据管理层，该数据管理层等同于数据库中的元数据管理，其元数据随着数据一起存放并对用户可见（例如 图 1 所示）。Delta基于元数据管理引入了ACID，解决了因数据导入失败而产生脏数据和数据...
轨迹层
数据分级：根据数据中的value字段值大小划分（自然分割）成2~7个数据大小级别，解决value值相差太大导致的渲染问题。轨迹粗细（从细到粗）：单击右侧的 或 图标，添加或删除一个类型。单击 或 图标配置多个轨迹粗细类型的排列样式。单击 ...
轨迹层
数据分级：根据数据中的 value 字段值大小划分（自然分割）成2~7个数据大小级别，解决 value 值相差太大导致的渲染问题。轨迹粗细（从细到粗）：单击右侧的 或 图标，添加或删除一个类型。单击 或 图标配置多个轨迹粗细类型的排列样式。...
同数据库归档
当数据库中表的数据量过大时，可能会影响查询数据速率，在不考虑将数据迁移到其他数据库的情况下，您可以将数据库中的历史数据或使用频率低的冷数据归档在当前数据库下的其他表中。同时，结合DMS提供的归档时清理源表功能，帮助您提升数据...
Tunnel命令常见问题
如何在Shell脚本中将一个TXT文件中的数据上传到MaxCompute的表中？导入文件夹中的文件数据时，提示字段不匹配，但是文件夹下的文件可以单独导入，如何解决？使用Tunnel Upload命令上传两个文件时，第一个文件上传结束之后，第二个文件没有...
背景信息以及准备工作
背景信息 DLA作为无服务化的大数据分析服务，通过标准的SQL语句直接对存储在阿里云对象存储服务（Object Storage Service，简称 OSS）、表格存储（Table Store）中的数据进行清洗。例如，使用DLA对OSS中的历史数据按天进行清洗。DataWorks...
数据服务入门
DataWorks数据服务的主要目标是为个人、团队和企业构建统一的数据服务总线，帮助用户统一管理面向内外部的API服务。例如，您可以将查询数据表功能快速的生成对应的API，或将已有的API注册至数据服务平台进行统一发布和管理。本文以MySQL...
JindoFS实战演示
本视频为您介绍如何将HDFS中的文件载入Hive表，然后将Hive中的数据按照分区归档到OSS。OSS访问加速 文档链接 视频链接 视频发布时间 描述 访问OSS这类对象存储最快的方式 访问OSS这类对象存储最快的方式 2021-05-25 JindoFS SDK是一个简单...
区域热力层（v1.x版本）
GeoJSON提取工具中的数据已更新，需使用新的GeoJSON数据文件。修改参数。以 肇庆市 的区县级GeoJSON数据为例，高要区 文字标注有偏移。使用 DataV.GeoAtlas边界生成器 工具，上传 肇庆市 的区县级GeoJSON数据文件，在 属性表面板 中添加 ...
Oracle数据源
由于主备数据同步存在一定的时间差，在网络延迟等特定情况下，会导致备库同步恢复的数据与主库有较大差别，从备库同步的数据不是一份当前时间的完整镜像。一致性约束 Oracle在数据存储划分中属于RDBMS系统，对外可以提供强一致性数据查询...
冷热分离
该属性的含义是优先查询热存储中的数据,若热存储中的数据查完了，用户仍然在调用next获取下一条数据，则会开始查询冷数据。Shell hbase(main):002:0>scan 'chsTable',{COLD_HOT_MERGE=>true} Java scan=new Scan();scan.setAttribute...
柱状图层
柱状图层是3D平面中国地图的子组件，支持独立的样式和数据配置，包括柱状图的高度、粗细、颜色以及经纬度等，能够以3D柱状图的形式表示不同地理坐标位置中的不同数值大小及其他信息。本文介绍柱状图层各配置项的含义。单击 子组件管理 下方...
表设计最佳实践
日志表中的数据量很庞大，在业务分析使用时，通常会按PC端、APP端来统计分析。由于PC端、APP端采用不同的体系采集数据，所以通常需要按照终端设计多个明细DWD表。如果终端较多但数据量不大，例如，一个终端的数据量小于1 TB但采集次数较多...
双11雷达图
图表样式 双11雷达图是其他基础图表的一种，与基本雷达图相比，双11雷达图仅支持单个维度的数据展示，适用于展示双11期间各区域售卖的商品数量，例如展示华北、华东等区域的商品销售数量。样式面板 搜索配置：单击 样式 面板右上角的搜索...
基于Delta lake的一站式数据湖构建与分析实战
数据湖能够将这些不同来源、不同格式的数据集中存储管理在高性价比的存储如 OSS等对象存储中，并对外提供统一的数据目录，支持多种计算分析方式，有效解决了企业中面临的数据孤岛问题，同时大大降低了企业存储和使用数据的成本。...
入湖基础操作
关系数据库全量入湖：可以实现RDS MySQL或PolarDB数据库表数据全量同步到数据湖，选择在数据源管理中配置好的数据源，将数据源对应数据库中选定表的数据全量同步到OSS中，如果待同步表中数据量大，则所消耗的资源也会比较大，建议在业务...
数据归档概述
当线上数据库中的历史数据（访问率很低的数据）越来越多，占用的存储越来越大，以至于会影响数据库的查询性能与业务运转，此时您可以使用 数据管理DMS 的数据归档功能，周期性地将指定表的数据归档至其他数据库或存储服务中。同时，该功能...
客户案例
基于飞天大数据平台产品DataWorks+MaxCompute大大提高了数据业务的开发效率，构建大润发的数据中台体系。新金融行业：某互联网金融公司湖仓一体案例 客户架构如下。客户简介 公司的第一代数据湖是基于Hadoop+OSS搭建的，同时引入的数据中台...
混合存储型（已停售）
业务中的数据访问完全随机。冷热数据的性能和延迟要求 热数据访问场景对性能要求很高。冷数据访问场景对延迟的敏感度不高。业务对性能的要求极高。业务对延迟的敏感度高。大Key的访问规律 业务中没有大Key。业务中有大Key，且大Key的访问率...
数据库克隆
数据管理DMS的数据库克隆功能支持将源数据库的表结构和表数据复制至目标数据库中，实现全部表或部分表备份，适用多环境数据库初始化，例如将开发环境复制到测试环境。前提条件 源数据库与目标数据库类型相同，且都为MySQL。数据库实例的...
配置资产数据
映射：当您所配置的数据源中的字段与资产的默认字段名称不一致时，可以在 映射 输入框中，输入您数据源中的字段，将这些字段映射到资产对应的字段上。无需修改数据源中的字段，就可以实现数据的实时匹配。状态：可实时展示资产的数据响应...
区域下钻热力层（v2.x版本）
当自定义区域数据请求失败时 自定义区域数据接口请求失败时（请求失败的情况可能是：网络问题或接口报错等）返回并经过过滤器处理后抛出的事件，同时抛出处理后的JSON格式的数据。具体数据示例请参见画布编辑器中组件右侧配置面板 数据 页...
文档修订记录
绑定后，才可读取数据源或集群中的数据，并进行相关开发操作。开发前准备：绑定数据源或集群 2023.12.29 新增功能 数据源 为给您带来更统一的产品使用体验，DataWorks将MaxCompute、Hologres、AnalyticDB for PostgreSQL、AnalyticDB for ...
- 产品推荐
- 这些文档可能帮助您