冷热分层
背景信息 在海量大数据场景下，随着业务和数据量的不断增长，性能和成本的权衡成为大数据系统设计面临的关键挑战。Delta Lake是新型数据湖方案，推出了数据流入、数据组织管理、数据查询和数据流出等特性，同时提供了数据的ACID和CRUD操作...
文字标签
文字标签是三维城市地图的子组件，支持独立的样式和数据配置，包括文字标签的显示大小配置、文字间距、文字背景等参数。文字标签用标签的形式在三维空间中展示文字。本文介绍文字标签配置项的含义。配置 文字标签配置面板参数说明。参数 ...
创建ID
用于定义以及管理平台实体关联的ID类型，如消费者、商家等实体关联的手机号、邮箱等。本文将指导您如何创建ID。前提条件 创建ID前需创建其需关联的实体。具体操作，请参见 创建实体。操作步骤 在Dataphin首页，单击顶部菜单栏的 规划。进入...
创建指标映射标签
组合标签：通过设置特定规则对标签进行组合加工后生成，如消费者分层标签等。时效性 时效性描述标签随时间变化的更新频率，分为动态及静态标签。静态标签：一般描述实体的固有特性，一般不随时间变化而变化，如性别、姓名等标签。动态标签...
数据导入方式介绍
为满足多样化的数据导入需求，AnalyticDB for MySQL 提供了多种数据导入方式，包括：通过外表导入数据、通过DataWorks导入数据、通过DTS导入数据以及使用JDBC通过程序导入数据等。您可以通过本文了解各导入方式的特性及适用场景，帮助您...
数据迁移
本文为您介绍数据迁移的最佳实践，包含将其他业务平台的业务数据或日志数据迁移至MaxCompute，或将MaxCompute的数据迁移至其它业务平台。背景信息 传统关系型数据库不适合处理海量数据，如果您的数据存放在传统的关系型数据库且数据量庞大...
【通知】2020年3月31日RDS MySQL数据订阅（旧版）功能...
为降低用户使用成本，DTS提供了RDS MySQL数据订阅（新版），当多个下游需要订阅同一个数据库实例时，只需要创建多个消费组即可，多个消费组可以同时对同一个数据库实例的增量数据进行订阅和消费，大幅降低了使用成本。更多详情，请参见 ...
查看敏感数据识别结果
仅支持在 结构化数据、半结构化数据、非结构化数据 或 大数据 分类下分别选择一个或多个数据类型，不支持跨分类同时选择多个数据类型。如果您未选中任意数据类型，数据安全中心默认展示所有数据类型下的敏感数据识别结果。数据模板：在 ...
资产应用概述
标签服务 创建及管理标签离线服务任务 批量导出标签数据到目标数据源。查看实时标签查询调用代码 通过接口形式，实时查询实体标签值。选择标签创建个体360画像，洞察个体特征。资产应用入口 在Dataphin首页，单击顶部菜单栏的 标签。进入...
外部表概述
但这两种方法都有不足之处：第一种方法需要在MaxCompute系统外部做一次中转，如果OSS数据量太大，还需要考虑如何并发来加速，无法充分利用MaxCompute的大规模计算能力。第二种方法通常需要申请UDF网络访问权限，还需要开发者自己控制作业...
Serverless模式
易用性：只需要简单的创建共享、授权和导入共享操作，即可在数据消费者实例上访问数据，无需处理表结构迁移，可以像访问本地数据一样访问共享数据。共享中增减共享对象和授权变化能自动同步到消费者实例。数据一致性：数据消费者实例对数据...
Dataphin支持的数据源
背景信息 Dataphin支持对接的数据源包括大数据存储型数据源、文件数据源、消息队列数据源、关系型数据源和NoSQL数据源，各模块支持对接的数据源类型说明如下：如果您需要在Dataphin中连接某数据源，则需要先在数据源管理中创建该数据源。...
功能简介
通过统一的数据资产目录，沉淀数据供给方生产的各类型数据，帮助资产运营管理者进行可共享的数据资产的注册、编目分类和公开运营，帮助数据使用者快速了解和获取业务需要的高质量数据资产，促进数据资产发挥更大的业务价值。同时，通过数据...
数据分析概述
DataWorks提供的数据分析平台，可以流畅地进行数据处理、分析、加工及可视化操作。在数据分析板块中，您不仅可以在线洞察数据，还可以编辑和共享数据。本文为您介绍数据分析平台的优势、功能、权限等概要信息。产品优势 与本地数据分析相比...
Delta Table概述
随着当前数据处理业务场景日趋复杂，很多业务场景并不要求延时秒级更新可见或者行级更新，更多的需求是分钟级或者小时级的近实时数据处理叠加海量数据批处理场景，MaxCompute支持基于Delta Table实现近实时的增全量一体的数据存储、计算...
数据集成
数据源支持情况 数据集成目前支持40种以上的数据源类型（包括关系型数据库、非结构化存储、大数据存储、消息队列等），通过定义来源与去向数据源，并使用数据集成提供的数据抽取插件（Reader）、数据写入插件（Writer），实现任意结构化、...
数据重排
在MaxCompute的使用过程中，如果已经积累了大量数据占用了大量存储资源，且已经通过削减数据存储生命周期和删除非必要数据等方式进行了治理，在您的存储预算有限，计算资源还有冗余的情况下，可以考虑使用数据重排方式对存储空间进行优化。...
Iceberg概述
您可以借助Iceberg快速地在HDFS或者阿里云OSS上构建自己的数据湖存储服务，并借助开源大数据生态的Spark、Flink、Hive和Presto等计算引擎来实现数据湖的分析。核心能力 Apache Iceberg设计初衷是为了解决Hive数仓上云的问题，经过多年迭代...
创建RDS MySQL数据订阅任务
后续步骤 成功运行订阅任务后，您需要新增消费组，并根据下游客户端选择订阅数据消费方式。消费组的创建和管理，请参见 新增消费组。根据消费客户端类型，选择订阅数据的消费方式：使用SDK示例代码消费订阅数据 使用flink-dts-connector...
SDK重新运行后不能成功订阅数据
因此如果上次SDK退出时最后一条消费数据的时间点对应的数据，不在当前订阅通道中，就不能订阅到这个消费位点对应的数据。解决方案 为了修复这个问题，在启动SDK之前，需要先修改消费位点，使消费位点在数据范围内，具体的修改方法详见文档 ...
DataWorks On Hologres使用说明
数据地图概述 安全中心 数据保护伞 审批中心 安全中心是集数据资产分级分类、敏感数据识别、数据授权管理、敏感数据脱敏、敏感数据访问审计、风险识别与响应于一体的一站式数据安全治理界面，帮助用户落地数据安全治理事项。安全中心概述 ...
发展历程
2021年 IDC发布《IDC MarketScape：中国政务大数据管理平台市场厂商评估2021》报告，阿里云位居行业领导者位置，产品能力居中国第一。以MaxCompute为核心代表的阿里云数仓进入 Forrester Wave 2021 Q1云数据仓库卓越表现者象限，成为入选...
实时数据消费概述
实时数据消费功能包含高速数据导入API和实时数据源消费两部分，可实现数据直接写入Segment（分片单元），避免通过COPY或INSERT方式造成的Master写入负载高的问题，也可实现使用 AnalyticDB PostgreSQL版 单产品直接消费Kafka数据。...
数据订阅SDK容灾
这个机制依赖于SDK消费数据时，向DTS中控节点实时汇报消费时间点。本小节简单介绍如何使用DTS提供的SDK容灾机制。要求 SDK消费代码中，每消费一个message要调用一次ackAsConsumed，向DTS汇报消费时间点。同一个订阅通道至少启动2个SDK下游...
Echarts 热力图
如果设置为 1，表示 隔一个标签显示一个标签，如果值为 2，表示 隔两个标签显示一个标签，以此类推。内部：勾选后，坐标轴刻度标签朝内；去勾选，坐标轴刻度标签朝外。旋转：刻度标签旋转的角度，在类目轴的类目标签显示不下的时候可以通过...
Echarts 热力图
如果设置为 1，表示 隔一个标签显示一个标签，如果值为 2，表示 隔两个标签显示一个标签，以此类推。内部：勾选后，坐标轴刻度标签朝内；去勾选，坐标轴刻度标签朝外。旋转：刻度标签旋转的角度，在类目轴的类目标签显示不下的时候可以通过...
标签资产市场概述
说明 标签数据类型为数值型，同时未配置码表或枚举值，且标签值的个数>10时，系统将通过直方图方式展示标签的统计信息。实时标签不支持查看标签统计。标签历史详情：标签历史详情可查看标签不同的业务日期的标签值分布情况。使用统计：可...
DataWorks on EMR Serverless StarRocks最佳实践
了解DataWorks on EMR Serverless StarRocks DataWorks作为阿里云一站式大数据开发治理平台，通过数据源对接EMR Serverless StarRocks，可实现EMR Serverless StarRocks的数据集成、作业周期性调度，同时结合StarRocks引擎在数据分析和数据...
使用Flink SQL消费实时变更数据示例
云原生多模数据库 Lindorm 支持实时数据订阅功能，对实时变更数据进行计算，可以为实时监控，实时报表和流数据分析功能提供有效数据。通过Flink Kafka Connector可以从底层存储消费订阅数据，同时Flink Kafka Connector对订阅数据进行解析...
创建行为统计标签
如基于下单行为加工 最近7天消费者下单金额 标签。本文将指导您如何创建行为统计标签。前提条件 通过行为关系创建行为统计标签前需先创建对应的行为关系。更多信息，请参见 新建行为关系。操作步骤 在Dataphin首页，单击顶部菜单栏的 标签...
数据出境监控
数据安全中心DSC（Data Security Center）提供数据出境监控功能，通过监测数据访问行为的源地址以及目的地址，关联国家地域信息，检测个人信息从中国境内到中国境外的数据传输行为，对出境数据进行安全合规检测和统计。本文介绍如何查看...
迁移 PolarDB-X 1.0 数据库的数据至 OceanBase 数据库...
项目启动成功后，PolarDB-X 1.0 数据库至 OceanBase 数据库 MySQL 租户的数据迁移项目会自动删除，数据传输会保存 PolarDB-X 1.0 数据库下挂载的数据库至 OceanBase 数据库 MySQL 租户的数据迁移项目，并自动创建相应的数据源。您可以在弹...
基本概念
应用 消费数据服务（调用API或Dataphin数据源）的权限主体。分组 将数据服务和应用根据特定功能或场景进行分类管理。API服务 集中为您展示已发布的API，API服务即API市场。元数据管理 对非结构化类型的数据表进行统一的结构化（二维化）...
API概览
本产品（云数据库 RDS/2014-08-15）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，可...
API概览
UpgradeDBInstanceEngineVersion 升级RDS MySQL数据库大版本 该接口用于升级RDS MySQL的数据库大版本。UpgradeDBInstanceKernelVersion 升级RDS实例内核小版本 该接口用于升级RDS实例的内核小版本。网络与连接地址 API 标题 API概述 ...
用户价值
数据资源平台为用户提供了一站式数据资产定义、生产、管理与服务平台，提供企业级数据资产构建能力和一致性使用体验，助力客户快速构建数据智能平台，实现数据资源统一管理，挖掘潜在规律，优化业务决策，让大数据真正的驱动客户业务。...
API概览
本产品（云数据库 RDS/2014-08-15）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，可...
迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL ...
本文为您介绍如何使用数据传输迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输将主动释放...
迁移 OceanBase 数据库 MySQL 租户的数据至 MySQL ...
本文为您介绍如何使用数据传输迁移 OceanBase 数据库 MySQL 租户的数据至 MySQL 数据库。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输将主动...
OceanBase 数据库之间的数据迁移
背景信息 您可以在数据传输控制台创建从 OceanBase 数据库迁移数据至 OceanBase 数据库同类型租户的数据迁移项目，通过结构迁移、全量迁移和增量同步，无缝迁移源端数据库中的存量业务数据和增量数据至目标端数据库。前提条件 数据传输已...
- 产品推荐
- 这些文档可能帮助您