数据页面管理
在管理数据页面中，数据的类型分为 ...上传数据 管理数据页面中的数据类型有 矢量、栅格、地理服务、三维模型、三维瓦片 和 业务数据 六大类，不同类型的数据可上传的数据格式互不相同，具体三种类型数据上传数据的详细说明请参见 上传数据。
升级数据库大版本
支持升级的数据库大版本以及如何升级数据库大版本，请参见 支持升级的数据库大版本 和 升级数据库大版本。在新实例上验证变更后的客户端，测试是否存在兼容性问题。如果出现兼容性问题，请根据报错信息再次检查并变更客户端代码，直到没有...
迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL ...
您可以通过结构迁移、全量迁移和增量同步等，无缝迁移源端数据库的存量业务数据和增量数据至 OceanBase 数据库 MySQL 租户。TiDB 数据库支持在线事务处理和在线分析处理（Hybrid Transactional and Analytical Processing，HTAP），是一款...
点热力层（v3.x版本）
图表样式 点热力层是3D平面地图（v3.x版本）的子组件，支持独立的样式、数据和交互配置，包括热力颜色、热力半径和热力模糊度等。样式面板 搜索配置：单击 样式 面板右上角的搜索配置项图标，可在搜索配置面板中输入您需要搜索的配置项名称...
OceanBase 数据库之间的数据迁移
背景信息 您可以在数据传输控制台创建从 OceanBase 数据库迁移数据至 OceanBase 数据库同类型租户的数据迁移项目，通过结构迁移、全量迁移和增量同步，无缝迁移源端数据库中的存量业务数据和增量数据至目标端数据库。前提条件 数据传输已...
查看资源用量大盘
数据更新频率为每10分钟更新1次统计数据。区域 描述 ①筛选区 为您展示最近12个月的资源用量统计快照值。您可根据数据板块、项目、统计日期进行筛选。默认展示最近60天的统计数据。②指标统计区 为您展示当前租户已使用的数据处理单元总量...
查看计量大屏
数据服务提供了计量大屏功能，您可以通过该功能查看各类可视化图表和统计数据，包括工作空间下的API总数、总调用次数以及总执行时长用量等信息，帮助您全面了解API的调用情况。同时，您也可以针对单个API查看监控图表，获取API网关状态码、...
查看账单详情
单击 明细账单 页签，进入明细账单页面，您可以勾选 统计项 和 统计周期，并单击产品右侧的过滤器图标选择 大数据开发治理平台 DataWorks，查看DataWorks账单汇总信息。账单明细说明 DataWorks包括按量付费和包年包月两种计费方式：类别 ...
实时Top Key统计
相关API DAS 产品的API接口 说明 DescribeHotBigKeys 获取当前内存中实时的热Key和大Key信息。DescribeTopHotKeys 获取一段时间内排名前20的热Key信息。DescribeTopBigKeys 获取一段时间内排名前20的大Key信息。DescribeHotKeys 获取Redis...
典型应用
用户分群统计 构建用户特征大宽表，任意选择用户属性标签数据和筛选条件，进行人群特征统计分析。访客来源分析展示 通过批量离线计算对用户访问日志中的用户行为进行关联，生成用户行为路径大宽表同步到ClickHouse，基于ClickHouse构建交互...
统计信息
手动收集统计信息 收集全表统计信息 ANALYZE TABLE 命令会扫描全表来收集统计信息，对于数据量大的表，全表收集统计信息需消耗更多的时间，建议在业务低峰期执行或采样收集统计信息。语法 ANALYZE TABLE[schema_name.]table_name[UPDATE...
使用SDK示例代码消费订阅数据
SDK客户端每隔一定时间会统计并显示消费数据的信息，包括数据发送和接受时数据总数、数据总量、每秒请求数接收RPS等。表 2.消费数据的统计信息 参数 说明 outCounts SDK客户端所消费的数据总数。outBytes SDK客户端所消费的数据总量，单位...
使用SDK示例代码消费订阅数据
SDK客户端每隔一定时间会统计并显示消费数据的信息，包括数据发送和接受时数据总数、数据总量、每秒请求数接收RPS等。表 2.消费数据的统计信息 参数 说明 outCounts SDK客户端所消费的数据总数。outBytes SDK客户端所消费的数据总量，单位...
查看异常统计
③ 异常数据排行 展示离线实例和实时实例异常数据的排行：离线实例排行包括运行状态统计和运行时长统计排行。实时实例排行包括失败次数统计和延时时长统计排行。④ 报警排行 展示离线实例和实时实例的报警排行：离线实例报警排行包含运行...
查看异常统计
③ 异常数据排行 展示离线实例和实时实例异常数据的排行：离线实例排行包括运行状态统计和运行时长统计排行。实时实例排行包括失败次数统计和延时时长统计排行。④ 报警排行 展示离线实例和实时实例的报警排行：离线实例报警排行包含运行...
性能优化与诊断简介
慢SQL：记录并分析高消耗的SQL语句，展示聚合结果（慢SQL统计）和慢SQL明细。监控大盘：可以自主选择需要监控的数据库实例和指标，对不同数据库实例的指标进行监控对比，并且可以进行多指标联动，帮助您监控数据库实例的运行情况。SQL洞察...
DataWorks on EMR数据安全方案
在大数据领域，阿里云为企业用户提供了一整套数据安全方案，包含用户认证、数据权限、大数据作业管理体系等。本文以联合使用DataWorks与EMR为例，为您介绍DataWorks on EMR场景下的数据安全方案。背景信息 DataWorks on EMR目前支持LDAP...
概述
解决方案 T+1全量同步一键建仓是指通过DLA控制台配置数据源（RDS、PolarDB for MySQL、MongoDB数据源、ECS自建数据库数据）和目标OSS数据仓库，系统按照您设定的数据同步时间自动、无缝的帮您把数据源中的数据同步到目标数据仓库OSS中，...
数仓规划概述
公共层：用于加工、整合贴源层输入的公共数据，建立统一的指标维度，构建可复用面向分析和统计的明细事实数据和汇总数据。该层级可挂载明细表、维度表、汇总表。应用层：基于实际应用需求，获取公共层加工整合后的数据，面向具体应用场景或...
数据库高级特性管理
您可以在RDS管理控制台查看或修改数据库中的各类属性，也可以手动收缩数据库事务日志和更新数据库统计信息，以优化数据库性能和提高查询效率。前提条件 已创建数据库。创建方法，请参见 创建数据库。实例所在地域必须在：华东1（杭州）、...
数据仓库研发规范概述
在大数据时代，规范地进行数据资产管理已成为推动互联网、大数据、人工智能和实体经济深度融合的必要条件。贴近业务属性、兼顾研发各阶段要点的研发规范，可以切实提高研发效率，保障数据研发工作有条不紊地运作。而不完善的研发流程，会...
常见问题
1.售前咨询渠道 尊敬的“准”大数据专家服务用户您好：如果您准备购买阿里云大数据专家服务，但是遇到如服务范围、规格、服务选择等售前方面的问题，您可以通过钉钉与我们联系，您将“当面”获得阿里云大数据专家咨询专家的建议。...
CDM接口数据层设计规范
统计时间周期范围和数据域说明如下：关于统计时间周期范围缩写，默认情况下，离线计算包括最近一天（1d）、最近N天（nd）和历史截至当天（td）三个表。说明 如果出现 nd 的表字段过多，需要拆分时，只允许以一个统计周期单元作为原子拆分，...
什么是DataWorks
DataWorks基于MaxCompute、Hologres、EMR、AnalyticDB、CDP等大数据引擎，为数据仓库、数据湖、湖仓一体等解决方案提供统一的全链路大数据开发治理平台。从2009年起，DataWorks不断沉淀阿里巴巴大数据建设方法论，支撑数据中台建设，同时与...
会话管理
数据库自治服务DAS为RDS PostgreSQL提供会话管理功能，方便您查看、导出和结束目标实例当前的会话。本文介绍如何使用会话管理功能。...导出会话统计信息：可以按概要、按用户统计、按访问来源统计和按数据库统计等条件导出会话统计信息。
实例会话
您可以通过DAS的实例会话功能查看、导出和结束目标实例当前的会话。本文介绍如何使用实例会话功能。前提条件 目标数据库实例已接入DAS，...导出会话统计信息：可以按概要、按用户统计、按访问来源统计和按数据库统计等条件导出会话统计信息。
实例会话
您可以通过DAS的实例会话功能查看、导出和结束目标实例当前的会话。本文介绍如何使用实例会话功能。前提条件 目标数据库实例已接入DAS，...导出会话统计信息：可以按概要、按用户统计、按访问来源统计和按数据库统计等条件导出会话统计信息。
实例会话
您可以通过DAS的实例会话功能查看、导出和结束目标实例当前的会话。本文介绍如何使用实例会话功能。前提条件 目标数据库实例已接入DAS，...导出会话统计信息：可以按概要、按用户统计、按访问来源统计和按数据库统计等条件导出会话统计信息。
查看实例统计
运行详情支持选择按 业务日期、定时运行时间、运行日期，查看统计数据。定时运行时间：任务的起调时间。您可选择日期范围，默认为当天。运行日期：任务的开始运行时间。您可选择业务日期范围，默认为当天。未运行 和 等待中 的实例将不统计...
查看实例统计
运行详情支持选择按 业务日期、定时运行时间、运行日期，查看统计数据。定时运行时间：任务的起调时间。您可选择日期范围，默认为当天。运行日期：任务的开始运行时间。您可选择业务日期范围，默认为当天。未运行 和 等待中 的实例将不统计...
明确统计指标
统计指标包括派生指标、原子指标、业务限定、业务过程和统计粒度（即维度）。在设计模型前，建议先完成该部分工作，以便设计出易于使用的数据仓库。指标定义注意事项 原子指标是明确统计口径和计算逻辑，事实模型或维度模型定义完成，即可...
应用场景
数据分析业务 云数据库 Memcache 版搭配大数据计算服务 MaxCompute。实现对大数据的分布式分析处理，适用于商业分析、挖掘等大数据处理场景。通过数据集成服务可自助实现数据在云数据库 Memcache 版与 MaxCompute 间的同步，简化数据操作...
外部表概述
外部表示例 您可以通过以下示例，深入了解通过MaxCompute外部表功能处理各种非结构化数据的方法：访问OSS和TableStore（OTS）非结构化数据，请参见 访问OSS非结构化数据 和 访问OTS非结构化数据。外部表访问OSS的账号，在RAM中自定义授权...
数据膨胀、倾斜与索引统计
AnalyticDB PostgreSQL版 诊断与优化功能新增了关键指标页，用于查看数据膨胀、数据倾斜和索引使用统计信息。前提条件 实例资源类型为存储弹性模式，且内核版本为V6.3.10.1及以上版本。如何查看和升级内核小版本，请参见 查看内核小版本 和...
质量规则模板类型
本文为您介绍数据质量对象的模板类型。数据表/指标模板类型 模板分类 模板说明 完整性 字段空值校验 用于对单字段是否是...稳定性 实时统计值检测 实时数据为指标值或可统计数据时，用于判断数据是否正确 可选择和固定值或者历史进行对比。
质量规则模板类型
本文为您介绍数据质量对象的模板类型。数据表/指标模板类型 模板分类 模板说明 完整性 字段空值校验 用于对单字段是否是...稳定性 实时统计值检测 实时数据为指标值或可统计数据时，用于判断数据是否正确 可选择和固定值或者历史进行对比。
进入数据质量概览（旧版）
模块 描述 我的订阅 为您展示当前登录用户名下订阅的表，所产生的离线数据和流式数据的报警、阻塞数量，以及订阅的总数。全部数据 为您展示当前工作空间下离线数据和流式数据的全部数据情况。报警趋势图 为您展示 近7天、近30天 和 近半年 ...
应用场景
写密集、统计和分析型工作 Cassandra是为优异的写吞吐量而特别优化的，能够支持很高的多客户线程并发写性能和突发的峰值，这些特性使得Cassandra能够很好支持写多于读的场景，例如用户状态更新、社交网络、建议/评价以及应用统计等。...
离线同步能力说明
同时，结合DataWorks调度参数，实现增量数据和全量数据周期性写入到目标表对应分区功能。离线同步任务使用调度参数，再结合 运维中心 补数据 功能，可实现基于一套任务配置，批量将历史数据同步至目标数据库或数据仓库指定表或表指定分区。...
相关的云服务
DataWorks作为阿里云一站式大数据开发与治理平台，通常会与计算引擎产品联合使用，此外使用DataWorks进行数据集成时通常联合进行数据传输的数据源产品一起使用。本文为您介绍典型场景下，使用DataWorks时通常会使用到的其他云产品。计算...
- 产品推荐
- 这些文档可能帮助您