客户案例
MaxCompute已被广泛应用于各大领域处理云上大数据，帮助众多企业解决了海量数据分析问题，同时降低企业运维成本，企业人员可更专注于业务开发。本文为您介绍MaxCompute的精选客户案例。MaxCompute的全量客户案例信息，请参见 行业客户案例...
产品服务等级协议
本服务等级协议（Service Level Agreement，以下简称“SLA”）约定了阿里云向客户提供的数据资源平台的服务可用性等级指标及赔偿方案。特别提示您，除非另有约定，本协议不适用于数据资源平台公测、邀测、免费的功能及版本，也不适用于数据...
快速入门
通过各个组件 及服务 的结合，阿里云Elasticsearch可以应用于实时日志处理、全文搜索和数据分析等领域。更多产品相关信息，请参见 什么是阿里云Elasticsearch。产品使用 Elasticsearch Elasticsearch作为实时分布式搜索和分析引擎，可以...
购买流程
数据传输服务DTS（Data Transmission Service）支持先配置再购买和先购买再配置两种创建任务方式。若您需要随用随配，建议您选择先配置再购买的方式；若您需要先锁定财务预算而不需要配置任务，建议您选择先购买再配置的方式。本文介绍数据...
逻辑数仓
数据管理DMS提供的逻辑数仓具有强大的数据源管理能力，可以实现将企业的异构数据源进行逻辑聚合，形成物理分散、逻辑统一的虚拟数仓，然后快速地提供数据分析和访问服务，满足业务人员、BI分析师、运营人员等各种角色的需求。背景信息 企业...
报表中心
等保参考分析报表 本报表根据当前信息安全技术网络安全等级保护评测要求GB/T 28448-2019（简称等级保护2.0），针对等级保护2.0中关注的安全审计中的入侵防范、恶意代码监控、安全审计监控等进行针对性的数据分析和展示。语句分析类报表 本...
购买指引
本文为您介绍数据资源平台实例售卖支持的地域、版本及购买时长。背景信息 购买数据资源平台前，请您了解以下几点：购买前建议您先联系阿里云 售前咨询 并提供企业数据建设需求及背景信息。待阿里云售前咨询帮您确认数据资源平台当前版本及...
资源规划和配置
在调用API时会消耗一定的资源组，为了防止资源组不能正常访问数据源，或资源（CPU、内存）不足导致API调用异常、高频调用请求被限流等问题，您需要确保资源组的网络连通性和充足的性能。本文为您介绍资源组规划时的注意项及不同资源组类型...
其他问题
任务与实例 周期任务与周期实例、补数据实例、测试实例是什么关系？资源组 日志和实例保留多长时间？为什么不能在调度资源组上进行大数据计算？其他 如何设置任务优先级？如何查看任务优先级？周期任务与周期实例、补数据实例、测试实例是...
客户案例
同时，构建自助数据分析平台，快速满足各类人员不同数据分析需求。数据体系整体上云，使用少量组件即可实现流批一体、湖仓一体，完成从数据驱动到数智驱动，极大发挥数据价值。视频介绍 社交媒体行业：欢聚时代大规模数据湖建设 客户简介 ...
基因数据文件
可由对方通过阿里云访问控制（RAM）授权你访问存储数据的bucket（见常见问题中“基因分析平台能否跨账号访问OSS资源”），然后基因分析平台即可使用。其他公有云厂商数据 如果用户的基因数据存储在其他公有云厂商中，可以通过阿里云的 在线...
创建CDH Spark节点
Spark是一个通用的大数据分析引擎，具有高性能、易用和普遍性等特点，可用于进行复杂的内存分析，构建大型、低延迟的数据分析应用。DataWorks为您提供CDH Spark节点，便于您在DataWorks上进行Spark任务的开发和周期性调度。本文为您介绍...
通过MySQL分析实例同步至数仓版
构建实时数仓成本太高，公司留给数据分析预算有限，只能默默忍受越来越长的卡顿时间，殊不知在无限的忍受中公司错过了很多机会。此时，您可以在RDS MySQL控制台上创建一个MySQL分析实例，MySQL分析实例的复杂分析性能约为MySQL的100倍，...
系统函数分类
数据探索自身预置了诸多函数，用于常见的数据处理需求。这些预置的系统函数具有跨引擎的特点，在离线、实时、在线3种模型的不同引擎中具有相同的行为和使用方式。本文为您介绍数据探索提供的系统函数类型及函数使用相关说明。函数分类 数据...
2023年
授权实践 2023-09-14 新增（邀测）MaxCompute Notebook使用说明 新说明 MaxCompute Notebook是由MaxCompute提供的全托管、交互式数据分析挖掘模块，为数据工程师、数据分析师及数据科学家等人员提供Web交互式开发环境。支持用户通过SQL、...
等待资源
本文为您介绍等待资源的相关问题。为什么会出现等待资源？为什么任务一直在等待gateway调度资源？为什么数据集成任务一直显示wait？为什么会出现等待资源？问题现象 调度将任务下发到对应执行引擎上，此过程可能会出现以下等待资源问题：...
新功能发布记录
Roaring Bitmap函数 漏斗分析函数 漏斗分析是常见的转化分析方法，用于反映用户各个阶段行为的转化率。新增函数：WINDOW_FUNNEL、RETENTION、RANGE_RETENTION_COUNT和RANGE_RETENTION_SUM。漏斗留存函数 UPDATE JOIN 支持UPDATE JOIN多表...
常见问题
本文汇总了使用冷热分离功能时的常见问题。Q：数据什么时候进入冷存储？A：Lindorm通过 compaction 机制异步将冷数据从热存储归档至冷存储，系统触发时间默认为冷热分界线的一半，最小为1天，最大为 major compaction 周期的一半，major ...
什么是Dataphin
Dataphin是阿里巴巴集团OneData数据治理方法论内部实践的云化输出，一站式提供数据采、建、管、用全生命周期的大数据能力，以助力企业显著提升数据治理水平，构建质量可靠、消费便捷、生产安全经济的企业级数据中台。Dataphin兼容多种计算...
基本概念
DTS 数据传输服务（Data Transmission Service，简称DTS）支持关系型数据库（RDBMS）、非关系型数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，帮助您构建安全、可扩展、高可用的...
慢日志分析
慢日志问题极大地影响数据库的稳定性，当数据库出现负载高、性能抖动等问题时，数据库管理员或开发首先会查看是否有慢日志在执行。数据库自治服务DAS（Database Autonomy Service）支持慢日志分析功能，会统计并分析数据库中执行时间超过...
功能特性
数据迁移 数据迁移功能帮助您实现同构或异构数据源之间的数据迁移，适用于数据上云迁移、阿里云内部跨实例数据迁移、数据库拆分扩容等业务场景 功能集 功能 功能描述 参考文档 同构迁移 逻辑迁移 支持同构数据库间的数据迁移。自建MySQL...
MySQL生态兼容
MySQL协议 PolarDB-X 通讯协议兼容MySQL协议，可以使用常见的驱动直接连接到 PolarDB-X 实例，包括JDBC Driver、ODBC Driver、Golang Driver等，并且兼容MySQL SSL、Prepare、Load等传输协议。SQL兼容性 PolarDB-X 企业版兼容MySQL的各种...
基本概念
本文将向您介绍 云数据库ClickHouse 产品中涉及的一些基本名词概念，以便于您更好地理解 云数据库ClickHouse 产品。地域（Region）购买 云数据库ClickHouse 的服务器所处地理位置。您需要在购买 云数据库ClickHouse 服务时指定Region，...
Github实时数据同步与分析
本文以使用DataWorks实时同步公共数据至Hologres，并通过Hologres进行实时数据分析为例，为您示例DataWorks的数据同步能力与Hologres的实时分析能力。本教程以申请免费资源为例为您示例详细操作步骤，您也可以使用付费资源，操作类似。教程...
数据服务概述
数据服务价值 为了解决常见的数据应用问题，在数据服务体系下，开发人员开发数据服务时，提供简易向导和灵活脚本两种模式，从而降低开发门槛、提高开发效率、统一代码质量，方便管理变更；业务人员应用数据服务时，提供安全、稳定的数据...
使用流程
快速入门旨在介绍如何开通DLA、构建数据湖、调用Presto和Spark引擎进行数据分析与计算，帮助您掌握DLA的基本使用流程。如果您是首次使用云原生数据湖分析DLA的用户，我们建议您先阅读以下部分：产品简介-本内容概述了云原生数据湖分析DLA的...
管理资源目录的常见问题
本文介绍了管理资源目录过程中可能会遇到的一些常见问题。开通资源目录的方式有几种？如何选择？开通资源目录时，系统会自动检查当前登录账号的企业实名认证、安全信息（手机号码或电子邮箱）及资源保有情况，然后判断其是否具备开通资源...
DLF+EMR之统一权限最佳实践
业务A数据分析人员 拥有业务A相关的db_a中部分表的部分列的访问权限，如对table1中col1,cole2的访问权限。操作步骤 创建EMR集群，并使用DLF作为元数据。打开 E-MapReduce控制台。创建E-MapReduce集群，输入选项如下：业务场景：选择 新版...
常见问题
由于基因测序数据下机存在批次性，因此在投递分析时也存在明显的批次性，但同步提交大量任务时由于资源需求急速增加将导致任务并发调度性能降低，因此强烈建议客户在上传数据的同时分批提交分析任务，避免大量数据全部上传完成之后再统一...
创建集群
数据分析（OLAP）：将海量数据通过导入或者外表等形式引入到OLAP分析引擎里，例如，ClickHouse、StarRocks，提供高效、实时和灵活的数据分析能力，满足用户画像、人群圈选、BI报表和业务分析等一系列的业务场景。实时数据流（DataFlow）：...
常见问题
常见参数调整案例 修改持久内存型实例的同步模式 过期策略 Redis默认的数据逐出策略是什么？过期Key数据的删除规则 Redis批量删除Key 规格与版本 如何确认Redis实例的小版本是否为最新版 Redis各版本的兼容性 包年包月实例是否可以更改规格...
Lindorm实时入湖建仓分析
DLA Lakehouse实时入湖方案利用数据湖技术，...常见问题 Q：为什么Lindorm中开通数据湖分析后，下拉选择入湖表没有显示已创建的表？A：目前数据湖分析仅支持有Schema的表，即Lindorm通过CQL创建的表。更多信息，请参见 Lindorm CQL操作文档。
功能特性
索引加速 文件分析 云数据库 SelectDB 版支持表函数功能（Table-Value-Function或TVF），可以将S3、HDFS等常见远端存储中的文件数据，映射成云数据库 SelectDB 版中的表，从而对这些文件数据进行分析 文件分析 数据湖分析 Hive数据源 通过...
调度DLA Presto任务
同时执行DLA任务流时产生的中间结果可以被复用，例如用于其他数据分析任务，从而最大化利用DLA的资源。任务调度中一个重要的功能是任务之间的依赖，为演示该功能，本文在DMS中创建两个DLA任务，表、任务之间的关系如下图所示。任务一 从...
DataWorks V3.0
交互式分析：交互式分析（Interactive Analytics）是一种全面兼容PostgreSQL协议，并与大数据生态无缝打通的实时交互式分析产品。交互式分析支持对万亿级数据进行高并发、低延时、多维分析透视和业务探索，可以让您快速对接现有的BI工具。...
使用限制
可用地域 基因分析平台支持的地域如下表所示，用户只能在可用地域内创建工作空间用于基因数据的管理和分析工作。地域 备注 华北2（北京）cn-beijing 华南1（深圳）cn-shenzhen 华东2（上海）cn-shanghai 华东1（杭州）cn-hangzhou 警告 ...
离线同步并发和限流之间的关系
数据集成会尝试保障任务执行并发数符合配置并发数，常见的任务实际执行并发数小于配置并发数的场景有：关系数据库（如MySQL、Polardb、SQLServer、PostgreSQL、Oracle等等）读取，没有配置切分键splitPk（切分列支持整型数字类型，Oracle在...
管理内置数据集
常见问题 Q：加载内置数据集集群需要满足什么条件？A：至少购买24 ACU的存储预留资源，且user_default资源组中至少有16 ACU的计算预留资源。Q：如何判断内置数据集是否加载成功？A：在 作业开发>SQL开发 页面可查看加载进度。当 加载内置...
调优集群性能
INSERT INTO SELECT 短时间内大量数据写入，当后台Build任务堆积时会导致实时数据增多，此时查询如果涉及实时数据的话，数据库需要扫描大量实时数据（因为实时数据没有索引），最终导致CPU使用率增高。Build Build任务会对数据进行构建索引...
- 产品推荐
- 这些文档可能帮助您