发展历程
2018年 MaxCompute的多个客户案例荣获“2017大数据优秀产品和应用解决方案案例”奖。基于公共云的BigBench在100 TB规模上，MaxCompute的性能指标较2017年10月提升了一倍，达到18176.71 QPM（Queries Per Minute）。此外，在超小型10 TB规模...
数据标准
数据标准落标说明 数据标准落标的意义在于从源头进行数据的标准化生产，加速数据的融合与统一的效率，节省大量数据应用和处理的成本。完成以下操作实现数据标准落标：您可以在 字段编辑器 页面，编辑 中文名，输入拼音首字母即可快速检索出...
应用场景
云数据库MongoDB版支持单节点、副本集和分片集群三种部署架构，具备安全审计、时间点备份等多项企业能力。在互联网、物联网、游戏、金融等...大数据应用：使用云数据库MongoDB作为大数据的云存储系统，随时进行数据提取分析，掌握行业动态。
应用场景
互联网类应用 Cassandra能够支持大并发低延时的访问需求，具备高可用和弹性扩容能力，适合日志、消息、feed流、订单、账单、网站等各种大数据量的互联网在线应用场景。多活 Cassandra原生支持多DC部署方式，实现更好的可用性和容灾能力。云...
视频个性化推荐（协同过滤）
注意事项 本案例提供的数据仅作为阿里云大数据开发治理平台DataWorks数据应用体验使用，所有数据均为模拟数据。本案例可能会产生少量DataWorks调度费用、MaxCompute计算与存储费用和PAI计算费用。收费详情请参见 DataWorks计费逻辑、...
概述
对接实时计算，用于业务数据驱动的智能运营、IoT、监控大屏等数据应用。数据同步，比如更新cache，同步到搜索引擎、数仓、冷存储等。LindormStreams支持实时获取HBase表的数据变更，您可以基于LindormStreams的这个功能构建自己的数据应用...
Linux系统CPU使用率和负载高排查方法
案例三：CPU使用率高达100%问题排查 问题现象 使用轻量应用服务器的过程中，如果遇到CPU使用率高达100%等异常情况，且无法通过top、htop等命令查询到消耗CPU资源的具体进程。问题原因 该问题可能是病毒导致。解决方案 查看轻量应用服务器 ...
典型使用场景
HBase具有高吞吐，低延迟，schemaFree，水平扩展等能力，被很多大数据类应用选择。而接合LindormStreams+Blink/Spark，可以构建出一套完整的实时数据系统：应用解耦-实时同步到消息队列 通常业务发生之后，应用系统产生的数据需要被其他...
调用链分析
ARMS应用监控的调用链分析功能是基于已存储的全量链路明细数据，自由组合筛选条件与聚合维度进行实时分析，可以满足不同场景的自定义诊断需求。前提条件 重要 ARMS应用监控面向已开通新版计费的用户提供全新的监控详情页面，新版计费详情，...
什么是DataWorks
从2009年起，DataWorks不断沉淀阿里巴巴大数据建设方法论，支撑数据中台建设，同时与数万名政务、央国企、金融、零售、互联网、能源、制造、工业等行业的客户携手，不断提升数据应用效率，助力产业数字化升级。产品架构 DataWorks十多年...
查看集群日报与分析
存在分区热点的表详细信息 表分区均衡度倒排Top 表分区平均数据量倒排Top 表数据量Top 表数据量日环比Top 表分区数Top 表分区日环比Top 表读请求数Top 表读请求数日环比Top 表写请求数Top 表写请求数日环比Top Hive存储资源 详细分析 该...
概述
Flink（VVR）完全兼容开源Flink，相关内容请参见如下文档：DataStream API Table API&SQL Python API 使用场景 Flink广泛应用于大数据实时化的场景，本文从技术领域和企业应用场景进行介绍。技术领域 从技术领域的角度，Flink主要用于以下...
时序引擎应用开发简介
使用OpenTSDB或时间序列数据库TSDB的应用开发步骤 Lindorm时序引擎兼容相关接口，对于已有使用OpenTSDB或者时间序列数据库TSDB的应用程序，您可以按照以下步骤进行应用迁移：应用适配 修改应用程序中的连接字符串，连接的目标从原有的...
客户案例
打造离线实时一体化数据中台，构建统一、完整的大数据应用链路，服务内部几大核心业务。全链路数据治理提高数据可用性，让数据在中台进行自由流动，保证数据准确、准时、一致，成本削减1亿元。提高业务迭代效率，数据更新频率由1天变成10...
什么是MaxCompute
MaxCompute适用于100 GB以上规模的存储及计算需求，最大可达EB级别，并且MaxCompute已经在阿里巴巴集团内部得到大规模应用。MaxCompute适用于大型互联网企业的数据仓库和BI分析、网站的日志分析、电子商务网站的交易分析、用户特征和兴趣...
产品简介
大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户...
什么是EMR on ACK
您可以将开源大数据服务部署在阿里云容器服务Kubernetes版（ACK）之上，利用ACK在服务部署和容器应用管理的优势，减少对底层集群资源的运维投入，以便于您可以更加专注大数据任务本身。形态对比 阿里云EMR提供on ECS和on ACK两种方式，以...
ETL工作流快速体验
案例提供的数据仅用于阿里云大数据开发治理平台DataWorks数据应用体验。仅 空间管理员 角色可导入ETL模板至目标工作空间。如需给账号授予空间管理员角色，请参见 空间级模块权限管控。导入ETL工作流模板 您可以将DataWorks ETL工作流模板...
产品介绍
该产品在阿里巴巴内部及公共云上均有大量的成功案例，是阿里云历史上增速最快的数据库产品，广泛应用于金融、政府便民工程、能源、运营商、新零售、教育等行业。PolarDB PostgreSQL版（兼容Oracle）一直是阿里巴巴关系型数据库技术发展的...
新功能发布记录
适用用户：移动端可视化应用需求，需要随时在手机查看数据应用的用户。发布功能点 移动端编辑器：适配移动端应用特点，特别设计的移动端可视化应用编辑器。PC页面一键转移动端：原有的PC端页面，支持一键转化为移动端页面，可继续在移动端...
2023年
按量付费闲时版 2023-07-17 新增PyODPS DataFrame的代码运行环境 新说明 使用PyODPS DataFrame编写数据应用时，同一个脚本文件中的代码会在不同位置执行，可能导致一些无法预期的问题，本文为您介绍当出现相关问题时，如何确定代码的执行...
确定需求
A公司的电商业务板块分为招商、供应链、营销、服务四个板块，每个板块的需求和数据应用都不同。在您构建数仓之前，需要明确构建数仓服务的业务板块类型、每个板块具体满足什么业务需求。此外，您还需要进一步了解各业务板块中已有的业务...
开发运维建议
如果应用经常访问较大结果集的数据（例如100条），建议将数据聚合成1条，例如经常要按ID访问此ID的数据，建议定期按ID聚合数据，查询时返回的记录数越少响应越快。管理 建议开启SQL洞察和审计，该功能支持查询并导出SQL语句执行历史及其...
通过函数计算节点实现GitHub实时数据分析与结果发送
步骤四：配置案例 在 DataWorks控制台 左侧导航栏选择 大数据体验>ETL工作流模板，单击 Github十大热门编程语言 模板，单击 载入模板，配置模板参数。参数 说明 模板名称 显示当前模板名称，即“Github十大热门编程语言”。工作空间 选择 ...
解密ADB高效基因检测系统
实验二结果 数据集 top1 top2 top3 top4 top5 top10 top20 病毒 0.846 0.954 0.960 0.976 0.98 0.982 0.99 21个细菌 0.884 0.961 0.968 0.973 0.973 0.989 1.0 实验三 目的：对比在ADB数据库和Blast数据库中的基因检测速度。结果：为得到...
采集数据
本教程提供数据仅作为阿里云大数据开发治理平台DataWorks数据应用实操使用，所有数据均为人工Mock数据，并且只支持在数据集成模块读取数据。章节目标 将MySQL存储的用户基本信息及OSS存储的网站访问日志，通过数据集成服务将数据同步至...
过滤待迁移数据
该功能可应用于数据的定期迁移、拆分数据表等多种应用场景。功能限制 仅支持过滤当前表的字段，不支持跨表过滤。如有需要，您可以在多个表中分别填写过滤条件。操作步骤 说明 新版控制台的操作步骤，请参见 设置过滤条件。配置数据迁移任务...
基础监控
应用部署到 Serverless 应用引擎 SAE（Serverless App Engine）后，SAE 会对应用所运行设备的请求次数、内存使用率等信息进行数据采集与分析，并以图表的方式展示，方便您实时、直观地了解应用版本所运行设备的状态。本文介绍控制台查看...
通过SQL条件过滤任务数据
该功能可应用于数据的定期同步或迁移、拆分数据表等多种应用场景。前提条件 说明 新版控制台的操作步骤，请参见 通过SQL条件过滤任务数据。已启动任务配置，并处于 配置任务对象及高级配置 环节。关于如何启动任务配置，请参见 配置同步...
分区表简介
分区表对于许多不同类型的应用程序很有用，尤其是管理大量数据的应用程序，如数据库。OLTP数据库通常受益于可管理性和可用性的改进，而OLAP数据仓库则受益于性能和可管理性。使用场景 当表非常大的时候（例如，表空间大于数据库服务器的...
分区表简介
分区表对于许多不同类型的应用程序很有用，尤其是管理大量数据的应用程序，如数据库。OLTP数据库通常受益于可管理性和可用性的改进，而OLAP数据仓库则受益于性能和可管理性。使用场景 当表非常大的时候（例如，表空间大于数据库服务器的...
分区表简介
分区表对于许多不同类型的应用程序很有用，尤其是管理大量数据的应用程序，如数据库。OLTP数据库通常受益于可管理性和可用性的改进，而OLAP数据仓库则受益于性能和可管理性。使用场景 当表非常大的时候（例如，表空间大于数据库服务器的...
物联网数据处理分析架构参考
本文以一个企业案例介绍如何基于阿里云物联网平台的数据服务，搭建企业物联网大数据应用架构。背景信息 随着物联网应用场景的深入，企业开始挖掘设备上传的数据，用于客户端应用扩展和服务营收，用于数字化运营、风控，帮助企业高效治理，...
如何创建自定义PPT应用
本教程主要以数据集为数据源，用分析模式来实现可交互的可视化应用。视频链接 DataV小课堂直播视频：数据源管理-自定义PPT应用。可视化应用直播案例功能说明 在可视化应用中，需要通过键盘的↑和↓方向键来控制 柱状图 的数据钻取、地图...
什么是Web应用防火墙
简称WAF）对网站或者App的业务流量进行恶意特征识别及防护，在对流量进行清洗和过滤后，将正常、安全的流量返回给服务器，避免网站服务器被恶意入侵导致性能异常等问题，从而保障网站的业务安全和数据安全。功能介绍 功能类别 功能说明 ...
什么是Web应用防火墙
产品优势 产品优势 优势说明 10年以上网络安全经验 建立在阿里巴巴集团10年以上的网络安全经验上，提供与淘宝、天猫、支付宝等成功应用案例同样的安全体验。由专业的安全团队为您提供服务。抵御已知的OWASP漏洞并不断修复披露漏洞。防御CC...
提升I/O吞吐量和IOPS
云原生数据仓库AnalyticDB PostgreSQL版 实例的I/O吞吐量和IOPS是影响其性能的关键因素。当I/O吞吐量或IOPS达到实例当前配置的最大值时，AnalyticDB PostgreSQL版 实例可能会出现性能瓶颈，表现为数据库读写操作的性能下降，应用响应延迟...
与云服务器ECS对比
业务场景 适用轻量级且访问量较低的应用场景：网站搭建 知识效率管理 云端学习环境 电商建设 论坛社区 开发环境配置 可覆盖全业务场景，典型场景如下：通用Web应用 在线游戏 大数据分析 深度学习 产品优势 快速上手 除纯净的操作系统镜像外...
调用链采样配置最佳实践
1、2、3、4作为整个应用拓扑中的下游应用，其被采样的链路数据绝大部分都由其上游决定，所以从成本控制的角度考虑，通过调整应用A和B的采样率可较为明显的控制整体的可观测数据采集量。另外从链路价值角度来看，绝大部分调用链都是重复且...
解读实例诊断报告
实时Top Key统计 离线全量Key分析 TOP 10 节点慢请求 展示发生慢请求次数排名前十的数据节点，并展示对应的慢请求信息，统计来源如下：系统审计日志中保存的数据节点慢日志（仅保留4天）。数据节点本身记录的慢日志（仅保存最近的1024条）...
- 产品推荐
- 这些文档可能帮助您