发展历程
2018年 MaxCompute的多个客户案例荣获“2017大数据优秀产品和应用解决方案案例”奖。基于公共云的BigBench在100 TB规模上，MaxCompute的性能指标较2017年10月提升了一倍，达到18176.71 QPM（Queries Per Minute）。此外，在超小型10 TB规模...
数据标准
数据标准落标说明 数据标准落标的意义在于从源头进行数据的标准化生产，加速数据的融合与统一的效率，节省大量数据应用和处理的成本。完成以下操作实现数据标准落标：您可以在 字段编辑器 页面，编辑 中文名，输入拼音首字母即可快速检索出...
应用场景
云数据库MongoDB版支持单节点、副本集和分片集群三种部署架构，具备安全审计、时间点备份等多项企业能力。在互联网、物联网、游戏、金融等...大数据应用：使用云数据库MongoDB作为大数据的云存储系统，随时进行数据提取分析，掌握行业动态。
视频个性化推荐（协同过滤）
注意事项 本案例提供的数据仅作为阿里云大数据开发治理平台DataWorks数据应用体验使用，所有数据均为模拟数据。本案例可能会产生少量DataWorks调度费用、MaxCompute计算与存储费用和PAI计算费用。收费详情请参见 DataWorks计费逻辑、...
概述
对接实时计算，用于业务数据驱动的智能运营、IoT、监控大屏等数据应用。数据同步，比如更新cache，同步到搜索引擎、数仓、冷存储等。LindormStreams支持实时获取HBase表的数据变更，您可以基于LindormStreams的这个功能构建自己的数据应用...
Linux系统CPU使用率和负载高排查方法
案例三：CPU使用率高达100%问题排查 问题现象 使用轻量应用服务器的过程中，如果遇到CPU使用率高达100%等异常情况，且无法通过top、htop等命令查询到消耗CPU资源的具体进程。问题原因 该问题可能是病毒导致。解决方案 查看轻量应用服务器 ...
什么是DataWorks
从2009年起，DataWorks不断沉淀阿里巴巴大数据建设方法论，支撑数据中台建设，同时与数万名政务、央国企、金融、零售、互联网、能源、制造、工业等行业的客户携手，不断提升数据应用效率，助力产业数字化升级。产品架构 DataWorks十多年...
调用链分析
ARMS应用监控的调用链分析功能是基于已存储的全量链路明细数据，自由组合筛选条件与聚合维度进行实时分析，可以满足不同场景的自定义诊断需求。前提条件 重要 ARMS应用监控面向已开通新版计费的用户提供全新的监控详情页面，新版计费详情，...
典型使用场景
HBase具有高吞吐，低延迟，schemaFree，水平扩展等能力，被很多大数据类应用选择。而接合LindormStreams+Blink/Spark，可以构建出一套完整的实时数据系统：应用解耦-实时同步到消息队列 通常业务发生之后，应用系统产生的数据需要被其他...
查看集群日报与分析
存在分区热点的表详细信息 表分区均衡度倒排Top 表分区平均数据量倒排Top 表数据量Top 表数据量日环比Top 表分区数Top 表分区日环比Top 表读请求数Top 表读请求数日环比Top 表写请求数Top 表写请求数日环比Top Hive存储资源 详细分析 该...
概述
Flink（VVR）完全兼容开源Flink，相关内容请参见如下文档：DataStream API Table API&SQL Python API 使用场景 Flink广泛应用于大数据实时化的场景，本文从技术领域和企业应用场景进行介绍。技术领域 从技术领域的角度，Flink主要用于以下...
客户案例
打造离线实时一体化数据中台，构建统一、完整的大数据应用链路，服务内部几大核心业务。全链路数据治理提高数据可用性，让数据在中台进行自由流动，保证数据准确、准时、一致，成本削减1亿元。提高业务迭代效率，数据更新频率由1天变成10...
时序引擎应用开发简介
使用OpenTSDB或时间序列数据库TSDB的应用开发步骤 Lindorm时序引擎兼容相关接口，对于已有使用OpenTSDB或者时间序列数据库TSDB的应用程序，您可以按照以下步骤进行应用迁移：应用适配 修改应用程序中的连接字符串，连接的目标从原有的...
什么是MaxCompute
MaxCompute适用于100 GB以上规模的存储及计算需求，最大可达EB级别，并且MaxCompute已经在阿里巴巴集团内部得到大规模应用。MaxCompute适用于大型互联网企业的数据仓库和BI分析、网站的日志分析、电子商务网站的交易分析、用户特征和兴趣...
产品简介
大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户...
基本介绍
云原生多模数据库Lindorm宽表引擎 提供的、完全兼容HBase的云上托管数据库，从2011年开始云数据库HBase增强版正式承载阿里内部业务的海量数据实时存储需求，支撑服务了淘宝、支付宝、菜鸟、优酷、高德等业务中的大量核心应用，历经双十一、...
什么是EMR on ACK
您可以将开源大数据服务部署在阿里云容器服务Kubernetes版（ACK）之上，利用ACK在服务部署和容器应用管理的优势，减少对底层集群资源的运维投入，以便于您可以更加专注大数据任务本身。形态对比 阿里云EMR提供on ECS和on ACK两种方式，以...
电子合同：深圳法大大网络科技有限公司
PolarDB 采用存储和计算分离的架构，提供分钟级的配置升降级、秒级的故障恢复、全局数据一致性和免费的数据备份容灾服务，既融合了商业数据库稳定可靠、高性能、可扩展的特征，又具有开源云数据库简单开放、自我迭代的优势。本文介绍深圳法...
ETL工作流快速体验
案例提供的数据仅用于阿里云大数据开发治理平台DataWorks数据应用体验。仅 空间管理员 角色可导入ETL模板至目标工作空间。如需给账号授予空间管理员角色，请参见 空间级模块权限管控。导入ETL工作流模板 您可以将DataWorks ETL工作流模板...
产品介绍
PolarDB PostgreSQL版（兼容Oracle）高度兼容Oracle语法，包括Oracle数据库用户常用的内置数据类型、内置存储过程语法、常用系统视图，重要特性DBLINK、分区表和分区索引等特性，配合ADAM智能评估工具助力企业智能存量Oracle数据库业务迁移...
新功能发布记录
适用用户：移动端可视化应用需求，需要随时在手机查看数据应用的用户。发布功能点 移动端编辑器：适配移动端应用特点，特别设计的移动端可视化应用编辑器。PC页面一键转移动端：原有的PC端页面，支持一键转化为移动端页面，可继续在移动端...
2023年
按量付费闲时版 2023-07-17 新增PyODPS DataFrame的代码运行环境 新说明 使用PyODPS DataFrame编写数据应用时，同一个脚本文件中的代码会在不同位置执行，可能导致一些无法预期的问题，本文为您介绍当出现相关问题时，如何确定代码的执行...
开发运维建议
如果应用经常访问较大结果集的数据（例如100条），建议将数据聚合成1条，例如经常要按ID访问此ID的数据，建议定期按ID聚合数据，查询时返回的记录数越少响应越快。管理 建议开启SQL洞察和审计，该功能支持查询并导出SQL语句执行历史及其...
确定需求
A公司的电商业务板块分为招商、供应链、营销、服务四个板块，每个板块的需求和数据应用都不同。在您构建数仓之前，需要明确构建数仓服务的业务板块类型、每个板块具体满足什么业务需求。此外，您还需要进一步了解各业务板块中已有的业务...
通过函数计算节点实现GitHub实时数据分析与结果发送
案例说明 DataWorks为您提供了一个公共的MySQL数据源，存储来自Github的公开实时数据，本案例将此数据进行同步分析，最终将分析结果通过邮件发送至指定邮箱。主要业务过程如下：通过DataWorks的数据集成功能，将MySQL上的Github实时数据...
解密ADB高效基因检测系统
实验二结果 数据集 top1 top2 top3 top4 top5 top10 top20 病毒 0.846 0.954 0.960 0.976 0.98 0.982 0.99 21个细菌 0.884 0.961 0.968 0.973 0.973 0.989 1.0 实验三 目的：对比在ADB数据库和Blast数据库中的基因检测速度。结果：为得到...
过滤待迁移数据
该功能可应用于数据的定期迁移、拆分数据表等多种应用场景。功能限制 仅支持过滤当前表的字段，不支持跨表过滤。如有需要，您可以在多个表中分别填写过滤条件。操作步骤 说明 新版控制台的操作步骤，请参见 设置过滤条件。配置数据迁移任务...
通过SQL条件过滤任务数据
该功能可应用于数据的定期同步或迁移、拆分数据表等多种应用场景。前提条件 说明 新版控制台的操作步骤，请参见 通过SQL条件过滤任务数据。已启动任务配置，并处于 配置任务对象及高级配置 环节。关于如何启动任务配置，请参见 配置同步...
基础监控
应用部署到 Serverless 应用引擎 SAE（Serverless App Engine）后，SAE 会对应用所运行设备的请求次数、内存使用率等信息进行数据采集与分析，并以图表的方式展示，方便您实时、直观地了解应用版本所运行设备的状态。本文介绍控制台查看...
分区表简介
分区表对于许多不同类型的应用程序很有用，尤其是管理大量数据的应用程序，如数据库。OLTP数据库通常受益于可管理性和可用性的改进，而OLAP数据仓库则受益于性能和可管理性。使用场景 当表非常大的时候（例如，表空间大于数据库服务器的...
分区表简介
分区表对于许多不同类型的应用程序很有用，尤其是管理大量数据的应用程序，如数据库。OLTP数据库通常受益于可管理性和可用性的改进，而OLAP数据仓库则受益于性能和可管理性。使用场景 当表非常大的时候（例如，表空间大于数据库服务器的...
分区表简介
分区表对于许多不同类型的应用程序很有用，尤其是管理大量数据的应用程序，如数据库。OLTP数据库通常受益于可管理性和可用性的改进，而OLAP数据仓库则受益于性能和可管理性。使用场景 当表非常大的时候（例如，表空间大于数据库服务器的...
采集数据
本教程提供数据仅作为阿里云大数据开发治理平台DataWorks数据应用实操使用，所有数据均为人工Mock数据，并且只支持在数据集成模块读取数据。章节目标 将MySQL存储的用户基本信息及OSS存储的网站访问日志，通过数据集成服务将数据同步至...
物联网数据处理分析架构参考
本文以一个企业案例介绍如何基于阿里云物联网平台的数据服务，搭建企业物联网大数据应用架构。背景信息 随着物联网应用场景的深入，企业开始挖掘设备上传的数据，用于客户端应用扩展和服务营收，用于数字化运营、风控，帮助企业高效治理，...
如何创建自定义PPT应用
本教程主要以数据集为数据源，用分析模式来实现可交互的可视化应用。视频链接 DataV小课堂直播视频：数据源管理-自定义PPT应用。可视化应用直播案例功能说明 在可视化应用中，需要通过键盘的↑和↓方向键来控制 柱状图 的数据钻取、地图...
什么是Web应用防火墙
简称WAF）对网站或者App的业务流量进行恶意特征识别及防护，在对流量进行清洗和过滤后，将正常、安全的流量返回给服务器，避免网站服务器被恶意入侵导致性能异常等问题，从而保障网站的业务安全和数据安全。功能介绍 功能类别 功能说明 ...
什么是Web应用防火墙
产品优势 产品优势 优势说明 10年以上网络安全经验 建立在阿里巴巴集团10年以上的网络安全经验上，提供与淘宝、天猫、支付宝等成功应用案例同样的安全体验。由专业的安全团队为您提供服务。抵御已知的OWASP漏洞并不断修复披露漏洞。防御CC...
提升I/O吞吐量和IOPS
云原生数据仓库AnalyticDB PostgreSQL版 实例的I/O吞吐量和IOPS是影响其性能的关键因素。当I/O吞吐量或IOPS达到实例当前配置的最大值时，AnalyticDB PostgreSQL版 实例可能会出现性能瓶颈，表现为数据库读写操作的性能下降，应用响应延迟...
解读实例诊断报告
实时Top Key统计 离线全量Key分析 TOP 10 节点慢请求 展示发生慢请求次数排名前十的数据节点，并展示对应的慢请求信息，统计来源如下：系统审计日志中保存的数据节点慢日志（仅保留4天）。数据节点本身记录的慢日志（仅保存最近的1024条）...
调用链采样配置最佳实践
ARMS支持应用级别设置固定概率采样策略，用户可以根据自身应用对应的业务逻辑，调整入口应用的调用链采样率，典型的入口应用有网关类应用、代理类应用、核心上游应用等。您可以在ARMS控制台指定应用下 应用配置>自定义配置 页面的 采样设置...
- 产品推荐
- 这些文档可能帮助您