应用场景
互联网类应用 Cassandra能够支持大并发低延时的访问需求，具备高可用和弹性扩容能力，适合日志、消息、feed流、订单、账单、网站等各种大数据量的互联网在线应用场景。多活 Cassandra原生支持多DC部署方式，实现更好的可用性和容灾能力。云...
数据集成概述
背景信息 面对各行各业对大数据的应用，数据集成会有很多的诉求，包括能够简单高效的配置大量数据表的同步任务、能够集成多种异构数据源、能够实现对数据源的数据进行轻度预处理、能够实现数据同步任务的调优（例如容错，限速，并发）等。...
未来规划
云计算架构的核心逻辑就是通过虚拟化技术带来池化资源，云原生数据库采用分布式数据库架构，实现大规模扩展，每套数据库系统横跨多台服务器和虚拟机，带来了全新的系统管理挑战。其中最核心的挑战就是如何实现弹性以及高可用，实现按需按量...
概述
数据同步，比如更新cache，同步到搜索引擎、数仓、冷存储等。LindormStreams支持实时获取HBase表的数据变更，您可以基于LindormStreams的这个功能构建自己的数据应用。说明 该功能只支持云数据库HBase增强版、云原生多模数据库Lindorm。
时序引擎应用开发简介
5.连续查询 连续查询应用于大数据查询的场景。通过创建连续查询对新写入的数据预聚合处理，减少实时查询的数据量，从而减少计算量并降低查询延迟。6.预降采样 预降采样应用于较长时间范围的数据查询场景。在数据写入时按照设置的规则将原始...
什么是EMR on ACK
您可以将开源大数据服务部署在阿里云容器服务Kubernetes版（ACK）之上，利用ACK在服务部署和容器应用管理的优势，减少对底层集群资源的运维投入，以便于您可以更加专注大数据任务本身。形态对比 阿里云EMR提供on ECS和on ACK两种方式，以...
产品简介
大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户...
通过Prometheus配置SAE Grafana大盘和报警规则
Serverless 应用引擎 SAE（Serverless App Engine）平台的监控和数据源类型分丰富多样，这些指标都默认集成了阿里云 可观测监控 Prometheus 版（Managed Service for Prometheus），且 可观测监控 Prometheus 版 已集成 可观测可视化 ...
IoT数据自动化同步至云端解决方案
物联网、大数据和云计算作为当前第三次信息化浪潮的代表技术，将在未来形成广泛的影响。物联网专注于物物相连，大数据专注于数据的价值化，云计算则为大数据和物联网提供计算资源等服务支持。大数据是物联网体系的重要组成部分。物联网的...
技术发展趋势
规模爆炸性增长 随着8K、5G、IoT、大数据、AI等系列技术的发展，数据量迎来了爆发式增长。IDC在《Data Age 2025》的报告中预测，从2018年到2025年，全球数据将从33ZB急速增长到175ZB，比2016年产生的数据量增加了十倍。这表明注重数据价值...
与云服务器ECS对比
业务场景 适用轻量级且访问量较低的应用场景：网站搭建 知识效率管理 云端学习环境 电商建设 论坛社区 开发环境配置 可覆盖全业务场景，典型场景如下：通用Web应用 在线游戏 大数据分析 深度学习 产品优势 快速上手 除纯净的操作系统镜像外...
概述
存储格式 数据来源及特点 数据量增大或减少 详细数据量 JSON 大量应用产生JSON类型的数据，冗余数据量大。增大151.7%3.02GB AVRO Hadoop生态格式的数据，数据由大部分遗留系统产生。增大8.3%1.3GB RCFile Hadoop生态格式的数据，数据由大...
应用安全常见问题
危险组件检测中关联到的漏洞均为已被公开的漏洞，这些漏洞可能会被攻击者利用进行入侵（即使当前无法被利用，未来应用代码改动后也存在被利用的风险）。通常情况下，这些漏洞可以被应用安全防御，前提是相关应用的防护模式已经切换到 监控...
概述
列存架构 架构理念 随着云原生技术的不断普及，以Snowflake为代表的新一代云原生数仓以及数据库HTAP架构不断创新，可见在未来一段时间后行列混存HTAP将会成为一个数据库的标配能力，需要在当前数据库列存设计中面向未来的低成本、易用性、...
2022年
v2.8.5.1 Prometheus实例 for 容器服务新增包年包月计费方式 在相同数据指标量情况下，包年包月可以享受更大的价格优惠，帮您更大程度节省支出。更多信息，请参见 包年包月概述。v2.8.5.1 VPC实例新增Node Exporter集成功能 Prometheus实例...
区间检测
配置区间检测任务之后，ARMS会在后台以每24h一次的频率，学习指标历史7天数据的特征，提取指标趋势性、季节性等特征，得到指标未来24h的预测曲线。再根据指标自身的波动情况，也就是误差方差的大小，为未来一天指标的数据做出一个估计区间...
区间检测
配置区间检测任务之后，ARMS会在后台以每24h一次的频率，学习指标历史7天数据的特征，提取指标趋势性、季节性等特征，得到指标未来24h的预测曲线。再根据指标自身的波动情况，也就是误差方差的大小，为未来一天指标的数据做出一个估计区间...
新功能发布记录
2022-02-24 轻应用管理 2022年01月 项目管理 功能名称 功能描述 发布时间 相关文档 轻应用 支持在项目管理页面，单击轻应用项目名称，进入轻应用项目首页，查看轻应用实时数据、设备管理、基础配置、权限管理等信息。2022-01-18 轻应用管理...
新旧版本功能对比
在未来，我们会将夯实基础、丰富场景、提高安全作为 IDaaS 的主要发展目标。新版会优先提供有如下特点的功能：旧版高频使用的功能 对身份安全保障有提升 符合产品长期定义方向 通用身份基础能力 研发支持难度 更多功能正在开发中。无论表格...
MongoDB 5.0新特性概览
随着MongoDB 5.0的发布，MongoDB扩展了通用的应用数据平台，使开发能够更容易地处理时间序列数据，进一步扩展其在物联网、金融分析、物流等方面的应用场景。MongoDB的时间序列集合以高度优化和压缩的格式自动存储时间序列数据，减少了存储...
能力介绍
为了实现这个目标，需要做到如下两点，一是数据结构需要由小二后台统一管控（目前全部由小二后台录入，未来会引入审核机制）；二是应用集成对接之前（比如应用上架的时候）需要声明本应用对哪些数据模型产生什么样的数据操作（如查询、新增...
根据领域对象批量生成相关模型
背景信息 技术建模中结构对象、领域对象和数据对象中的很多字段可能都是相同的，如果所有的模型都从对象到字段逐个手动创建，会带来较大的维护成本。系统支持根据领域对象直接批量创建应用服务、结构对象和数据模型，同时会自动创建模型间...
数据服务系统配置
应用内存：缓存数据量较大时不建议使用，占用内存会影响系统的响应速率。适用于个别API需要开启缓存且数据量很少的场景 说明 数据缓存时间将统一获取Dataphin应用部署时设置的内存数据缓存时间，创建API时定义的缓存时间将不生效。指定...
通过Prometheus监控获取ARMS应用监控数据
阿里云 可观测监控 Prometheus 版 默认集成了ARMS应用监控数据源，您可以直接在 可观测监控 Prometheus 版 下获取应用监控相关数据、查看应用监控预置大盘，并根据需求进行二次开发。前提条件 已为应用安装探针，具体操作，请参见 应用监控...
准备工作概述
OpenTelemetry 版 通过Jaeger上报Go应用数据 通过SkyWalking上报Go应用数据 通过Zipkin上报Go应用数据 Python应用 通过OpenTelemetry上报Python应用数据 通过SkyWalking上报Python应用数据 通过Jaeger上报Python应用数据 Node.js应用 通过...
受众与核心能力
总之，使用DataWorks，您不仅可以进行海量数据的离线加工分析，还能完成数据的汇聚集成、开发、生产调度与运维、离线与实时分析、数据质量治理与资产管理、安全审计、数据共享与服务、机器学习、应用搭建等覆盖大数据全生命周期的最佳实践...
什么是数据库代理
PolarDB 数据库代理是位于数据库和应用程序之间的网络代理服务，用于代理应用程序访问数据库时的所有请求，具有高可用、高性能、可运维、简单易用等特点，支持自动读写分离、负载均衡、一致性级别、连接池、过载保护等高级功能。...
开始监控除Java之外的应用
通过SkyWalking上报Python应用数据 通过Jaeger上报Python应用数据 Node.js应用 通过OpenTelemetry上报Node.js应用数据 通过SkyWalking上报Node.js应用数据 接入Node.js应用.NET应用 通过OpenTelemetry上报.NET应用数据 通过Jaeger上报.NET...
SDK简介
通过Jaeger上报Go应用数据 通过SkyWalking上报Go应用数据 通过Zipkin上报Go应用数据 Python应用 通过OpenTelemetry上报Python应用数据 通过SkyWalking上报Python应用数据 通过Jaeger上报Python应用数据 Node.js应用 通过OpenTelemetry上报...
创建可视化应用
本文档为您介绍创建DataV可视化应用的方法。背景信息 示例中使用的数据源是本地API文件，因此您不需要在DataV中添加数据源，直接在可视化项目的组件中调用API即可。如果您使用的是其他数据源，在...应用创建成功后会跳转到应用编辑器页面。
架构
订阅者按照数据在发布者上被提交的顺序应用数据，这样任意单一订阅中的发布的事务一致性才能得到保证。逻辑复制被构建在一种类似于物理流复制的架构上。它由“walsender”和“apply”进程实现。walsender 进程开始对 WAL 的逻辑解码并且...
Spark应用性能诊断
大规模应用负载均衡：Spark应用在高并发负载运行时，可能会出现性能问题，例如：数据倾斜、长尾任务、负载不均衡。对Spark应用进行性能诊断，可以快速定位问题，便于您优化Spark应用。使用限制 仅支持诊断14天以内且执行成功的Spark应用。...
快速上手可观测链路 OpenTelemetry 版
OpenTelemetry 版 通过Jaeger上报Go应用数据 通过SkyWalking上报Go应用数据 通过Zipkin上报Go应用数据 Python应用 通过OpenTelemetry上报Python应用数据 通过SkyWalking上报Python应用数据 通过Jaeger上报Python应用数据 Node.js应用 通过...
快速入门
城市三维场景构建器组件提升了组件的易用性、渲染视效、支持更多精准时空数据、扩大城市基础数据资产库，真正降低“数字孪生城市”的构建门槛，使得“数字孪生城市”成为一项技术普惠。本文为您演示如何在DataV产品内使用城市三维场景构建...
阈值检测
实现原理 当您单击 填入P4建议阈值 后，ARMS就会自动拉取每个应用、每个接口对应指标的历史3天数据，然后通过N-sigma算法计算每个指标历史3天的均值和方差。具体来说，假设您的业务没有发生明显变化，因此可以假设指标服从一个正态分布，...
创建DataV大屏（模板篇）
本文主要介绍如何使用宜搭系统，通过创建空白应用后创建模板大屏，并配置应用中模板大屏的数据源和修改大屏标题的功能。背景信息 宜搭数字化大屏视频功能讲解，请参见如下视频：登录宜搭平台 操作步骤：登录 宜搭平台，在宜搭官网首页右上...
阈值检测
实现原理 当您单击 填入P4建议阈值 后，ARMS就会自动拉取每个应用、每个接口对应指标的历史3天数据，然后通过N-sigma算法计算每个指标历史3天的均值和方差。具体来说，假设您的业务没有发生明显变化，因此可以假设指标服从一个正态分布，...
创建DataV大屏（空白画布篇）
本文主要介绍如何使用宜搭系统，通过创建空白应用后创建空白大屏，并配置应用中模板大屏的数据源和修改大屏标题的功能。背景信息 宜搭数字化大屏视频功能讲解，请参见如下视频：登录宜搭平台 操作步骤：登录 宜搭平台，在宜搭官网首页右上...
典型使用场景
传统方案数据生产者需要双写数据库和消息队列，但是这样一方面增加了应用的复杂度，同时要保证一致性，又会牺牲应用的可用性和效率，因为数据库和消息队列任务一个出问题都会影响应用系统。应用可以将消息队列的消息投递解耦，交由...
什么是应用监控
智能洞察 对于应用服务响应时间突增、错误率突增等常见的问题，ARMS提供了智能洞察能力，您无需做任何设置，智能洞察将会基于应用历史数据并结合智能算法完成巡检，给出具体的根因分析和建议，同时支持订阅告警，帮助您一键触达问题根因。...
- 产品推荐
- 这些文档可能帮助您