基于SLS+OSS+DLA构建海量、低成本日志分析方案

方案介绍 对于数据分析人员、开发人员或者运维人员而言,日志数据对分析和诊断问题以及了解系统活动等有着非常重要的作用,日志都是其工作过程必不可缺的数据来源。为了节约成本,通常情况下日志会被设定一定的保存时间,此类日志称之为...

DataWorks数据服务对接DataV最佳实践

DataV通过与DataWorks数据服务的对接,通过交互式分析Hologres连接DataWorks数据服务开发并生成API,快速在DataV调用API并展现MaxCompute的数据分析结果。数据服务对接DataV产生背景 MaxCompute是阿里巴巴集团自主研究的快速、完全托管的...

DMS数据管理预案助力业务大促

开启数据水印功能 您可以在DMS开启 防泄露数字水印 功能,系统将在整个控制台中同时提供水印,保障您的数据信息安全,防止截图等数据泄露事件。具体操作,请参见 防泄露数字水印。敏感数据管控 有效识别敏感数据的分布,进行细粒度权限...

查看与减少数据备份

本文介绍如何在DBS查看备份数据大小,同时提供减少备份的方法。查看备份大小 备份大小=全量数据备份的大小+增量数据备份的大小 登录 DBS控制。单击左侧导航栏的 备份计划,然后在上方选择目标地域。单击目标备份计划名称,进入 备份...

什么是MaxCompute

MaxCompute是适用于数据分析场景的企业级SaaS(Software as a Service)模式云数据仓库,以Serverless架构提供快速、全托管的在线数据仓库服务,消除了传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您可以经济并高效...

功能特性

安全性 OceanBase 数据库在调研了大量企业对于数据软件的安全需求,并参考了各种安全标准之后,实现了企业需要的绝部分安全功能,支持完备的权限与角色体系,支持 SSL、数据透明加密、审计、Label Security、IP 白名单等功能,并通过了...

Github实时数据同步与分析

本文以使用DataWorks实时同步公共数据至Hologres,并通过Hologres进行实时数据分析为例,为您示例DataWorks的数据同步能力与Hologres的实时分析能力。本教程以申请免费资源为例为您示例详细操作步骤,您也可以使用付费资源,操作类似。教程...

规格及选型

案例二:互联网SaaS用户 用户为互联网SaaS客户,需要建立数据中台,涉及多数据源包括RDS、Flink、OSS等,期待在平台上完成数据的ETL流程,实现多源处理以及分析侧不同场景的混合负载支持,需要高稳定性保证,同时平台对接数据应用支持报表...

数据湖集群

E-MapReduce(简称EMR)新版控制提供了数据湖集群,一个更灵活、可靠,以及高效的大数据计算集群。同时,您可以基于该集群轻松构建一个可扩展的数据管道。本文为您介绍数据湖集群支持的特性,以及与旧版Hadoop集群之间的差异。数据湖集群...

BigQuery数据迁移至MaxCompute

本文为您介绍如何通过公网环境将谷歌云GCP(Google Cloud Platform)的BigQuery数据集迁移至阿里云MaxCompute。前提条件 类别 平台 要求 参考文档 环境及数据 谷歌云GCP 已开通谷歌BigQuery服务,并准备好环境及待迁移的数据集。已开通谷歌...

计费逻辑说明

DataWorks计费体系由 软件费用 与 资源费用 两部分组成,计费体系各计费项的计费模式分为 包年包月 与 按量付费 两种计费形式。本文为您介绍DataWorks的计费要点和各功能模块的软件费用详情。注意事项 不同规格、不同云环境(例如,公共...

基本概念

数据资产:数据资源平台存在大量的数据表、标签、API等各类数据资产,数据管理者通过数据汇聚、数据治理、数据分析后,需要对整个平台数据进行统一管控,了解平台的核心数据资产,提供对应的数据资产管理规范。统一服务 应用:是调用API...

行业趋势与背景

行业趋势 数据库系统至关重要 数据库与操作系统、中间件并称为系统软件的三驾马车,是企业IT系统不可或缺的组件,也是互联网应用级企业信息管理系统存储数据和管理数据的核心平台。数据库系统是一切应用软件数据处理及交换核心,是所有...

什么是EMR Serverless StarRocks

StarRocks兼容MySQL协议语法,可以使用现有的各种客户端工具、BI软件访问StarRocks,对StarRocks数据进行拖拽式分析。流批一体 StarRocks支持实时和批量两种数据导入方式。StarRocks支持的数据源有Kafka、HDFS和本地文件。StarRocks...

使用SDK示例代码消费订阅数据

完成数据订阅通道的配置后,您可以使用DTS提供的SDK示例代码来订阅数据变更信息,本文介绍该示例代码的使用说明。操作步骤 重要 若数据源是PolarDB-X 1.0或DMS LogicDB,消费订阅数据的操作步骤请参见 使用SDK示例代码消费PolarDB-X 1.0...

使用SDK示例代码消费订阅数据

在完成数据订阅通道的配置(创建好订阅任务和消费组)后,您可以自行编写SDK示例代码或使用DTS提供的SDK示例代码来订阅数据变更信息,本文介绍示例代码的使用方法。操作步骤 重要 如果数据源是PolarDB-X 1.0或DMS LogicDB,消费订阅数据的...

高效数据治理实施指南

背景信息 在多人协作的数据团队数据治理是重要且繁琐的工作,在解决“如何制定客观的数据治理目标”、“如何高效推动团队达成治理目标”的过程,通常包含以下挑战:问题难定位:传统数据治理方式难以快速、完整、精准地定位潜在问题...

使用SDK示例代码消费PolarDB-X 1.0订阅数据

在IntelliJ IDEA软件中打开目标项目。打开IntelliJ IDEA软件,然后单击 Open or Import。在弹出的对话框中,选择SDK示例代码解压的目录,依次展开文件夹,双击项目对象模型文件:pom.xml。在弹出对话框中,选择 Open as Projec。在IntelliJ...

使用SDK示例代码消费PolarDB-X 1.0订阅数据

在IntelliJ IDEA软件中打开目标项目。打开IntelliJ IDEA软件,然后单击 Open or Import。在弹出的对话框中,选择SDK示例代码解压的目录,依次展开文件夹,双击项目对象模型文件:pom.xml。在弹出对话框中,选择 Open as Projec。在IntelliJ...

使用限制

您在使用E-MapReduce(简称EMR)过程,某些非产品预期的操作可能会导致集群的不稳定甚至集群的不可用,为了避免这种问题,请您认真阅读本文。本文为您介绍了EMR的一些使用限制。重要 在使用EMR时,所有操作都需要在EMR控制上执行,通常...

概述

优势 云原生数据仓库AnalyticDB PostgreSQL版 向量数据库通过自研向量引擎FastANN提供的向量分析能力目前已经在诸多业务中得到了广泛应用,包括阿里巴巴数据中台,阿里巴巴电商新零售业务,阿里云城市大脑,通义千问模型搭建的问答服务等...

前言

本文档将向您介绍如何通过MongoDB管理控制管理MongoDB实例,帮助您深入了解MongoDB的特性和功能。MongoDB是一款强大、灵活,且易于扩展的非关系型数据库。它能扩展出非常多的功能,例如二级索引(secondary index)、范围查询(range ...

集群性能监控概述

数据库 OceanBase 为您提供集群实例的数据库性能和主机性能监控功能,可在 OceanBase 管理控制台中查看监控数据,还支持自定义监控能力,您可按需配置常用监控指标作为自定义监控面板。查看监控数据 进入 OceanBase 管理控制。在左侧...

管理备份

为确保数据误操作后,AnalyticDB MySQL版 具备数据快速恢复的能力,集群创建成功后,AnalyticDB MySQL版 会自动在后台开启数据备份功能,实现集群级别的数据备份。您可以在 AnalyticDB MySQL版 控制查看集群的备份集或修改备份设置。注意...

OceanBase 数据库之间的数据迁移

背景信息 您可以在数据传输控制创建从 OceanBase 数据库迁移数据至 OceanBase 数据库同类型租户的数据迁移项目,通过结构迁移、全量迁移和增量同步,无缝迁移源端数据的存量业务数据和增量数据至目标端数据库。前提条件 数据传输已...

产品简介

大数据专家服务 大数据专家服务(Bigdata Expert Service)是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障,帮助用户...

添加DataWorks数据服务数据

本文介绍在DataV添加DataWorks数据服务数据源,并将通过DataWorks数据表生成的API,快速地展示在DataV可视化大屏的方法。前提条件 已准备好待添加的DataWorks数据服务数据源。背景信息 DataWorks数据服务生成的API默认不支持HTTPS协议...

使用DataV可视化应用展示数据返回结果

本文为您介绍如何在DataV调用DataWorks的数据服务API,并将数据返回结果展示在DataV可视化应用。前提条件 在开始本案例前,您需要首先完成 准备工作,并已经 生成了数据服务API。背景信息 警告 您必须使用HTTP协议进入DataV控制,...

受众与核心能力

同时,DataWorks持续打造符合企业级数仓、数据中台构建要求的功能模块,为企业业务的数字化转型提供支持。产品受众 从事数据开发、算法开发等岗位的技术人员 从事销售运营、商业智能分析等岗位的业务人员 从事数据安全与合规工作的管理人员...

数据防泄漏典型案例

常见数据泄露原因 在获得用户授权后,异常告警功能可检测以下类型的问题:内部数据泄漏 笔记本电脑和移动设备的丢失或失窃 敏感数据越权访问和存储 在职员工、待离职员工、合作伙伴、外包人员盗窃数据 员工外发、打印和复制敏感数据 意外...

多账号统一管理

便于企业有效地执行数据安全管理任务,如自动发现敏感数据数据分类分级、以及对潜在安全威胁的监测和报警。本文介绍如何使用多账号统一管理功能。使用须知 使用多账号统一管理功能的阿里云账号和被管理的阿里云账号必须同属于一个资源...

备份大小

备份大小=数据备份的大小+日志备份的大小 查看备份大小 登录 云数据库专属集群控制。在页面左上角,选择目标地域。在左侧导航栏,选择 实例列表>MySQL。找到目标实例,单击 操作 列的 详情。在 基本信息 页面右下角,查看备份大小。...

资产大盘

数据管理DMS 的资产大盘功能支持T+1离线汇总当前 DMS 租户下的所有实例、数据库、表数据,并图形化展示数据资产的引擎、环境、地域、来源、类目的分布占比及数量趋势。本文介绍如何使用DMS的资产大盘。注意事项 DMS 资产大盘的 表分布占比 ...

可观测性能力

同时,云原生内存数据库Tair 还基于三大数据支柱进行信息聚合,提供数据分析能力,下表为 云原生内存数据库Tair、云数据库Redis与原生Redis的可观测性能力对比。为便于浏览和内容表达,表格约定使用下述注释:✔️表示支持。❌表示不支持。...

可观测性能力介绍

您可以通过 云数据库Redis版 的 实时Top Key统计 功能,帮助定位热Key与Key,实时Top Key统计 功能支持实时展示实例的热Key和Key信息,同时支持查看4天内Key和热Key的历史信息。实时Top Key统计 功能准确性高,且对性能几乎无影响...

概述

解决方案 T+1全量同步一键建仓是指通过DLA控制配置数据源(RDS、PolarDB for MySQL、MongoDB数据源、ECS自建数据数据)和目标OSS数据仓库,系统按照您设定的数据同步时间自动、无缝的帮您把数据数据同步到目标数据仓库OSS,...

我的看板

数据来源 在工作台中创建并发布的数据看板内容,会同步在此处展示,若数据看板仅编辑完成,但是未发布,则在此处不展示。如需编辑某一看板内容,请单击页面右上角的 前往可视化工作,编辑并发布对应数据看板后,刷新当前页面即可。操作...

操作指南

一、大数据专家服务流程指南 二、服务流程说明 用户可以根据自己实际需要,提前或者在问题发生时购买大数据专家服务,服务项包含大数据技术架构方案咨询、大数据解决方案POC、大数据搬站迁云方案咨询、跨地域迁移支持服务、大数据专家高阶...

管理数据看板

进入恢复模式 重要 当您编写的过滤器有问题(例如死循环导致的看板卡顿)、数据源配置有问题(例如返回的数据量过导致的看板卡顿)或自定义组件有逻辑问题等其他原因导致数据看板无法编辑时,使用恢复模式进入,可以删除掉带来问题的内容...

添加 MySQL 数据源的白名单

本文为您介绍如何添加 RDS 实例、PolarDB 实例、VPC 内自建数据库和数据库网关类型 MySQL 数据源的白名单。背景信息 MySQL 数据源的实例类型包括 RDS 实例、PolarDB 实例、VPC 内自建数据库、数据库网关 和 公网 IP 自建数据库。公网 IP 是...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 数据库备份 DBS 数据传输服务 云数据库 Redis 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用