支持的云服务

移动数据分析Quick A+Digital Analytics 移动数据分析Quick A+Digital Analytics是阿里云推出的一款移动App数据统计分析产品,为开发者提供一站式数据化运营服务。当移动数据分析自带的基础分析报表不能满足App开发者的个性化需求时,App...

什么是云数据库HBase

数据库HBase是低成本、高扩展、云智能的大数据NoSQL,兼容标准HBase访问协议,提供低成本存储、高扩展吞吐、智能数据处理等核心能力,是为淘宝推荐、花呗风控、广告投放、监控大屏、菜鸟物流轨迹、支付宝账单、手淘消息等众多阿里巴巴...

API概览

PreloadSparkAppMetrics 预加载Spark App指标数据 预加载Spark App 指标数据。GetSparkAppMetrics 查询Spark App指标数据 获取Spark App指标数据。ListSparkLogAnalyzeTasks 查询Spark日志分析任务列表 获取所有的Spark日志分析任务列表。...

公共规范

数据类型规范 ODS层的数据类型应基于源系统数据类型转换。例如,源数据为MySQL时的转换规则如下。MySQL数据类型 MaxCompute数据类型 TINYINT TINYINT SMALLINT/MEDIUMINT SMALLINT INTEGER INT BIGINT BIGINT FLOAT FLOAT DOUBLE DOUBLE ...

PreloadSparkAppMetrics-预加载Spark App指标数据

预加载Spark App 指标数据。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 必填 描述 示例值...

INSERT INTO|OVERWRITE

复制apps的表数据追加至websites表 insert into websites(id,name,url)select id,app_name,url from apps;执行 select 语句查看表websites中的数据。select*from websites;返回结果。id|name|url|+-+-+-+|1|Aliyun|https://www.aliyun.com ...

需求分析

ods_raw_log_d 网站访问日志明细表数:dwd_log_info_di 用户网站访问信息宽表:dws_user_info_all_di 用户画像数据:ads_user_info_1d 根据规范设计数据流:本实验使用数据集成离线同步任务将用户信息数据与用户网站访问记录数据分别同步至...

需求分析

ods_raw_log_d 网站访问日志明细表:dwd_log_info_di 用户网站访问信息宽表:dws_user_info_all_di 用户画像数据:ads_user_info_1d 根据规范设计数据流:本实验使用数据集成离线同步任务将用户信息数据与用户网站访问记录数据分别同步至...

数据上云场景

MaxCompute平台提供了丰富的数据上传下载工具,可以广泛应用于各种数据上云的应用场景,本文为您介绍三种经典数据上云场景。Hadoop数据迁移 您可使用MMA...具体场景示例请参见 Flume收集网站日志数据到MaxCompute 和 海量日志数据分析与应用。

采集数据

本文为您介绍如何新建OSS和RDS数据源来访问本教程所提供的用户信息与网站日志数据,配置数据同步链路至私有OSS数据源,并通过EMR Hive节点建表去查询同步后的数据,完成数据同步的操作过程。前提条件 开始本文的操作前,请准备好需要使用的...

友盟数据分析

U-DOP数据开放平台不仅仅为您提供了U-App的统计明细数据,同时包含了多主题的分析模板和可订阅的数据包,通过任务引导式教您深度挖掘数据中的业务信息。您可以通过阿里云数据湖分析DLA的数据订阅功能对原始明细log数据进行查询和分析。开通...

典型使用场景

典型的数据源包括:MySQL/SQL Server/PostgreSQL/Oracle等OLTP业务数据库,业务App产生的日志数据,在OSS/Hadoop上的归档数据,以及来自Kafka/Flink等系统的流式数据。在库中对ODS层数据进行加工,形成CDM(Common Data Model)和ADS...

查看计量详情

API计量详情提供了各类可视化图表及统计数据,可以针对单个API分别查看监控图表,包括API网关状态码、数据服务错误码、App请求次数、流量带宽、平均响应时间。进入计量详情页面 登录 DataWorks控制台,单击左侧导航栏的 数据服务,在下拉框...

应用场景

您可以将模式固定的结构化数据存储在 RDS(Relational Database Service)中,模式灵活的业务存储在MongoDB中,高热数据存储在 云数据库Redis 或 云数据库Memcache 中,实现对业务数据高效存取,降低存储数据的投入成本。移动应用 云数据库...

功能优势

通过Web App调用分析型数据库MySQL版的自定义函数生成向量特征,分析型数据库MySQL版后台通过调用特征提取服务从OSS读取非结构化数据,提取特征,并把特征向量保存在分析型数据库MySQL版中。所有这些操作只需要一条SQL便可轻松完成,SQL...

数据服务API

数据地图支持对当前租户下所有工作空间的数据服务API进行搜索和定位,实现数据服务API的高效查找。进入API查找界面 进入数据地图页面。登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据治理>数据地图,在右侧页面中单击 ...

采集数据

本教程以MySQL中的用户基本信息(ods_user_info_d)表及OSS中的网站访问日志数据(user_log.txt)文件,通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例,为您介绍如何通过DataWorks数据集成实现异构...

采集数据

本教程以MySQL中的用户基本信息(ods_user_info_d)表及OSS中的网站访问日志数据(user_log.txt)文件,通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例,为您介绍如何通过DataWorks数据集成实现异构...

非结构化分析

基于 AnalyticDB PostgreSQL版 实现非结构化数据向量分析示例 Web App把文本,图片或者视频等非结构化数据(后续简称非结构化数据)通过特征提取服务提取特征向量,然后再把特征向量写入云原生数据仓库PostgreSQL版向量分析的向量表。...

项目分配与安全

数据产品应用以 App 结尾,例如 asale_app。考虑到本教程仅聚焦于电商业务板块中交易成功的业务流程,您可以为ODS、CDM和ADS层分别仅建立一个项目。项目模式选择 标准模式是指一个DataWorks项目对应两个MaxCompute项目,可设置开发和生产双...

项目分配与安全

数据产品应用以 app 结尾,例如 asale_app。考虑到本教程仅聚焦于电商业务板块中交易成功的业务流程,您可以为ODS、CDM和ADS层分别仅建立一个项目。项目模式选择 标准模式是指一个DataWorks项目对应两个MaxCompute项目,可设置开发和生产双...

概述

OceanBase 云数据库集群实例可以通过添加备实例,组成一主多备的集群网络,主备实例之间保持数据同步,进一步提升数据库的高可用能力。原理介绍 主备实例架构为一主(Primary)多备(Physical_Standby),备实例不支持级联添加备实例。主备...

计费逻辑说明

软件费用明细:APP安全检测 资源费用 数据集成 数据集成提供异构数据源间的数据同步能力,数据集成任务运行会占用一定的运行资源,DataWorks将根据您使用的资源进行收费。资源费用明细:数据集成 任务调度 在DataWorks进行数据开发、定时...

实验介绍

数据采集 数据加工 配置数据质量监控 数据可视化展现 目标人群 开发工程师、数据分析师、产品运营等存在数仓数据获取与数据分析洞察人员。涉及产品 本案例涉及以下产品:一站式大数据开发治理DataWorks 本案例通过DataWorks实现数据采集,...

快速体验

数据采集 数据加工 配置数据质量监控 数据可视化展现 目标人群 开发工程师、数据分析师、产品运营等存在数仓数据获取与数据分析洞察人员。涉及产品 本案例涉及以下产品:一站式大数据开发治理DataWorks 本案例通过DataWorks实现数据采集、...

应用场景

实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统 通过数据总线,您可以实时接入APP、WEB、IoT和数据库等产生的异构数据,统一管理,并投递到下游的分析、归档等系统,构建清晰的数据流,让您更好的释放数据的价值。...

数据服务概述

DataWorks数据服务模块是一个灵活轻量、安全稳定的数据API构建平台,作为数据库和数据应用之间的“桥梁”,DataWorks数据服务旨在为个人、团队和企业提供全面的数据服务和共享能力,帮助用户统一管理面向内外部的API服务。例如,您可以将...

阿里云 App 产品简介

1.产品介绍 手机阿里云App是阿里云官方出品的移动应用,为用户提供随时随地触达阿里云的能力。使用阿里云App,用户可以快速了解阿里云提供的产品信息和动态,购买和试用优质的云产品服务。也可以对已购买的云资源进行监控和管理,随时查看...

Tomcat 连接池连接 OceanBase 数据库示例程序

本文将介绍如何使用 Tomcat 连接池、OceanBase Connector/J 和 OceanBase 数据库构建一个应用程序,实现基本的数据库操作,包括创建表、插入、删除、更新和查询数据等。点击下载 tomcat-mysql-client 示例工程 前提条件 您已安装 OceanBase...

API管理

例如,API流量限制 为每秒查询率是1000,App1的流量限制为每秒查询率是500,App2的流量限制为每秒查询率是500,App3的流量限制为每秒查询率是500,各App流量限制的总和大于API的流量限制,但流量限制的上线为API流量限制。APP流量限制 大于...

数据服务入门

计量详情:提供了各类可视化图表及统计数据,可针对单个API查看监控图表,包括API网关状态码、数据服务错误码、App请求次数、流量带宽、平均响应时间。日志分析:可使用日志分析功能对调用请求进行分析,当调用请求出现异常时,智能分析可...

调用API

若您为API Owner,则无需进行授权操作(在发布API时,数据服务已默认为API Owner授予APP调用API的权限)。步骤一:下载SDK 进入API网关控制台的 已授权API的SDK 页面。找到数据服务默认生成的 DMS_DEFAULT_APP 应用,单击右侧的各语言按钮...

急需续费

阿里云 App 当前支持续费的产品有:云服务器 ECS、云数据库 RDS 版、域名、云虚拟主机、云数据库 Redis 版、轻量应用服务器、云数据库 MongoDB 版、负载均衡、文件存储 NAS、DDoS 高防 IP、Web 应用防火墙、弹性公网 IP、VPN、高速通道、云...

运维监控概述

您可以查看运维总览数据、调用API的情况及为API配置限流和告警:查看异常影响分析:以指标卡的形式直观清晰的展现了特定时间段内,特定服务项目下发布API数、在线API数、调用API数、在线API调用率、API的调用总次数、异常调用总次数、错误...

数据归档常见问题

本文汇总了 PolarDB 冷数据归档相关的常见问题。出现"[Data Lifecycle Management]DLM storage engine is not support.The value of polar_dlm_storage_mode is OFF."报错,如何处理?您需要在 PolarDB控制台 上开启冷数据归档功能。详情请...

调用API

API和App的权限关系:App需要调用某个API,必须获取调用该API的权限。详情请参见 授权管理。背景信息 API网关支持API授权和API调用SDK。您可以授权自己、企业内的人员或第三方使用API。操作步骤 获取API文档。根据您获取API的渠道不同,...

查看计量大屏

数据服务提供了计量大屏功能,您可以通过该功能查看各类可视化图表和统计数据,包括工作空间下的API总数、总调用次数以及总执行时长用量等信息,帮助您全面了解API的调用情况。同时,您也可以针对单个API查看监控图表,获取API网关状态码、...

Hive数据导入

云原生数据仓库AnalyticDB MySQL版 湖仓版(3.0)支持通过Hive数据迁移将Hive数据迁移至OSS。本文介绍如何添加Hive数据源,新建Hive迁移链路并启动任务,以及数据迁移后如何进行数据分析和管理数据迁移任务。功能介绍 AnalyticDB MySQL版 ...

常用文件路径

数据湖集群 大数据组件安装目录 组件安装在/opt/apps/xxx 目录下,例如:HDFS:/opt/apps/HDFS/hdfs-current Hive:/opt/apps/HIVE/hive-current Hudi:/opt/apps/HUDI/hudi-current YARN:/opt/apps/YARN/yarn-current Presto:/opt/apps/...

文档修订记录

DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务,需先将已创建的数据源或集群绑定至数据开发...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 数字证书管理服务(原SSL证书) 云数据库 RDS 云数据库 Redis 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用