需求分析

ods_raw_log_d 网站访问日志明细表数:dwd_log_info_di 用户网站访问信息宽表:dws_user_info_all_di 用户画像数据:ads_user_info_1d 根据规范设计数据流:本实验使用数据集成离线同步任务将用户信息数据与用户网站访问记录数据分别同步至...

需求分析

ods_raw_log_d 网站访问日志明细表:dwd_log_info_di 用户网站访问信息宽表:dws_user_info_all_di 用户画像数据:ads_user_info_1d 根据规范设计数据流:本实验使用数据集成离线同步任务将用户信息数据与用户网站访问记录数据分别同步至...

采集数据

本文为您介绍如何新建OSS和RDS数据源来访问本教程所提供的用户信息与网站日志数据,配置数据同步链路至私有OSS数据源,并通过EMR Hive节点建表去查询同步后的数据,完成数据同步的操作过程。前提条件 开始本文的操作前,请准备好需要使用的...

数据上云场景

MaxCompute平台提供了丰富的数据上传下载工具,可以广泛应用于各种数据上云的应用场景,本文为您介绍三种经典数据上云场景。Hadoop数据迁移 您可使用MMA...具体场景示例请参见 Flume收集网站日志数据到MaxCompute 和 海量日志数据分析与应用。

采集数据

本教程以MySQL中的用户基本信息(ods_user_info_d)表及OSS中的网站访问日志数据(user_log.txt)文件,通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例,为您介绍如何通过DataWorks数据集成实现异构...

采集数据

本教程以MySQL中的用户基本信息(ods_user_info_d)表及OSS中的网站访问日志数据(user_log.txt)文件,通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例,为您介绍如何通过DataWorks数据集成实现异构...

数据写入

Lindorm时序引擎支持六种数据写入方法:Native SDK写入、行协议写入、标准SQL写入、时间序列数据库TSDB接口写入、remote write数据写入、Flink数据写入。本文介绍数据写入的六种方法。Native SDK写入 Native SDK适用于Java开发者,Native ...

实验介绍

数据采集 数据加工 配置数据质量监控 数据可视化展现 目标人群 开发工程师、数据分析师、产品运营等存在数仓数据获取与数据分析洞察人员。涉及产品 本案例涉及以下产品:一站式大数据开发治理DataWorks 本案例通过DataWorks实现数据采集,...

快速体验

数据采集 数据加工 配置数据质量监控 数据可视化展现 目标人群 开发工程师、数据分析师、产品运营等存在数仓数据获取与数据分析洞察人员。涉及产品 本案例涉及以下产品:一站式大数据开发治理DataWorks 本案例通过DataWorks实现数据采集、...

文档修订记录

DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务,需先将已创建的数据源或集群绑定至数据开发...

新用户必读

如果您是首次接触 云原生数据仓库AnalyticDB MySQL版 的用户,建议您先阅读以下部分。服务亮点和定价:产品详情...SQL手册:详细介绍 AnalyticDB MySQL 支持的数据类型、SQL语法以及示例。系统函数:介绍 AnalyticDB MySQL 支持的函数和示例。

数据质量教程概述

数据质量是数据分析结论有效性和准确性的基础。本文为您介绍数据质量保障教程的业务场景以及如何衡量数据质量的高低。前提条件 在开始本教程前,请您首先完成 搭建互联网在线运行分析平台 教程,详情请参见 业务场景与开发流程。业务场景 ...

数据质量教程概述

数据质量是数据分析结论有效性和准确性的基础。本文为您介绍数据质量保障教程的业务场景以及如何衡量数据质量的高低。前提条件 在开始本教程前,请您首先完成 搭建互联网在线运行分析平台 教程,详情请参见 业务场景与开发流程。业务场景 ...

数据源管理常见问题

说明 如果接口数据需要被所有网站使用,您可以使用通配符*。数据库类问题 如何配置数据数据源?在DataV控制台,选择 我的数据>数据源管理,单击+添加数据,在 添加数据 对话框中输入数据库相关配置信息,单击 确定,即可创建数据数据源...

数据源管理常见问题

说明 如果接口数据需要被所有网站使用,您可以使用通配符*。数据库类问题 如何配置数据数据源?在DataV控制台,选择 我的数据>数据源管理,单击+添加数据,在 添加数据 对话框中输入数据库相关配置信息,单击 确定,即可创建数据数据源...

创建MySQL数据

常用于网站、应用程序和商业产品,是一种常见的主要关系数据存储系统。更多详情请参见 MySQL官网。使用限制 Dataphin仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据源。操作步骤 在Dataphin首页,单击顶部菜单栏的...

创建MySQL数据

常用于网站、应用程序和商业产品,是一种常见的主要关系数据存储系统。更多详情请参见 MySQL官网。前提条件 若您需在Dataphin中创建基于阿里云产品的数据源,创建数据源前,需确保Dataphin的IP已添加至数据库白名单(或安全组)中,使数据...

什么是MaxCompute

MaxCompute适用于大型互联网企业的数据仓库和BI分析、网站的日志分析、电子商务网站的交易分析、用户特征和兴趣挖掘等。详细发展历程、产品荣誉及客户案例请参见 发展历程 和 客户案例。MaxCompute还深度融合了阿里云如下产品:DataWorks ...

数据查询

使用预降采样查询提升查询性能 大范围的时间查询 预降采样 通过存储引擎将写入的数据降低精度后单独存储,查询时按查询条件中指定的降采样精度自动查询最接近预降采样精度的数据,然后再对查询的数据进行聚合计算,减少实时查询的计算数据...

表属性管理

导出 单击右上角的导出图标,导出单表数据,具体信息请查看本手册文档 单表导出与导入。列信息 在属性页签的左导航栏中单击 列 标签查看当前表中所包含的列。在 列 标签中,支持修改 名称、长度、非空 和 注释。工具栏中提供以下功能键:...

数据管理

查看数据 进入数据页签后,ODC 以表格的形式展示表中的数据,并导航栏中提供了以下功能键查看和管理表中的数据:功能 说明 编辑 单击编辑图标进入编辑态,以修改表中的数据。提交(Oracle 模式)Oracle 模式下自动提交默认设置为关(OFF)...

配置数据质量监控

已通过数据集成将存储于OSS的网站访问日志(user_log.txt)同步至MaxCompute的ods_raw_log_d表。已通过数据开发DataStudio将数据加工为用户画像基本数据。背景信息 数据质量 是支持多种异构数据源的质量校验、通知、管理服务的一站式平台。...

配置数据质量监控

已通过数据集成将存储于OSS的网站访问日志(user_log.txt)同步至MaxCompute的ods_raw_log_d表。已通过数据开发DataStudio将数据加工为用户画像基本数据。背景信息 数据质量 是支持多种异构数据源的质量校验、通知、管理服务的一站式平台。...

DLF+EMR之统一权限最佳实践

DLF 数据权限:DLF所提供的数据湖的数据权限体系,支持配置数据库、数据表、数据列、函数四种维度细粒度权限控制。详见 数据权限概述。业务场景说明 某公司有一个EMR集群,期望Hive/Spark/Presto/Impala引擎可以通过统一的数据权限,控制...

客户案例

数据库网关提供安全、可靠、低成本的数据库接入服务。本文将例举一个客户案例为您介绍如何通过数据库网关解决自身业务上的挑战。百姓网股份有限公司 行业分类:分类信息服务商 公司网站:https://www.baixing.com/ 公司介绍 百姓网...

客户案例

数据库网关提供安全、可靠、低成本的数据库接入服务。本文将例举一个客户案例为您介绍如何通过数据库网关解决自身业务上的挑战。百姓网股份有限公司 行业分类:分类信息服务商 公司网站:https://www.baixing.com/ 公司介绍 百姓网...

创建数据库并写入数据

在进行数据写入和查询前,您需要先创建数据库。本文介绍如何为 云数据库 SelectDB 版 实例创建 数据库并写入数据。前提条件 已通过 MySQL协议连接 云数据库 SelectDB 版 实例。具体操作,请参见 连接实例。注意事项 每个 云数据库 SelectDB...

功能特性

Lindorm SQL语法手册 存储能力 功能集 功能 功能描述 参考文档 数据存储 数据读写 支持多种数据模型和查询语言,支持kv型、文档型、时间序列型等多种数据模型,支持使用SQL语言或开源API进行查询和操作,用户可以根据实际需求选择进行读写...

产品概述

阿里云流数据处理平台数据总线DataHub是流式数据(Streaming Data)的处理平台,提供对流式数据的发布(Publish),订阅(Subscribe)和分发功能,让您可以轻松构建基于流式数据的分析和应用。数据总线 DataHub服务可以对各种移动设备,应用...

SQL手册

数据库 SelectDB 版 兼容标准的SQL语法。您可以 通过标准的SQL语句访问 云数据库 SelectDB 版,同时 云数据库 SelectDB 版 提供了丰富的数据类型和内置函数。SQL语法的详细信息,请参见 SelectDB SQL手册

概述

其中:日志数据来源可以为ECS、容器、移动端、开源软件、网站服务或JavaScript。本文为您介绍如何通过Tunnel、DataHub、LogHub以及DataWorks数据集成将日志数据迁移至MaxCompute。方案 说明 适用场景 Tunnel 通过MaxCompute的Tunnel功能,...

ETL工作流快速体验

教程(点击链接快速体验)涉及产品 涉及模块 DataWorks版本要求 教程描述 网站用户行为分析 DataWorks MaxCompute MYSQL(无须开通)OSS(无须开通)数据集成 数据开发 基础版(0元开通即可体验)揭秘用户行为,驱动业务增长!该案例将通过...

区域下钻热力层(v2.x版本)

登入 geojson.io 网站,单击左上角 Open>File,将获取到的浙江省范围的JSON数据添加到geojson.io右侧编辑框内。单击左上角 Save>TopoJSON,得到浙江省的topo_json文件。说明 自定义区域合并,可能需要使用 turfjs.org 这个方法合并两个相邻...

查询多个备份集

数据库备份服务DBS支持在单个备份计划下查询多个备份集,本文向您介绍如何查询多个备份集数据。前提条件 目标数据库为MySQL、SQL Server、Oracle、PostgreSQL、PolarDB分布式版,且备份方式为 逻辑备份。说明 包含自建数据库、RDS云数据库...

管理视图

具体请参见本手册文档 导入和导出。下载 下载视图对象的 SQL 文件。复制 选择对象名、Select 语句、Insert 语句、Update 语句或 Delete 语句。删除 删除当前视图对象。属性和数据页签 属性页签:基本信息:查看 视图名称、检查项 和 创建人...

入门概览

本文介绍 云原生多模数据库 Lindorm 时序引擎的使用流程,帮助您快速连接使用Lindorm时序引擎。操作流程 从创建Lindorm实例到Lindorm时序引擎的应用开发,您需要完成以下操作:创建Lindorm实例,创建时选择数据引擎为时序引擎,具体操作请...

从RDS同步到云原生数据仓库 AnalyticDB MySQL 版

说明 选择了 结构初始化 后,您需要定义待同步的表在 云原生数据仓库AnalyticDB MySQL 中的 类型、主 键列、分区列 等信息,详情请参见 ADB 2.0 SQL手册 和 ADB 3.0 SQL手册。上述配置完成后,单击页面右下角的 预检查并启动。说明 在同步...

SQL手册

目前云数据库ClickHouse SQL语法与开源社区版完全一致。ClickHouse官网说明:SQL语法介绍

从PolarDB MySQL版同步至云原生数据仓库 AnalyticDB ...

说明 选择了 结构初始化 后,您需要定义待同步的表在 云原生数据仓库AnalyticDB MySQL 中的 类型、主 键列、分区列 等信息,详情请参见 ADB 2.0 SQL手册 和 ADB 3.0 SQL手册。上述配置完成后,单击页面右下角的 预检查并启动。说明 在同步...

从PolarDB-X同步至云原生数据仓库 AnalyticDB MySQL ...

说明 选择了 结构初始化 后,您需要定义待同步的表在 云原生数据仓库AnalyticDB MySQL 中的 类型、主 键列、分区列 等信息,详情请参见 ADB 2.0 SQL手册 和 ADB 3.0 SQL手册。上述配置完成后,单击页面右下角的 预检查并启动。说明 在同步...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据传输服务 数据库备份 DBS 云数据库 RDS 云数据库 Redis 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用