应用场景
收集用户意见 App开发者使用少量代码即可集成移动用户反馈SDK，并通过管理后台，即时收集、管理、分析用户反馈；App使用者可通过文字、图片和语音结合的方式反馈使用建议和意见，有助于推动产品和服务不断完善。反馈应用Bug App开发者通过...
JindoTable表或分区的访问热度收集
您可以通过JindoTable表或分区的访问热度收集功能来区分冷热数据，从而节约整体的存储成本，提高缓存利用效率。数据收集 JindoTable支持收集访问Hive表的记录，目前支持的引擎有Spark和Hive。收集的数据保存在集群SmartData服务的Namespace...
管理USER用户
说明 您只能在自己创建的用户数据库中创建普通用户，无法在系统数据库中创建用户。前提条件 实例需要为RDS SQL Server 2012及以上版本的实例。已创建用户数据库。关于创建数据库的命令，请参见 SQL命令管理数据库。已创建LOGIN用户，并登录...
索引管理
本文介绍 云原生数据仓库AnalyticDB ...索引数据收集 您可以使用 VACUUM 命令收集索引数据，收集索引数据示例如下：VACUUM customer;说明 仅BRIN索引需要使用索引数据收集。更多信息 更多关于索引的信息，请参见 Pivotal Greenplum 官方文档。
需求分析
步骤四：汇总需求 阶段 操作对象 说明 数据采集阶段 ods_user_info_d 将MySQL中的用户数据ods_user_info_d同步至MaxCompute的ods_user_info_d表。ods_raw_log_d 将OSS中的网站访问日志user_log.txt同步至MaxCompute的ods_raw_log_d表。数据...
需求分析
步骤四：汇总需求 阶段 操作对象 说明 数据采集阶段 ods_user_info_d 将MySQL中的用户数据ods_user_info_d同步至MaxCompute的ods_user_info_d表。ods_raw_log_d 将OSS中的网站访问日志user_log.txt同步至MaxCompute的ods_raw_log_d表。数据...
应用场景
但各个获客渠道的用户数据分散，会员管理体系单一，推荐准确度不高，会员营销方式有限。解决方案：数据融合：通过数据引入功能，将各渠道数据沉淀至数据仓库内，丰富基础数据。数据建模：通过数据建模及代码自动化生成功能，以会员为中心，...
ID Mapping与用户唯一标识QAID
Quick Audience在V4的表数据导入、事件数据上报等流程中引入自动的ID Mapping环节，通过ID Mapping实现跨来源渠道、跨ID类型的用户身份识别、用户数据拉通。背景 您的Quick Audience数据池中可能有来源于多个渠道的同一个用户的数据，例如...
功能发布记录（2024年）
所有DataWorks用户 数据治理中心概述 数据治理中心新增物化视图功能 当您在面对大数据计算任务频繁且存在大量相似子查询场景时，DataWorks支持自动化治理，智能推荐物化视图，为您提供了一种智能化、自动化的解决方案。当您启用此功能时，...
功能概述
结合阿里云强大的安全防护体系，全密态数据库能够有效防御来自云平台外部和内部的安全威胁，时刻保护用户数据，让云上数据成为用户的私有资产。全密态数据库如何保证数据不在云端泄露？全密态数据库在对返回查询结果中包含的被保护数据始终...
产品优势
安全可靠 无需暴露数据库公网地址，确保用户数据资产的安全和稳定。本地网关启动时，需要在控制台生成一个临时令牌，该令牌会在网关启动时通过加密链路发送至服务端进行验证，以确保该网关仅供该用户使用。令牌在15分钟内过期，且只验证1次...
透明数据加密概述
RDS PostgreSQL支持透明数据加密（Transparent Data Encryption，简称TDE），对数据文件进行实时加密和解密，保护用户数据隐私，本文介绍透明数据加密的基本概念和加密原理。什么是透明数据加密 透明数据加密指对数据文件执行实时I/O加密和...
权限管理
当需要授予用户数据库和表的查询、导出及变更权限，您可参考本文档进行操作。注意事项 实例的管控模式为安全协同时，可以进行查看数据库、表等操作。非安全协同模式的实例，仅有登录实例的权限。由数据Owner管理的数据库、表，数据Owner...
权限说明
授予用户数据湖admin/super_administrator角色。参考 角色管理。授予用户dlf-dss权限，例如：dlf-dss:BatchGrantPermissions+dlf-dss:SelectTable表示该用户可以授予所有表的select权限给其他用户 问题三：调用控制类API无权限（例如权限...
应用场景
视频直播类应用 视频直播类业务通过Redis存储用户数据及好友互动关系。双机热备保障高可用 云数据库Redis版 提供双机热备的方式，可以极大的提高服务可用性。集群版解决性能瓶颈 云数据库Redis版 提供集群版实例，破除Redis单线程机制的...
配置安全规则
数据库用户 数据库所使用的用户名，可添加多个用户名。客户端工具 客户端使用的工具名称，可添加多个客户端工具。MAC地址 访问数据库设备的MAC地址。操作系统用户 访问数据库所使用的操作系统名称。主机名 访问数据库所使用的计算机主机名...
资源组说明
资源组分类 资源组是用于执行具体任务的服务，如接收调度引擎的指令执行SQL任务、数据同步任务，也包括按...资源组类型 支持云资源内网地址 用户数据是否出VPC 使用限制 系统资源组 否（部分资源支持VPC网络打通）否 有 自定义资源组 是 是 无
构建数据仓库
场景说明 用户数据来源丰富，包括来自云端的数据、外部数据源，数据统一沉淀，完成数据清洗、建模。用户的应用场景复杂，对非结构化的语音、自然语言文本进行语音识别、语义分析、情感分析等，同时融合结构化数据搭建企业级的数据管理平台...
资源组说明
资源组分类 资源组是用于执行具体任务的服务，如接收调度引擎的指令执行SQL任务、数据同步任务，也包括按...资源组类型 支持云资源内网地址 用户数据是否出VPC 使用限制 系统资源组 否（部分资源支持VPC网络打通）否 有 自定义资源组 是 是 无
概述
Apache Flume是一个分布式、可靠和高可用的系统，可以从大量不同的数据源有效地收集、聚合和移动日志数据，从而集中式的存储数据。使用场景 Flume使用最多的场景是日志收集，也可以通过定制Source来传输其他不同类型的数据。Flume最终会将...
功能发布记录（2022年）
2022.7.2 华东1（杭州），华东2（上海），华北2（北京），华北3（张家口），华南1（深圳），西南1（成都），中国香港 所有DataWorks用户 数据开发概述 2022-6 功能名称 功能描述 发布时间 发布地域 使用客户 相关文档 数据治理中心全面开放...
概述
从应用视角看，全密态数据库可以解决不同应用场景下的数据安全问题，几种典型场景如下：平台安全运维：该场景主要针对在不可信环境（如第三方平台）下提供的数据库服务的安全防护，保证用户数据在运维过程中的安全。例如，业务将应用数据库...
通用数据开发
通常数据开发的总体流程包括数据产生、数据收集与存储、数据分析与处理、数据提取和数据展现与分享。说明 上图中，虚线框内的开发流程均可基于阿里云大数据平台完成。数据开发的流程如下所示：数据产生：业务系统每天会产生大量结构化的...
配置数据源网络
spark.dla.eni.enable":"true","spark.dla.eni.vswitch.id":"vsw-bp17jqw3lrrobn6y*","spark.dla.eni.security.group.id":"sg-bp163uxgt4zandx*",} } 说明 spark.dla.eni.enable 取值为 true 时，表示启用访问用户VPC功能，挂载用户数据源...
外部表概述
对于MaxCompute表外的各种用户数据（包括文本以及各种非结构化的数据），您需要通过不同工具导入MaxCompute表再进行计算。以OSS为例，如果您需要在MaxCompute中处理OSS上的数据，通常有以下两种方式：通过OSS SDK或者其他工具从OSS下载数据...
什么是RDS PostgreSQL
除此之外还提供如下高级功能：全密态数据库：数据在用户侧加密后传入云数据库，能够有效防御来自云平台外部和内部的安全威胁，时刻保护用户数据，让云上数据成为您的私有资产。只读实例：在对数据库有少量写请求，但有大量读请求的应用场景...
产品概述
该工具支持快速展示和实时分析海量时空数据，同时还能通过SQL分析工具对用户数据库中的空间数据进行多维度的灵活分析。该工具能够帮助用户快速构建自己的地理分析地图，挖掘时空数据的价值，并支持商业决策和科学研究等领域的应用，详情请...
什么是数据库网关
DTS有如下多种优势：安全可靠：无需暴露数据库公网地址，确保用户数据资产的安全和稳定；本地网关启动时，需要在控制台生成一个临时令牌，该令牌会在网关启动时通过加密链路发送至服务端进行验证，以确保该网关仅供该用户使用。令牌在15...
什么是数据库网关
DG的优势如下：安全可靠 不暴露数据库公网地址，确保用户数据资产的安全和稳定。本地网关启动时，需要在控制台生成一个临时令牌，该令牌会在网关启动时通过加密链路发送至服务端进行验证，以确保该网关仅供该用户使用。令牌在15分钟内过期...
概述
以下是常见的应用场景：数据存储与计算安全场景：在不可信环境中（如第三方平台），Spark全密态计算引擎 可以为关键的数据分析应用（如投资和财务分析）提供数据保护，保证用户数据在存储与计算过程中的安全，降低明文数据泄露风险。...
应用场景
数据库备份DBS 提供数据全量备份、增量备份、异地备份以及数据恢复等功能，帮助您实现多种典型应用场景。...降低运维成本：备份加固，ISV可直接购买DBS，为最终的用户数据提供保护，有效规避数据丢失风险，降低运维成本。
大数据用户画像解决方案
进入互联网，特别是移动互联网时代，用户随时随地都会在网上留下“言”和“行”，如何让这些言行数据“开口说话”就变得越来越重要。用户画像应运而生，而且已经广泛的应用到精准营销、推荐系统、广告投放、风控、智能客服等等领域。用户...
数据权限概述
数据湖权限支持配置数据库、数据表、数据列、函数四种维度细粒度权限。下面针对不同的数据操作，对所需要配置的权限进行说明，并对Owner权限的定义和权限鉴定方式进行详细说明。权限设置 权限设置主要为数据目录（Catalog）开启和关闭权限...
采集数据
新建EMR表 新建两张表 ods_user_info_d_emr 表、ods_raw_log_d_emr 表，分别用于查询同步后的原始的MySQL用户数据和OSS日志数据。在 数据开发 页面打开新建的业务流程，右键单击 EMR，选择 新建节点>EMR Hive。在 新建节点 对话框中，输入 ...
采集数据
新建两个离线同步节点 ods_raw_log_d、ods_user_info_d，用于后续同步MySQL用户数据与OSS网站访问日志数据，再新建虚拟节点 workshop_start 统一管理该业务流程。本阶段仅涉及数据采集业务流程，不涉及具体同步任务配置。1、新建业务流程 ...
采集数据
新建两个离线同步节点 ods_raw_log_d、ods_user_info_d，用于后续同步MySQL用户数据与OSS网站访问日志数据，再新建虚拟节点 workshop_start 统一管理该业务流程。本阶段仅涉及数据采集业务流程，不涉及具体同步任务配置。1、新建业务流程 ...
逻辑数仓
名词解释 名词 描述 逻辑数仓 逻辑数仓是架构在用户数据源基础上的一个虚拟数仓，由数据源、虚拟库和逻辑视图组成，并提供了虚拟库管理界面，以及视图的管理和查询界面。用户可在逻辑数仓中直接跨库查询数据，也可以创建和管理虚拟库并基于...
数据治理中心概述
普通用户 数据治理工作中实际处理待治理问题的整改人员，可使用个人视角查看检查项事件及治理项问题，并执行整改操作。如您需整改租户下存在的问题，则需被授权为该空间的成员。说明 通常，除阿里云主账号和具有 AliyunDataWorksFullAccess...
数据模型
用户ID为10000的用户数据聚合后的数据解释如下。前5列没有变化，从第6列 last_visit_date 开始。2017-10-01 07:00:00：因为 last_visit_date 列的聚合方式为REPLACE，所以 2017-10-01 07:00:00 替换了 2017-10-01 06:00:00 保存了下来。...
DataWorks数据服务对接DataV最佳实践
当今社会数据收集的方式不断丰富，行业数据大量积累，导致数据规模已增长到传统软件行业无法承载的海量级别。MaxCompute服务于批量结构化数据的存储和计算，已经连续多年稳定支撑阿里巴巴全部的离线分析业务。过去，如果您想要通过DataV...
- 产品推荐
- 这些文档可能帮助您