互联网、电商行业离线大数据分析
应用场景 电商网站数据看板。全国、全球业务的态势分析。互联网、金融行业的风险数据监控。方案介绍 实现互联网、电商行业离线大数据分析的流程如下：同步用户订单等数据至MaxCompute。通过DataWorks对原始数据进行处理，并形成开放API。以...
防盗链
合作伙伴授权访问：某些情况下，需要与合作伙伴网站共享资源或数据，通过防盗链可以限制只有特定合作伙伴可以访问和使用共享资源。基本概念 盗链：是指在一个网页内，以链接的形式嵌入另一个网页的内容，从而获取他人的资源而不经过授权。...
数据上云场景
MaxCompute平台提供了丰富的数据上传下载工具，可以广泛应用于各种数据上云的应用场景，本文为您介绍三种经典数据上云场景。Hadoop数据迁移 您可使用MMA...具体场景示例请参见 Flume收集网站日志数据到MaxCompute 和 海量日志数据分析与应用。
需求分析
ods_raw_log_d 网站访问日志明细表数：dwd_log_info_di 用户网站访问信息宽表：dws_user_info_all_di 用户画像数据：ads_user_info_1d 根据规范设计数据流：本实验使用数据集成离线同步任务将用户信息数据与用户网站访问记录数据分别同步至...
需求分析
ods_raw_log_d 网站访问日志明细表：dwd_log_info_di 用户网站访问信息宽表：dws_user_info_all_di 用户画像数据：ads_user_info_1d 根据规范设计数据流：本实验使用数据集成离线同步任务将用户信息数据与用户网站访问记录数据分别同步至...
采集数据
本文为您介绍如何新建OSS和RDS数据源来访问本教程所提供的用户信息与网站日志数据，配置数据同步链路至私有OSS数据源，并通过EMR Hive节点建表去查询同步后的数据，完成数据同步的操作过程。前提条件 开始本文的操作前，请准备好需要使用的...
什么是OSS ON云盒
OSS ON云盒为云盒（CloudBox）产品提供了非结构化数据本地存储、本地访问、以及本地处理的能力。您可以在OSS ON云盒中创建存储空间（Bucket），并使用与公共云一致的API、SDK访问云盒中的OSS。功能优势 云盒是阿里云提供的全托管云服务。...
如何配置跨域数据
什么是跨域数据配置 用户A所包含的数据来自其自己的网站以及用户B的网站。自己网站上的数据可以通过类似 http://userA.com/page1 这样的接口进行访问。用户B提供 http://userB.com/page2 数据接口，但是当用户A发送一个Javascript ajax请求...
采集数据
本教程以MySQL中的用户基本信息（ods_user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构...
实验介绍
数据采集 数据加工 配置数据质量监控 数据可视化展现 目标人群 开发工程师、数据分析师、产品运营等存在数仓数据获取与数据分析洞察人员。涉及产品 本案例涉及以下产品：一站式大数据开发治理DataWorks 本案例通过DataWorks实现数据采集，...
采集数据
本教程以MySQL中的用户基本信息（ods_user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构...
快速体验
数据采集 数据加工 配置数据质量监控 数据可视化展现 目标人群 开发工程师、数据分析师、产品运营等存在数仓数据获取与数据分析洞察人员。涉及产品 本案例涉及以下产品：一站式大数据开发治理DataWorks 本案例通过DataWorks实现数据采集、...
文档修订记录
DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发...
防盗链
您可以使用Android SDK在OSS中配置基于请求标头Referer的访问规则，包括白名单Referer、黑名单Referer以及是否允许空Referer等，阻止某些Referer访问您的OSS文件，防止其他网站盗用您的文件，并避免由此引起的不必要的流量费用增加。...
防盗链
您可以使用Node.js SDK在OSS中配置基于请求标头Referer的访问规则，包括白名单Referer、黑名单Referer以及是否允许空Referer等，阻止某些Referer访问您的OSS文件，防止其他网站盗用您的文件，并避免由此引起的不必要的流量费用增加。...
防盗链
您可以使用Ruby SDK在OSS中配置基于请求标头Referer的访问规则，包括白名单Referer、黑名单Referer以及是否允许空Referer等，阻止某些Referer访问您的OSS文件，防止其他网站盗用您的文件，并避免由此引起的不必要的流量费用增加。...
防盗链
您可以使用Python SDK在OSS中配置基于请求标头Referer的访问规则，包括白名单Referer、黑名单Referer以及是否允许空Referer等，阻止某些Referer访问您的OSS文件，防止其他网站盗用您的文件，并避免由此引起的不必要的流量费用增加。...
防盗链
您可以使用C++ SDK在OSS中配置基于请求标头Referer的访问规则，包括白名单Referer、黑名单Referer以及是否允许空Referer等，阻止某些Referer访问您的OSS文件，防止其他网站盗用您的文件，并避免由此引起的不必要的流量费用增加。...
防盗链
关于OSS支持的Region与Endpoint的对应关系，请参见 访问域名和数据中心。本文以OSS域名新建OSSClient为例。如果您希望通过自定义域名、STS等方式新建OSSClient，请参见 初始化。要设置或清空防盗链，您必须具有 oss:PutBucketReferer 权限...
防盗链
您可以使用Go SDK在OSS中配置基于请求标头Referer的访问规则，包括白名单Referer、黑名单Referer以及是否允许空Referer等，阻止某些Referer访问您的OSS文件，防止其他网站盗用您的文件，并避免由此引起的不必要的流量费用增加。注意事项 在...
防盗链
关于OSS支持的Region与Endpoint的对应关系，请参见 访问域名和数据中心。本文以OSS域名新建OSSClient为例。如果您希望通过自定义域名、STS等方式新建OSSClient，请参见 新建OssClient。要设置或清空防盗链，您必须具有 oss:...
配置Referer防盗链
使用场景 Referer防盗链主要用于保护网站的资源不被其他网站直接引用或盗用，常见的使用场景包括：版权保护：某些网站发布的内容受版权保护，使用Referer防盗链可以限制只有特定授权网站才能访问这些内容，保护版权利益。防止热链盗用：...
配置Referer防盗链
使用场景 Referer防盗链主要用于保护网站的资源不被其他网站直接引用或盗用，常见的使用场景包括：版权保护：某些网站发布的内容受版权保护，使用Referer防盗链可以限制只有特定授权网站才能访问这些内容，保护版权利益。防止热链盗用：...
应用场景
互联网类应用 Cassandra能够支持大并发低延时的访问需求，具备高可用和弹性扩容能力，适合日志、消息、feed流、订单、账单、网站等各种大数据量的互联网在线应用场景。多活 Cassandra原生支持多DC部署方式，实现更好的可用性和容灾能力。云...
数据质量教程概述
数据质量是数据分析结论有效性和准确性的基础。本文为您介绍数据质量保障教程的业务场景以及如何衡量数据质量的高低。前提条件 在开始本教程前，请您首先完成 搭建互联网在线运行分析平台 教程，详情请参见 业务场景与开发流程。业务场景 ...
数据质量教程概述
数据质量是数据分析结论有效性和准确性的基础。本文为您介绍数据质量保障教程的业务场景以及如何衡量数据质量的高低。前提条件 在开始本教程前，请您首先完成 搭建互联网在线运行分析平台 教程，详情请参见 业务场景与开发流程。业务场景 ...
数据源管理常见问题
说明 如果接口数据需要被所有网站使用，您可以使用通配符*。数据库类问题 如何配置数据库数据源？在DataV控制台，选择 我的数据>数据源管理，单击+添加数据，在 添加数据 对话框中输入数据库相关配置信息，单击 确定，即可创建数据库数据源...
数据源管理常见问题
说明 如果接口数据需要被所有网站使用，您可以使用通配符*。数据库类问题 如何配置数据库数据源？在DataV控制台，选择 我的数据>数据源管理，单击+添加数据，在 添加数据 对话框中输入数据库相关配置信息，单击 确定，即可创建数据库数据源...
防盗链常见问题
为防止OSS文件被其他人盗链而产生额外的流量费用，您配置了Referer防盗链来阻止其他网站引用OSS文件，然而进行测试时，您发现防盗链并没有生效或者效果不符合预期。本文介绍OSS防盗链的常见问题以及排查方法。配置了 防盗链，但没有生效？...
创建MySQL数据源
常用于网站、应用程序和商业产品，是一种常见的主要关系数据存储系统。更多详情请参见 MySQL官网。使用限制 Dataphin仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据源。操作步骤 在Dataphin首页，单击顶部菜单栏的...
创建MySQL数据源
常用于网站、应用程序和商业产品，是一种常见的主要关系数据存储系统。更多详情请参见 MySQL官网。前提条件 若您需在Dataphin中创建基于阿里云产品的数据源，创建数据源前，需确保Dataphin的IP已添加至数据库白名单（或安全组）中，使数据...
什么是MaxCompute
MaxCompute适用于大型互联网企业的数据仓库和BI分析、网站的日志分析、电子商务网站的交易分析、用户特征和兴趣挖掘等。详细发展历程、产品荣誉及客户案例请参见 发展历程 和 客户案例。MaxCompute还深度融合了阿里云如下产品：DataWorks ...
添加DataV数据代理服务
本文档介绍在DataV中添加DataV数据代理服务数据源的方法，以及相关参数配置说明。使用DataV数据代理服务，您无需暴露数据库的公网IP，就可以连接自建的数据库，提高数据安全性。前提条件 已准备好待添加的DataV数据代理服务数据源。操作...
添加DataV数据代理服务
本文档介绍在DataV中添加DataV数据代理服务数据源的方法，以及相关参数配置说明。使用DataV数据代理服务，您无需暴露数据库的公网IP，就可以连接自建的数据库，提高数据安全性。前提条件 已准备好待添加的DataV数据代理服务数据源。操作...
配置数据质量监控
已通过数据集成将存储于OSS的网站访问日志（user_log.txt）同步至MaxCompute的ods_raw_log_d表。已通过数据开发DataStudio将数据加工为用户画像基本数据。背景信息 数据质量 是支持多种异构数据源的质量校验、通知、管理服务的一站式平台。...
配置数据质量监控
已通过数据集成将存储于OSS的网站访问日志（user_log.txt）同步至MaxCompute的ods_raw_log_d表。已通过数据开发DataStudio将数据加工为用户画像基本数据。背景信息 数据质量 是支持多种异构数据源的质量校验、通知、管理服务的一站式平台。...
什么是云数据库 Memcache 版
云数据库 Memcache 版可以极大缓解对后端存储的压力，提高网站或应用的响应速度。云数据库 Memcache 版支持 Key-Value 的数据结构，兼容 Memcached 协议的客户端都可与阿里云云数据库 Memcache 版进行通信。云数据库 Memcache 版支持即开即...
客户案例
数据库网关提供安全、可靠、低成本的数据库接入服务。本文将例举一个客户案例为您介绍如何通过数据库网关解决自身业务上的挑战。百姓网股份有限公司 行业分类：分类信息服务商 公司网站：https://www.baixing.com/ 公司介绍 百姓网...
客户案例
数据库网关提供安全、可靠、低成本的数据库接入服务。本文将例举一个客户案例为您介绍如何通过数据库网关解决自身业务上的挑战。百姓网股份有限公司 行业分类：分类信息服务商 公司网站：https://www.baixing.com/ 公司介绍 百姓网...
DLF+EMR之统一权限最佳实践
DLF 数据权限：DLF所提供的数据湖的数据权限体系，支持配置数据库、数据表、数据列、函数四种维度细粒度权限控制。详见 数据权限概述。业务场景说明 某公司有一个EMR集群，期望Hive/Spark/Presto/Impala引擎可以通过统一的数据权限，控制...
- 产品推荐
- 这些文档可能帮助您