概念建模概述
本文为您介绍Dataphin数仓规划中概念模型的基本概念，包含主题域、实体关系图等，以便于您更好地理解和使用Dataphin进行数仓规划。背景信息 在建设数据中台的流程中，一般的首要任务是对整个业务进行前置调研，如先盘点出参与业务的人员、...
概念建模概述
本文为您介绍Dataphin数仓规划中概念模型的基本概念，包含主题域、实体关系图等，以便于您更好地理解和使用Dataphin进行数仓规划。背景信息 在建设数据中台的流程中，一般的首要任务是对整个业务进行前置调研，如先盘点出参与业务的人员、...
VPN网关常见问题
例如本地数据中心计划使用42.XX.XX.1这个地址与阿里云VPN网关建立IPsec-VPN连接，但是由于本地数据中心使用了SNAT功能，使用42.XX.XX.1地址发出的流量经过SNAT转换后会变成由47.XX.XX.21地址发出的流量，那么在阿里云VPN网关管理控制台创建...
新建ArgoDB计算源
能够使用标准的SQL语法进行业务的建设，并且能够给用户提供多模型数据分析、实时数据处理、存储与计算模块解耦、异构服务器混合部署等先进技术能力。更多详情，请参见 ArgoDB官网。操作步骤 请参见 数仓规划入口，进入数仓 规划 页面。在数...
规范定义最佳实践
基于Dataphin建模理论和业务需求，明确并规范定义统计指标，以便设计出易于业务使用的数据仓库。背景信息 规范定义是指以维度建模作为理论基础，构建总线矩阵，划分并定义主题域、业务过程、维度、原子指标、统计周期和派生指标。在您开始...
Dataphin新手引导
导入预制模型 是Dataphin内置零售行业数据模型，可快速导入体验模型建设功能。新建流程引导 帮助您从零开始逐步完成数据规划与研发步骤，了解Dataphin的基础操作步骤。单击 去导入 按钮，进入 管理中心-预制模型-模型市场 页面，详情请参见...
规范定义最佳实践
基于Dataphin建模理论和业务需求，明确并规范定义统计指标，以便设计出易于业务使用的数据仓库。背景信息 规范定义是指以维度建模作为理论基础，构建总线矩阵，划分并定义主题域、业务过程、维度、原子指标、统计周期和派生指标。在您开始...
SAVEPOINT
使用RELEASE SAVEPOINT销毁一个保存点，但保持在它被建立之后执行的命令的效果。保存点只能在一个事务块内建立。可以在一个事务内定义多个保存点。示例 要建立一个保存点并且后来撤销在它建立之后执行的所有命令的效果：BEGIN;INSERT INTO ...
用户角色和权限
权限功能是系统安全的重要基础保障，作为企业数据中台建设和数字化转型的核心产品，Dataphin提供了完整的权限体系，来帮助您构建完善安全的权限系统，保障数据安全。本文为您介绍Dataphin权限体系、用户和角色、角色权限概览等，帮助您了解...
FTP客户端使用说明
在开发网站的时候，您可以使用FTP客户端将网站程序或者网页通过FTP协议上传到Web服务器。FTP的工作方式分为主动方式（PORT）和被动方式（PASV），工作流程如下所示：工作流程 主动方式（PORT）被动方式（PASV）发送连接请求 FTP客户端向...
资产安全概述
通过数据分类分级、敏感数据识别、敏感数据脱敏等措施，帮助客户建立完善的数据安全体系，确保数据使用的安全合规性。前提条件 已购买 资产安全 增值服务，详情请参见 开通Dataphin。应用场景 基于Dataphin实现数据安全保护的一些典型的...
资产安全概述
通过数据分类分级、敏感数据识别、敏感数据脱敏等措施，帮助客户建立完善的数据安全体系，确保数据使用的安全合规性。前提条件 已购买 资产安全 增值服务并且当前租户已开通 资产安全 模块。应用场景 基于Dataphin实现数据安全保护的一些...
什么是Dataphin
通过数据分类分级、敏感数据识别、敏感数据脱敏等措施，帮助客户建立完善的数据安全体系，确保数据使用的安全合规。资产安全 数据服务 数据服务为您提供高效、便捷的主题式查询功能及有效的全链路企业内API生命周期托管，真正实现低门槛API...
网站建设方案书
网站建设方案书需包含的内容 网站建设方案书无固定模板，您可以根据网站的实际情况填写，但需要包含以下内容：网站内容及栏目介绍，需配上设计图。人员及资金安排，包括人员的资质、能力、背景等。重要 如果是个人开办网站，需写明是全职或...
数据传输加密
浏览器与服务器端访问统一使用SSL加密，即使用HTTPS协议访问。Dataphin内部服务接口权限控制：内部RPC接口调用采用密钥和白名单方式进行控制，数据内容是二进制传输。私有云独立部署场景下（使用自建数据服务网关），目前不支持使用HTTPS...
准备工作简介
如果您使用RAM用户对Dataphin进行精细的权限管理，则需要将其他人员使用的RAM用户账号同步至Dataphin中，才可以使用Dataphin。具体操作，请参见 同步RAM用户账号至Dataphin。设置Dataphin实例的计算引擎。在开始使用Dataphin前，您需要完成...
静态脱敏
步骤二：查看脱敏算法说明 脱敏算法运用哈希脱敏、遮盖掩码等方式对敏感数据（如姓名、账号、手机号等）进行脱敏处理，您可查看脱敏算法的使用说明，了解其使用方式。详情请参见 脱敏算法页面介绍。步骤三：测试脱敏算法 根据上述步骤二...
静态脱敏
步骤二：查看脱敏算法说明 脱敏算法运用哈希脱敏、遮盖掩码等方式对敏感数据（如姓名、账号、手机号等）进行脱敏处理，您可查看脱敏算法的使用说明，了解其使用方式。详情请参见 脱敏算法页面介绍。步骤三：测试脱敏算法 根据上述步骤二...
编码规范
重要 因为关闭使用 select*语法的权限，可能会造成已经使用了 select*和 SELECT*语法的生产任务运行失败，因此需确保生产任务中没有 select*和 SELECT*语法。您可以在全局代码搜索入口中，输入 select*和 SELECT*查询。更多信息，请参见 ...
注册调度集群
指定租户：选择可使用当前调度集群的租户，适用于需要管控资源使用范围的场景。单击 完成。后续步骤 完成调度集群注册后，还需要在指定集群完成应用安装部署等连接配置，注册的调度集群才可正常使用。具体操作，请参见 配置集群连接。
配置Spark SQL任务参数
Spark SQL配置使用Livy Spark SQL配置使用Livy时，支持以下任务参数。参数名称 描述 livy.session.driverMemory 驱动程序进程使用的内存量。livy.session.driverCores 用于驱动程序进程的核心数。livy.session.executorMemory 每个执行程序...
数据传输加密
浏览器与服务器端访问统一使用SSL加密，即使用HTTPS协议访问。Dataphin内部服务接口权限控制：内部RPC接口调用采用密钥和白名单方式进行控制，数据内容是二进制传输。公共云SaaS下的数据服务支持HTTPS协议访问。支持配置使用公有云的阿里云...
编码规范
重要 因为关闭使用 select*语法的权限，可能会造成已经使用了 select*和 SELECT*语法的生产任务运行失败，因此需确保生产任务中没有 select*和 SELECT*语法。您可以在全局代码搜索入口中，输入 select*和 SELECT*查询。更多信息，请参见 ...
管理服务单元权限
如果您需要使用他人的服务单元生成API，则需要申请服务单元的使用权限。前提条件 已购买数据服务模块，详情请参见 开通Dataphin。申请服务单元权限 在Dataphin首页，单击顶部菜单栏的 管理中心。按照下图操作指引，进入 服务单元权限申请 ...
资源治理概述
Dataphin治理功能助您完成数据使用消耗的分析，全局把控计算与存储成本，提升使用效率。前提条件 已购买资源治理增值服务，详情请参见 开通Dataphin。使用说明 资源治理的统计不包括计算引擎为Hologres的项目，也不支持对这些项目的治理。...
资源监控
开启后，所有租户均可在运维中心查看当前Dataphin实例全局调度资源的分配使用情况、资源消耗趋势及租户下的待优化任务列表，帮助您进一步评估资源利用率及时进行扩缩容，并针对资源配置不合理的任务进行调优。更多信息，请参见 调度资源...
准备阿里云账号
重要 为保证AccessKey ID和AccessKey Secret的安全性，请勿借给他人使用，一旦有泄漏的风险，请及时禁用或更新AccessKey。AccessKey只在创建时显示AccessKey ID和AccessKey Secret，不提供查询功能，请妥善保管。禁用AccessKey后，使用该...
函数操作
功能 是否支持 函数操作 是 MAX_PT 是 支持使用Dataphin项目名称进行检索数据。例如，Dataphin的项目英文名称为biz_cdm，该项目下有分区表biz_order、分区键为ds。则您可以执行以下语句查询数据。select*from biz_cdm.biz_order where ds=...
申请资产权限
上架到资产市场的标签，可以被市场成员申请至项目中进行使用。申请至项目中的标签可以选择规则组合方式加工新标签；申请至应用的标签可以创建标签离线服务、实时查询服务，进行标签应用。本文将指导您如何申请标签权限。申请标签权限 在...
管理中心概述
在使用Dataphin前，超级管理员需要通过管理中心添加Dataphin成员及设置Dataphin实例的计算引擎。同时您也可以配置计算和存储资源的规则，优化逻辑表任务、SQL查询任务及设置查询引擎，以提高数据构建效率。使用限制 仅支持超级管理员在管理...
配置集群连接
操作步骤 步骤一：机器打标 登录目标集群，将可用于Dataphin任务调度的机器使用以下命令进行打标，后续使用该集群资源组的任务将在已标记的机器上执行。请替换命令中的node name信息，指向对应的集群机器。kubectl label node${node-name} ...
函数操作
功能 是否支持 函数操作 是 MAX_PT 是 支持使用Dataphin项目名称进行检索数据。例如，Dataphin的项目英文名称为biz_cdm，该项目下有分区表biz_order、分区键为ds。则您可以执行以下语句查询数据。select*from biz_cdm.biz_order where ds=...
登录认证概述
为了安全地访问Dataphin，您需要在使用Dataphin前进行登录认证，即提供其身份证明。Dataphin登录认证方式支持SAML、OAuth2.0协议的SSO（单点登录）及阿里云访问控制。您可以通过Dataphin支持的协议将企业已有的认证系统集成至Dataphin，以...
日志审计
操作审计（ActionTrail）帮助您监控并记录阿里云账号的活动，包括通过阿里云控制台、开发者工具对云上产品及服务的访问和使用行为。您可以将这些行为事件下载或保存到日志服务SLS或对象存储OSS上，然后进行行为分析、安全分析、资源变更...
创建ID
用于定义以及管理平台实体关联的ID类型，如消费者、商家等实体关联的手机号、邮箱等。本文将指导您如何创建ID。...后续步骤 完成ID创建后，在创建标签时您可使用该ID及对应实体进行标签开发。具体操作，请参见 离线标签概述。
用户中心概述
资源统计 当前售卖资源的使用情况及购买的售卖规格说明，便于您可以根据业务情况及时做出业务决策，详情请参见 查看资源使用情况。到期时间 可查看软件的到期时间。升级 如果您购买的Dataphin实例规格无法满足您当前的业务需求，可以通过...
网络方案概述
使用阿里云Dataphin可以实现零部署成本、零运维成本构建智能大数据研发与治理平台。使用阿里云Dataphin时，若已有的数据源部署在本地IDC机房，首先需要打通本地IDC机房与阿里云Dataphin网络。本文将介绍本地IDC机房数据源与阿里云Dataphin...
用户中心概述
资源统计 当前售卖资源的使用情况及购买的售卖规格说明，便于您可以根据业务情况及时做出业务决策，详情请参见 查看资源使用情况。到期时间 可查看软件的到期时间。升级 如果您购买的Dataphin实例规格无法满足您当前的业务需求，可以通过...
申请、交还应用权限
如果需要使用服务单元创建API，则您选择 使用权限。权限账号 系统默认选择个人账号。有效期 账号的有效期支持选择 30天、90天、180天、长期 或 自定义。申请原因 填写申请应用的原因，不超过128字符。单击 提交。您可以在任务中心查看已...
不同引擎支持的脱敏方式
计算引擎 脱敏方式 支持的安全算法 MaxCompute 安全策略算法包、数据库内置函数 若脱敏方式为安全策略算法包，则支持所有脱敏算法，且支持使用FPE加密算法进行脱敏。若脱敏方式为数据库内置函数，则不支持高斯、sha256、sha384、sha512、加...
- 产品推荐
- 这些文档可能帮助您