1、CDP 产品介绍 https://developer.aliyun.com/live/247867 2CDH/HDP 何去何从?https://developer.aliyun.com/live/247950 3CDP 集群管理 https://developer.aliyun.com/live/248032 4如何访问CDP集群?...
重要 智能问数 属于 增值 模块,当前在邀请测试阶段,如需试用,请您联系商务运营同学。智能问数操作说明 权限配置 知识库配置 数据准备与提问注意事项
Dataphin分析平台提供专注高效的SQL查询能力与丰富的数据可视化能力。本文为您介绍如何基于Dataphin分析平台新建SQL查询。操作步骤 在Dataphin首页,单击顶部菜单栏 分析,进入 分析 平台。按照下图操作指引,进入 新建SQL查询 对话框。在 ...
Dataphin分析平台提供专注高效的SQL查询能力与丰富的数据可视化能力。本文为您介绍如何基于Dataphin分析平台新建SQL查询。操作步骤 在Dataphin首页,单击顶部菜单栏 分析,进入 分析 平台。按照下图操作指引,进入 新建SQL查询 对话框。在 ...
适用场景 计算链路 计算引擎 是否支持 离线 MaxCompute 是 Hive 是 RDS/MySQL 是 使用说明 标签对象的使用和读数据表类似,可以做为模型的数据源直接拖拽到画布中使用,在算子详情中可以查看对应标签对象的数据表信息及已上线的标签(可以...
例如,将本地数据库MySQL的数据迁移至阿里云数据库RDS中。整库迁移 适用于将本地数据中心或在ECS上自建的数据库,同步数据至离线数仓(Hive)、大数据计算服务等场景。例如,将ECS上自建的MySQL数据库的数据迁移至MaxCompute中。离线集成...
Dataphin标签平台提供了标签的离线服务,可将标签的数据周期性的导出到目标数据源;画像服务可提供通过实体ID查询个体画像的服务;标签平台也提供了实时查询实体ID对应的标签值的能力,也可通过API分页查询群组ID及对应的标签值。权限说明 ...
在将ODPS数据接入aime之前,需要授权aime访问需要接入的ODPS数据表。具体步骤如下:准备操作环境 下载并配置 MaxCompute客户端 进入ODPS命令行环境 添加aime服务账号/添加aime服务账号 add user `ALIYUN$openias`;列出账号列表,确认是否...
智能引擎 智能引擎 配置计算和存储资源的参数规则,优化逻辑表任务、SQL查询任务及设置查询引擎,以提高数据构建效率。变更管控 创建变更策略 变更策略是根据您已经创建好的变更规则,设置其生效范围和管控方式。支持在单个变更策略中配置...
Java SDK 提供Java语言对API接口的封装(数据处理、搜索等),其他功能请使用下文中的管控SDK。groupId>...
Java SDK 提供Java语言对API接口的封装(数据处理、搜索等),其他功能请使用下文中的管控SDK。groupId>...
Dataphin标签平台设置为使用标签模块功能的前提条件,包含时间字段设置及提供标签在线服务的服务数据源设置,其中时间字段设置包含标签表时间分区字段设置以及实时事件时间戳字段设置。标签表时间分区字段设置包含一、二、三级分区字段设置...
1)Java:<dependency><groupId>com.aliyun</groupId><artifactId>aliyun-java-sdk-opensearch</artifactId><version>0.11.0</version></dependency>core:<dependency><groupId>com.aliyun</groupId><artifactId>aliyun-java-sdk-core...
Dataphin可基于不同的云平台进行部署,客户或云平台需要保障云平台的系统安全。Dataphin安全责任 Dataphin负责产品及Dataphin负责部署的组件的安全,并提供保护数据安全的技术手段。及时发现产品及部署的组件的安全漏洞并修复。通过与外部...
本文档主要介绍如何添加MaxCompute数据源。操作步骤 登录LTS服务。在左侧导航栏中,选择 数据源管理>添加数据源。在 添加数据源 页面设置如下参数。参数名 说明 集群名 集群名,只支持数字与英文字母。数据源类型 选择 MaxCompute(ODPS)...
本文介绍如何添加MaxCompute(ODPS)数据源。操作步骤 登录LTS服务。如何登录,请参见 登录LTS。在左侧导航栏中,选择 数据源管理>添加数据源。在 添加数据源 页面设置如下参数。参数名 说明 名称 自定义MaxCompute(ODPS)数据源名称。...
用于定义以及管理平台实体关联的ID类型,如消费者、商家等实体关联的手机号、邮箱等。本文将指导您如何创建ID。前提条件 创建ID前需创建其需关联的实体。具体操作,请参见 创建实体。操作步骤 在Dataphin首页,单击顶部菜单栏的 规划。进入...
用户在Dataphin配置的敏感信息会采用AES256、DES、RSA等算法加密存储,敏感数据包括数据源、计算源的连接信息和用户授权的采样数据;敏感数据在Dataphin产品上脱敏显示,用户不会通过Dataphin获取到敏感数据。密钥根据不同的部署云环境进行...
Dataphin支持通过直连数据源模式、逻辑表API-SQL模式、逻辑表API-向导模式、注册API和五种方式创建API,不同任务对应不同的用途,本文为您简要说明API任务的不同用途。任务名称 任务用途 任务链接 通过直连数据源模式创建API 直连数据源...
用户在Dataphin配置的敏感信息会采用AES256、DES、RSA等算法加密存储,敏感数据包括数据源、计算源的连接信息和用户授权的采样数据;敏感数据在Dataphin产品上脱敏显示,用户不会通过Dataphin获取到敏感数据。密钥根据不同的部署云环境进行...
本文为您介绍各地域及不同网络连接方式下的Endpoint信息,以及与其他阿里云产品互访场景中的网络连通性及计费信息。背景信息 MaxCompute提供MaxCompute服务和Tunnel服务:MaxCompute服务:连接地址为Endpoint,取值由地域及网络连接方式...
Dataphin支持对数据表、数据源的权限进行查看、搜索、审计与下载,及时发现不合理的授权用户并处理,确保权限体系健康,防止权限泄露。Dataphin支持对数据表、数据源的权限变更操作进行查看、搜索、审计与下载,以此来判断授权、回收、交还...
个性化算法开发平台TPP在张家口/上海区域发布内测版本 首次上线 2021年10月 2022年 3月 功能名称 功能描述 发布时间 发布地域 相关文档 提升安全和稳定性 TPP运行时使用java security manager TPP节点调度,增加超时/失败重试机制 2022年1...
Dataphin支持对数据表、数据源的权限进行查看、搜索、审计与下载,及时发现不合理的授权用户并处理,确保权限体系健康,防止权限泄露。Dataphin支持对数据表、数据源的权限变更操作进行查看、搜索、审计与下载,以此来判断授权、回收、交还...
浏览器与服务器端访问统一使用SSL...Dataphin内部服务接口权限控制:内部RPC接口调用采用密钥和白名单方式进行控制,数据内容是二进制传输。公共云SaaS下的数据服务支持HTTPS协议访问。支持配置使用公有云的阿里云网关,支持HTTPS协议访问。
浏览器与服务器端访问统一使用SSL加密,即使用HTTPS...Dataphin内部服务接口权限控制:内部RPC接口调用采用密钥和白名单方式进行控制,数据内容是二进制传输。私有云独立部署场景下(使用自建数据服务网关),目前不支持使用HTTPS协议访问。
本文将为您介绍数据服务的Dataphin数据源服务、API服务、分组、服务单元和应用等基本概念。基本概念 说明 Dataphin数据源 配置数据表生成Dataphin数据源。服务单元 对数据表进行统一的元数据配置。应用 消费数据服务(调用API或Dataphin...
功能 是否支持 函数操作 是 MAX_PT 是 支持使用Dataphin项目名称进行检索数据。例如,Dataphin的项目英文名称为biz_cdm,该项目下有分区表biz_order、分区键为ds。则您可以执行以下语句查询数据。select*from biz_cdm.biz_order where ds=...
阿里云公共云独立部署模式下,容器服务集成对接了阿里云日志服务(LogService),可通过LogService自动采集和可视化过滤、检索。其他云平台的部署模式下,Dataphin将审计日志输出到应用所在的磁盘中,可通过其他采集工具进行日志的采集。
为了实现应用与数据服务之间的网络互通,在您开始调用API或Dataphin数据源前需要配置网络。本文为您介绍如何查看域名。查看域名 您可以关闭已开通的域名。您可以打开或关闭域名显示开关(图标),可以管控非超级管理员查看域名的权限。请...
在公共云SaaS下,Dataphin支持了沙箱执行以隔离数据访问。任务调度引擎在启动任务时,会将任务运行在内置的安全沙箱内,保障任务和服务的安全性。安全沙箱提供以下能力:限制网络请求:禁止用户任务请求敏感服务,如Dataphin内部服务等。...
通过控制数据源执行质量规则的并发度,对数据源进行保护,防止影响正常的业务。本文为您介绍如何设置数据源执行质量规则的并发度。前提条件 已创建数据源,详情请参见 Dataphin支持的数据源。操作步骤 在Dataphin首页,单击顶部菜单栏中的 ...
通过控制数据源执行质量规则的并发度,对数据源进行保护,防止影响正常的业务。本文为您介绍如何设置数据源执行质量规则的并发度。前提条件 已创建数据源,详情请参见 Dataphin支持的数据源。操作步骤 在Dataphin首页,单击顶部菜单栏中的 ...
功能 是否支持 函数操作 是 MAX_PT 是 支持使用Dataphin项目名称进行检索数据。例如,Dataphin的项目英文名称为biz_cdm,该项目下有分区表biz_order、分区键为ds。则您可以执行以下语句查询数据。select*from biz_cdm.biz_order where ds=...
Dataphin数据源管理标签以标签的形式能够更好的帮助您管理业务中常用的数据源。您可以在管理标签列表中查看数据源被引用的信息。权限说明 Dataphin仅支持 超级管理员、数据源管理员 新建及管理数据源标签。新建数据源管理标签 在Dataphin...
独立部署版本:私有云独立部署,Dataphin输出PostgreSQL数据库作为元数据库。元数据库采用一主一备或一主两备模式,保障元数据库...公有云独立部署,Dataphin元数据库采用阿里云上RDS数据库,选择跨可用区高可用版本,RDS每天自动快照备份。
Dataphin数据源管理标签以标签的形式能够更好的帮助您管理业务中常用的数据源。您可以在管理标签列表中查看数据源被引用的信息。权限说明 Dataphin仅支持 超级管理员、数据源管理员 新建及管理数据源标签。新建数据源管理标签 在Dataphin...
API详情 请参见 搜索数据,进入目标数据服务的详情页面。编号 描述 ① 概要信息 为您展示数据服务的名称。同时,您还可以执行如下操作:收藏:单击即可收藏。收藏后您可以在 目录 首页查看收藏的列表,方便后续查询。申请权限:提供API权限...
项目详情 请参见 搜索数据,进入目标项目的详情页面。编号 描述 ① 概要信息 为您展示项目名称、描述。② 资产详情 为您展示项目内的数据表 名称、创建人、存储类型、数据更新时间。您也可以单击 操作 列下的 图标,在权限管理模块,申请表...
名称 类型 描述 示例值 object 任务监控数据。PodId string 节点 ID。dlc-20210329110128-*-worker-0 Metrics array 监控数据列表。Metric 监控数据。