计算设置概述

在您开始创建用于研发数据的项目空间前,需要先设置Dataphin实例的计算引擎。设置Dataphin实例的计算引擎后,系统支持为项目空间添加相应的计算源,为项目空间提供计算和存储的资源。本文为您介绍Dataphin系统的计算引擎说明。权限说明 仅...

计算源概述

在机器学习平台中,创建可视化建模的工作空间时,资源请选择基于MaxCompute的计算资源组,详情请参见 资源管理概述。Hologres加速计算源:Dataphin支持为已绑定MaxCompute计算源的项目添加Hologres加速计算源,加速业务数据的查询速度。...

准备工作简介

Dataphin准备工作流程简介。...准备RAM用户。为保证项目数据安全,建议您创建RAM用户并交由其他用户使用,实现对...在创建项目空间前,您需要准备用于读取和写入数据的数据源、用于提供计算资源的计算源。具体操作,请参见 准备数据源和计算源。

步骤二:实时项目规划

Flink工作空间ID 选择Ververica Flink计算源的 Flink工作空间ID,即 flink_dataphin_default。Flink项目空间 选择Ververica Flink计算源的 项目空间。计算源名称 填写 flink_dataphin。描述 填写计算源的简单描述,例如,实时研发演示。...

步骤二:实时项目规划

Flink工作空间ID 选择Ververica Flink计算源的 Flink工作空间ID,即 flink_dataphin_default。Flink项目空间 选择Ververica Flink计算源的 项目空间。计算源名称 填写 flink_dataphin。描述 填写计算源的简单描述,例如,实时研发演示。...

到期提醒与停机策略

本文将为您介绍Dataphin的到期提醒与停机策略。...如果您336小时(14天)内未完成续费,系统将会清空所有任务并释放资源空间。系统会在实例到期的2小时、5小时、24小时、48小时、72小时、168小时后,以短信方式提醒您续费,保证数据不丢失。

离线计算任务提交说明

项目空间名称变量:如果代码中 catalog 是项目空间名称变量${catalog},则 catalog 为生产空间名称。硬编码:若代码中通过硬编码直接编写的开发空间或生产空间名称,则为原始名称;省略catalog时,系统将默认为使用${catalog}。省略catalog...

离线计算任务提交说明

项目空间名称变量:如果代码中 catalog 是项目空间名称变量${catalog},则 catalog 为生产空间名称。硬编码:若代码中通过硬编码直接编写的开发空间或生产空间名称,则为原始名称;省略catalog时,系统将默认为使用${catalog}。省略catalog...

步骤三:引入数据

本文将指导您如何将数据源的数据集成到您的创建的项目空间。背景信息 product表、customer表、orders表的集成步骤相同,仅管道名称不同。本文以集成product表为例介绍如何集成product表至项目。重要 完成product表集成后,您还需参考本文...

新建MaxCompute计算源

MaxCompute计算源用于绑定Dataphin项目空间和MaxCompute项目,为Dataphin项目提供处理离线计算任务的计算源。如果Dataphin系统的计算引擎设置为MaxCompute,则只有项目空间添加了MaxCompute计算源,才支持规范建模、即席查询、MaxCompute ...

步骤三:引入数据

本文将指导您如何将数据源的数据集成到您的创建的项目空间。背景信息 product表、customer表、orders表的集成步骤相同,仅管道名称不同。本文以集成product表为例介绍如何集成product表至项目。重要 完成product表集成后,您还需参考本文...

添加项目成员

Dev项目角色 对应Prod项目角色 项目管理员 项目管理员 开发者 运维 分析师 数据访问者 普通访客 普通访客 系统支持修改项目中的项目管理员、开发者、运维、分析师和访客角色成员的角色,及支持从项目空间中移除项目管理员、开发者、运维、...

创建Blink计算源

重要 为了保证Dataphin项目空间与Blink项目正常连接,建议填写Blink项目管理员的AccessKey。为了保证元数据正常采集,请尽量不修改Blink项目的AccessKey。单击 测试连接,测试连接的计算源。单击 提交,完成Blink计算源的创建。后续步骤 ...

设置Dataphin的计算引擎为StarRocks

在您开始创建用于研发数据的项目空间前,需要先设置Dataphin实例的计算引擎。设置Dataphin实例的计算引擎后,系统支持为项目空间添加相应的计算源,为项目空间提供计算和存储的资源。本文为您介绍如何设置Dataphin系统的计算引擎为...

创建Blink计算源

重要 为了保证Dataphin项目空间与Blink项目正常连接,建议填写Blink项目管理员的AccessKey。为了保证元数据正常采集,请尽量不修改Blink项目的AccessKey。单击 测试连接,测试连接的计算源。单击 提交,完成Blink计算源的创建。后续步骤 ...

新建MaxCompute计算源

MaxCompute计算源用于绑定Dataphin项目空间和MaxCompute项目,为Dataphin项目提供处理离线计算任务的计算源。如果Dataphin系统的计算引擎设置为MaxCompute,则只有项目空间添加了MaxCompute计算源,才支持规范建模、即席查询、MaxCompute ...

应用场景

价值:数据建设统一:数据标准规范定义。数据研发提效:自动化代码生成。战略决策高效:数据分析准确,数据需求响应及时。推荐搭配组合:Dataphin+MaxCompute MaxCompute详情请参见 什么是MaxCompute。输出主题式数据服务,提高数据化运营...

产品计费

本文档介绍全息空间的计费模式。全息店铺 全息店铺的价格分为2部分:1.硬件采购费用:VR成像仪(简称“万花筒”),单价2.5万元/台。2.全息空间拍摄建模服务:根据拍摄场所位置、拍摄面积进行收费。3D物体生成 3D物体生成分为四个计费规格...

创建OSS数据源

您可以在数据同步任务中查找此处输入的存储空间中相应的文件,没有添加的存储空间,则不能查找其中的文件。目录 如仅有特定目录下的权限,可在此指定目录路径。例如,/dataphin/。CNAME 非必填,OSS数据源的自定义域名名称。阿里云OSS...

网络连通解决方案

添加数据源访问地址至Dataphin项目空间的沙箱白名单中。如何添加沙箱白名单请参见 沙箱白名单。数据源在VPC内-VPC和Dataphin在同一地域 在Dataphin中添加数据源时,绑定数据源的VPC。添加Dataphin的IP地址(VPC网络下Dataphin的出网IP地址...

添加项目成员

Dev项目角色 对应Prod项目角色 项目管理员 项目管理员 开发者 运维 分析师 数据访问者 普通访客 普通访客 系统支持修改项目中的项目管理员、开发者、运维、分析师和访客角色成员的角色,及支持从项目空间中移除项目管理员、开发者、运维、...

变更管控

变更管控功能是指在变更环节(如提交、发布、运维操作等),通过配置...规则配置完成后,支持配置规则及策略生效灵活开关,以调整管控规则及策略配置,实现不同的管控效果,从而减少人工干预成本,也能进一步提升平台建设的规范性和稳定性。

分析平台设置

说明 过长的生命周期会导致长期占用储存空间,请合理选择。是否允许数据结果下载 开启后分析平台中Notebook计算结果将支持下载。是否开启下载审批 开启后分析平台中Notebook计算结果下载时需要进行审批。审批模版 开启后下载审批您需设置...

创建OSS数据源

您可以在数据同步任务中查找此处输入的存储空间中相应的文件,没有添加的存储空间,则不能查找其中的文件。目录 如仅有特定目录下的权限,可在此指定目录路径。例如,/dataphin/。CNAME 非必填,OSS数据源的自定义域名名称。阿里云OSS...

开发Dataphin数据源并加速数据查询

开发Dataphin数据源即将Dataphin中的逻辑表和物理表配置为供应用调用的Dataphin数据源,同时您可以为已开发的Dataphin数据源所在的计算空间添加Hologres加速计算源,以满足对查询速度有要求的业务场景。本文为您介绍如何开发Dataphin数据源...

变更管控

变更管控功能是指在变更环节(如提交、发布、运维操作等),通过配置...规则配置完成后,支持配置规则及策略生效灵活开关,以调整管控规则及策略配置,实现不同的管控效果,从而减少人工干预成本,也能进一步提升平台建设的规范性和稳定性。

Dataphin PyODPS

Exception:Dataphin odps client auth check failed,not allow to operate project Test_Project 项目空间 资源 函数 操作过程中有无权限的报错时,您需要获取对应数据对象的权限。具体操作,请参见 获取待操作数据对象的权限。使用示例 ...

创建标签项目

在机器学习平台中,创建可视化建模的工作空间时,资源选择为基于MaxCompute的计算资源组,详情请参见 资源管理概述。如果您开启了机器学习,需要配置以下参数。PAI地域:选择和Dataphin实例所在地域。AccessKey ID、AccessKey Secret:配置...

Dataphin PyODPS

Exception:Dataphin odps client auth check failed,not allow to operate project Test_Project 项目空间 资源 函数 操作过程中有无权限的报错时,您需要获取对应数据对象的权限。具体操作,请参见 获取待操作数据对象的权限。使用示例 ...

分析平台设置

说明 过长的生命周期会导致长期占用储存空间,请合理选择。是否允许数据结果下载 开启后分析平台中Notebook计算结果将支持下载。是否开启下载审批 开启后分析平台中Notebook计算结果下载时需要进行审批。审批模版 开启后下载审批您需设置...

产品概述

产品描述 Dataphin是集产品、技术、方法论于一体的智能大数据平台建设引擎,为您提供数据引入、规范定义、建模研发、资产管理、数据服务等全链路智能数据建设及治理服务。功能 描述 Dataphin全托管 全托管又称公共云多租户模式,只需购买...

设置Dataphin实例的计算引擎AnalyticDB for ...

在您开始创建用于研发数据的项目空间前,需要先设置Dataphin实例的计算引擎。设置Dataphin实例的计算引擎后,系统支持为项目空间添加相应的计算源,为项目空间提供计算和存储的资源。本文为您介绍如何设置Dataphin系统的计算引擎为...

计算设置概述

在您开始创建用于研发数据的项目空间前,需要先设置Dataphin实例的计算引擎。设置Dataphin实例的计算引擎后,系统支持为项目空间添加相应的计算源,为项目空间提供计算和存储的资源。本文为您介绍Dataphin系统的计算引擎说明。权限说明 仅...

确定需求

业务调研 充分的业务调研和需求分析是数据仓库建设的基石,直接决定数据仓库能否建设成功。在数仓建设项目启动前,您需要请相关的业务人员介绍具体的业务,以便明确各个团队的分析员、运营人员的需求,沉淀出相关文档。您可以通过调查表、...

设置Dataphin实例的计算引擎为TDH或ArgoDB

在您开始创建用于研发数据的项目空间前,需要先设置Dataphin实例的计算引擎。设置Dataphin实例的计算引擎后,系统支持为项目空间添加相应的计算源,为项目空间提供计算和存储的资源。本文为您介绍如何设置Dataphin系统的计算引擎为TDH或...

调用Dataphin数据源

在 查看Dataphin数据源 页面,查看 数据源基本信息、逻辑表信息、物理表信息 及 计算空间信息,是否符合您的业务场景。查询到符合您业务场景的Dataphin数据源后,单击 立即申请。在 申请Dataphin数据源权限 页面,申请Dataphin数据源的权限...

参数配置及使用节点参数

空间名称变量:参数值即为空间名称。本地变量:最长支持258位字符或设置为空值。跨节点变量:设置上游依赖后,可以选择上游的跨节点输出参数作为参数值。非变量:不支持定义。跨节点输出参数 重要 仅支持Python、SQL、Shell计算任务定义跨...

参数配置及使用节点参数

空间名称变量:参数值即为空间名称。本地变量:最长支持258位字符或设置为空值。跨节点变量:设置上游依赖后,可以选择上游的跨节点输出参数作为参数值。非变量:不支持定义。跨节点输出参数 重要 仅支持Python、SQL、Shell计算任务定义跨...

引入预制模型

重要 为了保证Dataphin项目空间与MaxCompute项目正常连接,建议填写MaxCompute项目管理员的AccessKey。计算源类型 仅支持计算引擎为MaxCompute。数据板块 导入的数据板块名称。项目名称 导入的项目名称。将同时生成生产项目与开发项目,...

设置Dataphin实例的计算引擎为MaxCompute

在您开始创建用于研发数据的项目空间前,需要先设置Dataphin实例的计算引擎。设置Dataphin实例的计算引擎后,系统支持为创建的项目空间添加相应的计算源,为项目空间提供计算和存储的资源。本文为您介绍如何设置Dataphin系统的计算引擎为...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
智能数据建设与治理 Dataphin 三维空间重建 物联网无线连接服务 文件存储HDFS版 物联网络管理平台 弹性公网IP
新人特惠 爆款特惠 最新活动 免费试用