逻辑表运行参数配置

空间名称变量:参数值即为空间名称,不支持设置。本地变量:最长支持256位字符或设置为空值。跨节点变量:设置上游依赖后,可以选择上游的跨节点输出参数作为参数值。非变量:不支持定义。单击 保存,完成逻辑表 运行参数 配置。

逻辑表运行参数配置

空间名称变量:参数值即为空间名称,不支持设置。本地变量:最长支持256位字符或设置为空值。跨节点变量:设置上游依赖后,可以选择上游的跨节点输出参数作为参数值。非变量:不支持定义。单击 保存,完成逻辑表 运行参数 配置。

Dataphin出网IP地址

在连通业务数据库与Dataphin间的网络时,您需要将不同网络环境下Dataphin的出网IP地址添加至业务数据库的白名单中。本文为您介绍不同网络环境下Dataphin的出网IP地址。VPC网络下Dataphin的出网IP地址 地域(推荐)通用IP地址 地域IP地址 ...

DDL语句

修改表的注释 是 修改表的修改时间 是 修改表的聚簇属性 支持增加聚簇属性 不支持删除聚簇属性 重命名表 是 删除表 是 查看表或视图信息 是 查看分区信息 是 列出项目空间下的表和试图 是 列出所有分区 是 修改表的所有人 否 清空非分区...

安全白皮书概述

Dataphin面向各行各业大数据建设、管理及应用诉求,一站式提供从数据接入到数据消费全链路的智能数据建设与资产治理的大数据能力,包括产品、技术和方法论等,可帮助企业一站式构建生产经济、质量可靠、安全稳定、消费便捷的企业级数据资产...

DDL语句

修改表的注释 是 修改表的修改时间 是 修改表的聚簇属性 支持增加聚簇属性 不支持删除聚簇属性 重命名表 是 删除表 是 查看表或视图信息 是 查看分区信息 是 列出项目空间下的表和视图 是 列出所有分区 是 修改表的所有人 否 清空非分区...

漏洞管理

渗透性测试 经Dataphin授权,绿盟科技渗透测试小组对产品进行了渗透性测试,通过各种主流的攻击技术对网络、系统做模拟攻击测试,以发现网络、系统中存在的安全漏洞和风险点。渗透测试流程定义为信息收集、渗透测试、本地信息收集、权限...

离线数仓构建流程概述

使用Dataphin进行离线数仓建设的基本流程如下:主流程 描述 操作指导 准备工作 使用Dataphin进行离线数仓建设前您需完成相关云资源的准备。云资源准备包括阿里云账号资源准备、Dataphin开通与AccessKey配置、MaxCompute计算源的开通与配置...

离线数仓构建流程概述

使用Dataphin进行离线数仓建设的基本流程如下:主流程 描述 操作指导 准备工作 使用Dataphin进行离线数仓建设前您需完成相关云资源的准备。云资源准备包括阿里云账号资源准备、Dataphin开通与AccessKey配置、MaxCompute计算源的开通与配置...

上传资源及引用

①区域选择编码研发的项目空间,如果您选择了Dev-Prod模式的项目空间,则需要在区域②选择为 Dev。在 新建资源 对话框中,配置参数。参数 描述 类型 选择上传文件的 类型。系统默认支持上传 file(.xls,.xlsx,.doc,.docx,.txt,.csv)、...

上传资源及引用

①区域选择编码研发的项目空间,如果您选择了Dev-Prod模式的项目空间,则需要在区域②选择为 Dev。在 新建资源 对话框中,配置参数。参数 描述 类型 选择上传文件的 类型。系统默认支持上传 file(.xls,.xlsx,.doc,.docx,.txt,.csv)、...

快速入门

如果您是首次使用智能数据建设与治理Dataphin,您可以参考快速入门文档,了解如何购买实例并接入服务端。Dataphin全托管 Dataphin全托管快速入门 Dataphin半托管 Dataphin半托管快速入门

计算设置概述

在您开始创建用于研发数据的项目空间前,需要先设置Dataphin实例的计算引擎。设置Dataphin实例的计算引擎后,系统支持为项目空间添加相应的计算源,为项目空间提供计算和存储的资源。本文为您介绍Dataphin系统的计算引擎说明。权限说明 仅...

数据源白名单配置

若您需在Dataphin中创建基于阿里云产品的数据源,创建数据源前,需确保Dataphin的IP已添加至数据库白名单(或安全组)中,使数据源与Dataphin网络互通。下表为阿里云数据库IP白名单设置的操作指引,您可根据阿里云的产品名称查看对应操作...

计算源概述

在机器学习平台中,创建可视化建模的工作空间时,资源请选择基于MaxCompute的计算资源组,详情请参见 资源管理概述。Hologres加速计算源:Dataphin支持为已绑定MaxCompute计算源的项目添加Hologres加速计算源,加速业务数据的查询速度。...

准备工作简介

Dataphin准备工作流程简介。...准备RAM用户。为保证项目数据安全,建议您创建RAM用户并交由其他用户使用,实现对...在创建项目空间前,您需要准备用于读取和写入数据的数据源、用于提供计算资源的计算源。具体操作,请参见 准备数据源和计算源。

到期提醒与停机策略

本文将为您介绍Dataphin的到期提醒与停机策略。...如果您336小时(14天)内未完成续费,系统将会清空所有任务并释放资源空间。系统会在实例到期的2小时、5小时、24小时、48小时、72小时、168小时后,以短信方式提醒您续费,保证数据不丢失。

添加成员并设置角色

超级管理员创建了服务项目后,如果需要添加成员协助开发,您可以将 管理中心-成员列表...后续步骤 完成服务项目成员添加并设置成员后,您就可以配置应用访问数据服务的网络,以实现应用与数据服务之间的网络互通。具体操作,请参见 网络配置。

离线计算任务提交说明

项目空间名称变量:如果代码中 catalog 是项目空间名称变量${catalog},则 catalog 为生产空间名称。硬编码:若代码中通过硬编码直接编写的开发空间或生产空间名称,则为原始名称;省略catalog时,系统将默认为使用${catalog}。省略catalog...

离线计算任务提交说明

项目空间名称变量:如果代码中 catalog 是项目空间名称变量${catalog},则 catalog 为生产空间名称。硬编码:若代码中通过硬编码直接编写的开发空间或生产空间名称,则为原始名称;省略catalog时,系统将默认为使用${catalog}。省略catalog...

步骤三:引入数据

本文将指导您如何将数据源的数据集成到您的创建的项目空间。背景信息 product表、customer表、orders表的集成步骤相同,仅管道名称不同。本文以集成product表为例介绍如何集成product表至项目。重要 完成product表集成后,您还需参考本文...

新建MaxCompute计算源

MaxCompute计算源用于绑定Dataphin项目空间和MaxCompute项目,为Dataphin项目提供处理离线计算任务的计算源。如果Dataphin系统的计算引擎设置为MaxCompute,则只有项目空间添加了MaxCompute计算源,才支持规范建模、即席查询、MaxCompute ...

步骤三:引入数据

本文将指导您如何将数据源的数据集成到您的创建的项目空间。背景信息 product表、customer表、orders表的集成步骤相同,仅管道名称不同。本文以集成product表为例介绍如何集成product表至项目。重要 完成product表集成后,您还需参考本文...

添加项目成员

Dev项目角色 对应Prod项目角色 项目管理员 项目管理员 开发者 运维 分析师 数据访问者 普通访客 普通访客 系统支持修改项目中的项目管理员、开发者、运维、分析师和访客角色成员的角色,及支持从项目空间中移除项目管理员、开发者、运维、...

创建Blink计算源

重要 为了保证Dataphin项目空间与Blink项目正常连接,建议填写Blink项目管理员的AccessKey。为了保证元数据正常采集,请尽量不修改Blink项目的AccessKey。单击 测试连接,测试连接的计算源。单击 提交,完成Blink计算源的创建。后续步骤 ...

设置Dataphin的计算引擎为StarRocks

在您开始创建用于研发数据的项目空间前,需要先设置Dataphin实例的计算引擎。设置Dataphin实例的计算引擎后,系统支持为项目空间添加相应的计算源,为项目空间提供计算和存储的资源。本文为您介绍如何设置Dataphin系统的计算引擎为...

创建Blink计算源

重要 为了保证Dataphin项目空间与Blink项目正常连接,建议填写Blink项目管理员的AccessKey。为了保证元数据正常采集,请尽量不修改Blink项目的AccessKey。单击 测试连接,测试连接的计算源。单击 提交,完成Blink计算源的创建。后续步骤 ...

新建MaxCompute计算源

MaxCompute计算源用于绑定Dataphin项目空间和MaxCompute项目,为Dataphin项目提供处理离线计算任务的计算源。如果Dataphin系统的计算引擎设置为MaxCompute,则只有项目空间添加了MaxCompute计算源,才支持规范建模、即席查询、MaxCompute ...

安全责任共担

客户安全责任 客户应维护基础设置的安全,如物理、硬件、虚拟化、网络、操作系统的安全,当系统内核出现重大安全漏洞时客户需要及时升级系统内核修复漏洞,Datpahin发布新版本修复安全漏洞时,需及时升级Dataphin的安全版本。客户基于...

应用场景

价值:数据建设统一:数据标准规范定义。数据研发提效:自动化代码生成。战略决策高效:数据分析准确,数据需求响应及时。推荐搭配组合:Dataphin+MaxCompute MaxCompute详情请参见 什么是MaxCompute。输出主题式数据服务,提高数据化运营...

产品计费

本文档介绍全息空间的计费模式。全息店铺 全息店铺的价格分为2部分:1.硬件采购费用:VR成像仪(简称“万花筒”),单价2.5万元/台。2.全息空间拍摄建模服务:根据拍摄场所位置、拍摄面积进行收费。3D物体生成 3D物体生成分为四个计费规格...

创建OSS数据源

您可以在数据同步任务中查找此处输入的存储空间中相应的文件,没有添加的存储空间,则不能查找其中的文件。目录 如仅有特定目录下的权限,可在此指定目录路径。例如,/dataphin/。CNAME 非必填,OSS数据源的自定义域名名称。阿里云OSS...

添加项目成员

Dev项目角色 对应Prod项目角色 项目管理员 项目管理员 开发者 运维 分析师 数据访问者 普通访客 普通访客 系统支持修改项目中的项目管理员、开发者、运维、分析师和访客角色成员的角色,及支持从项目空间中移除项目管理员、开发者、运维、...

变更管控

变更管控功能是指在变更环节(如提交、发布、运维操作等),通过配置...规则配置完成后,支持配置规则及策略生效灵活开关,以调整管控规则及策略配置,实现不同的管控效果,从而减少人工干预成本,也能进一步提升平台建设的规范性和稳定性。

分析平台设置

说明 过长的生命周期会导致长期占用储存空间,请合理选择。是否允许数据结果下载 开启后分析平台中Notebook计算结果将支持下载。是否开启下载审批 开启后分析平台中Notebook计算结果下载时需要进行审批。审批模版 开启后下载审批您需设置...

新建自定义数据源

如果连接测试失败,您可以根据网络连通常见问题进行排查。详细内容,请参见 附录:网络连通解决方案。测试成功后,单击 确定,完成自定义数据源的创建。后续步骤 完成数据源的创建后,您可将数据源的数据引入至Dataphin。更多信息,请参见 ...

开发Dataphin数据源并加速数据查询

开发Dataphin数据源即将Dataphin中的逻辑表和物理表配置为供应用调用的Dataphin数据源,同时您可以为已开发的Dataphin数据源所在的计算空间添加Hologres加速计算源,以满足对查询速度有要求的业务场景。本文为您介绍如何开发Dataphin数据源...

变更管控

变更管控功能是指在变更环节(如提交、发布、运维操作等),通过配置...规则配置完成后,支持配置规则及策略生效灵活开关,以调整管控规则及策略配置,实现不同的管控效果,从而减少人工干预成本,也能进一步提升平台建设的规范性和稳定性。

Dataphin PyODPS

Exception:Dataphin odps client auth check failed,not allow to operate project Test_Project 项目空间 资源 函数 操作过程中有无权限的报错时,您需要获取对应数据对象的权限。具体操作,请参见 获取待操作数据对象的权限。使用示例 ...

创建Log Service数据源

Dataphin连接Log Service时,可以选择Log Service在VPC网络或公网环境下对应的Endpoint,Log Service的Endpoint请参见 服务入口,通常,VPC网络较公网稳定,建议您选择VPC网络连通Dataphin和Log Service。权限说明 Dataphin仅支持 超级管理...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
NAT网关 共享流量包 高速通道 负载均衡 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用