运维中心入门

进入运维中心 登录 DataWorks控制台,单击左侧导航栏的 数据建模与开发>运维中心,在下拉框中选择对应工作空间后单击 进入运维中心。操作流程 阶段一:测试验证调度任务 步骤一:查看周期任务配置 为避免周期任务调度不符合预期,建议您在...

构建开发环境

您可以根据实际需求决定在本地或者云上构建开发环境,以便开发和调试应用。构建方案简介 EDAS为您提供三种可选方案,下面将介绍这三种方案构建开发环境的特点。构建环境 方案 说明 本地 在本地搭建轻量配置中心实现服务注册和发现,在本地...

文档修订记录

DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务,需先将已创建的数据源或集群绑定至数据开发...

开发前准备:绑定数据源或集群

若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务,需先将已创建的数据源或集群绑定至数据开发(DataStudio)模块。绑定后,才可读取数据源或集群中的数据,并进行相关开发操作。前提条件 您需根据后续要开发和调度...

成为合作伙伴

本文介绍IoT安全中心的合作伙伴计划。成为IoT安全中心合作伙伴,可将您的安全芯片、安全模组、安全RFID标签等展示给其他用户。说明 如果您的企业是海外企业,请直接 联系我们,无需按照本文内容操作。前提条件 IoT安全中心的合作伙伴计划,...

开发ODPS Spark任务

说明 由于数据开发中的ODPS Spark节点没有运行入口,因此您需要在开发环境的运维中心执行Spark任务。查看返回结果。待补数据实例运行成功后,进入其运行日志的 tracking URL 中查看运行结果,如下:False True True True True 编辑代码:...

访问配额中心有哪几种方式?

您可以通过如下两种方式访问配额中心:配额中心控制台 OpenAPI开发者门户

场景:MaxCompute引擎在不同模式工作空间访问资源与...

MaxCompute引擎在不同模式工作空间的资源访问行为差异 MaxCompute可跨项目访问资源,所以在DataWorks上,开发人员可在数据开发开发环境界面直接访问生产环境下的资源,而简单模式与标准模式由于对应的引擎项目个数,DataWorks空间环境...

功能发布记录(2023年)

2023-12 功能名称 功能描述 发布时间 发布地域 使用客户 相关文档 数据开发(DataStudio)绑定数据源 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务,需先将已创建的数据源或集群绑定至数据开发(DataStudio)...

场景:工作空间模式升级(简单模式升级标准模式)

若您当前使用的是简单模式工作空间,但希望将开发与生产环境隔离,可将简单模式工作空间升级为标准模式工作空间。本文为您介绍如何升级工作空间模式。操作须知 升级工作空间模式前,您需先了解以下内容:了解简单模式与标准模式工作空间的...

DataWorks On CDP/CDH使用说明

开始使用 DataWorks为您提供了多个功能模块,您可在数据开发(DataStudio)中进行调度任务的开发,并在开发完成后进入生产运维中心进行调度任务的监控运维。同时,提供了任务开发与发布的流程管控,助力您规范开发操作,保障开发过程的安全...

DataWorks On EMR使用说明

还提供 数据开发(DataStudio)功能,用于调度任务的开发,并与运维中心配合使用,进行调度任务的监控运维。数据建模与开发 5 DataWorks数据分析提供EMR数据分析与服务共享能力。数据分析 6 DataWorks提供EMR元数据管理与数据治理能力。...

附录:空间级预设角色与MaxCompute引擎权限的映射关系

说明 DataWorks简单模式工作空间默认无法做到权限控制,表格中的 DataWorks开发环境/MaxCompute DEV引擎项目数据权限、DataWorks生产环境/MaxCompute PROD引擎项目数据权限 仅适用于标准模式工作空间。DataWorks工作空间模式介绍,请参见 ...

SDK概述

本文为您介绍服务器迁移中心SMC提供的SDK语言版本,并列举升级版(V2.0)SDK的获取地址以及SDK的使用说明。SDK简介 SDK全称为Software Development Kit,即软件开发工具包。它是一种为开发者提供的软件开发工具集合,包含了一系列的API、...

设置全局Spark参数

您可参考 Spark官方文档 自定义全局Spark参数,并配置全局Spark参数的优先级是否高于指定模块内(数据开发、数据分析、运维中心)的SPARK参数。本文为您介绍如何设置全局Spark参数。背景信息 Apache Spark是用于进行大规模数据分析的引擎。...

DataWorks模块使用说明

使用流程概览:参考文档:数据开发概述 子模块:运维中心 功能说明:运维中心是一站式大数据运维、监控平台,支持实时查看任务的运行状态,并为异常任务提供智能诊断、重跑等运维操作。它提供智能基线功能,帮助您解决重要任务产出时间不可...

独享资源组

左上角的 图标,选择 全部产品>数据开发与运维>运维中心(工作流),进入 生产运维中心 页面,选择 周期任务。说明 虚拟节点不占用资源,所以无需也不支持修改调度资源组。如何切换数据集成任务执行时使用的数据集成资源组?切换数据集成...

mPaaS 适配荣耀厂商推送

可登录 荣耀开发者联盟 官网,进入 管理中心>我的产品>移动应用详情 页面中获取应用包名、应用 App ID 和密钥。单击 确定 按钮,保存配置。验证荣耀厂商通道推送功能 使用 Magic OS 8.0 及以上版本荣耀手机,并安装集成新版 mPaaS 推送 SDK...

什么是IoT安全运营中心

本文介绍了IoT安全运营中心的基本功能和特点。产品介绍 IoT安全运营中心(Security Operation Center)是面向物联网资产的统一安全管理系统,通过全网资产测绘、全面安全检测、实时安全防护等能力,实现物联网资产“可见、可知、可管”的...

在工作空间创建数据源或注册集群

步骤二:将数据源绑定至数据开发(DataStudio)数据源创建完成后,若您需在当前工作空间基于该数据源执行数据开发、数据分析、或使用运维中心周期性调度运行相关任务等操作,还需将数据源绑定至当前工作空间的数据开发(DataStudio)模块。...

数据开发概述

DataWorks数据开发(DataStudio)模块用于定义周期调度任务的开发及调度属性,与运维中心配合使用,面向各引擎(MaxCompute、Hologres、EMR等)提供可视化开发主界面,支持智能代码开发、多引擎混编工作流、规范化任务发布等能力,帮助您...

数据治理中心概述

数据治理中心可自动发现平台使用过程中数据存储、任务计算、代码开发、数据质量及安全等维度存在的问题,并通过健康分量化评估,从全局、工作空间、个人等多个视角,以治理报告及排行榜呈现治理成果,帮助您高效达成治理目标。同时,提供...

创建业务流程

周期业务流程与手动业务流程 DataWorks提供了 周期业务流程 和 手动业务流程 两种,以满足需要周期性调度和无需周期性调度手动触发运行的场景,这两类业务流程均可以在数据开发(DataStudio)中开发对应的开发任务,然后提交到运维中心实现...

空间管理员职责

运维中心:仅运维角色和空间管理员角色有运维中心更高的操作权限。数据开发:仅开发角色和空间管理员角色可以在数据开发进行具体的开发工作。在设置工作空间的级别时,您需要首先选择设置调度引擎执行任务时,使用 阿里云主账号 还是 阿里...

创建并配置发布环境

进入发布中心 登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据建模与开发>数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。单击顶部菜单栏的 图标,选择 全部产品>更多>发布中心,进入发布中心。说明 标准模式...

开发小助手的功能

说明:为了保证功能的完整性和独立性,离线包中心功能需要单独接入 离线包开发助手,更多详情请参见 接入开发小助手。查看应用信息 输入要查看的应用 ID,即可以查看该应用的具体信息。已安装离线包列表 点击 已安装离线包列表,即可查看 ...

配置检查项

在进行数据开发前,可通过检查项对数据开发功能相关的约束进行检查,当检查出不符合约束规范的内容时,系统会生成影响开发流程正常执行的问题事件,您可基于该事件处理暴露的问题,以保障数据开发流程可以正常执行。本文为您介绍如何查看并...

快速开始

开发一个小程序通常包括以下步骤:下载 IDE 创建小程序 下载配置文件 登录小程序 IDE 选择关联小程序 编辑代码 上传小程序 发布小程序 下载 IDE 前往小程序 下载中心,下载所需版本的小程序开发工具(IDE)。创建小程序 下载并安装小程序 ...

安全中心

您可以通过 安全中心 页面申请DataWorks工作空间内的表权限,包括开发环境和生产环境。数据管理和安全中心是什么关系?安全中心是数据管理中与权限和安全相关功能的升级替代产品。此前已经在 数据管理 模块中申请的权限和通过 odpscmd ...

智能助手使用说明

云安全中心智能助手是基于人工智能大模型技术开发的自由会话智能运营工具。该工具采用自然语言处理能力,可为您提供云安全中心产品的相关问题支持服务,覆盖云安全中心的产品咨询、使用指导、常见问题、安全领域知识问答等多种支持服务。...

MaxCompute数据权限控制详情

DataWorks通过空间预设角色或空间自定义角色与开发环境引擎Role映射,来让被授予空间角色的RAM用户,拥有该空间角色映射的开发引擎Role所拥有的MaxCompute引擎权限,但默认无生产权限,本文为您介绍预设角色权限基本情况、MaxCompute权限...

扩展程序概述

DataWorks通过OpenEvent能力为您提供消息推送订阅能力,同时您可以将服务程序注册为DataWorks的扩展程序,通过扩展程序来卡点并响应...更多扩展点的触发应用示例可参见 应用示例:数据开发过程触发事件检查、应用示例:运维中心触发事件检查。

MaxCompute数据访问权限控制

如果需要跨项目操作开发表或生产表,子账号需要在 安全中心 发起申请,待审批通过后,便可在数据开发界面对表进行相关操作。数据访问权限管控流程 数据访问控制功能支持您进行 权限申请、权限审批、权限审计 的操作,还支持您查看 权限申请...

DataWorks on EMR数据安全方案

数据安全能力:任务管理 DataWorks提供了大数据开发运维等能力,其中工作空间、安全中心等功能模块可实现对大数据计算任务的管理。工作空间:通过DataWorks的工作空间规划可以实现工作空间的人员管理、设置大数据作业可见性和可运维性。...

操作权限控制

说明 上述说明在DataWorks上的具体体现为,管理员角色和开发角色的成员,有DataWorks上大部分功能权限,有DataWorks开发环境(MaxCompute引擎开发项目)所有权限,但默认没有生产环境(MaxCompute生产项目)的操作权限。如果子账号需要在...

审批中心概述

功能介绍 在DataWorks上进行数据开发管理的过程中,您可以便捷地对表数据、数据服务API等进行权限管控,进行权限管控时,DataWorks的 安全中心 为您提供默认的权限申请审批流程,同时也支持您在 审批中心 自定义审批流程。自定义审批流程后...

RunManualDagNodes

运行手动业务流程前,您需先创建手动业务流程并提交发布至所用环境,提交发布后运维中心才会显示对应手动业务流程。创建、提交、发布业务流程,详情请参见 CreateBusiness、SubmitFile、DeployFile。调试 您可以在OpenAPI Explorer中直接...

对接使用CDH与CDP

以下简称 CDH)与CDP(Cloudera Data Platform,以下简称CDP)集群对接的能力,在保留CDH集群或CDP集群作为存储和计算引擎的前提下,您可以使用DataWorks的任务开发、调度、数据地图(元数据管理)和数据质量等一系列的数据开发和治理功能...

管理中心功能概览

在DataWorks的 管理中心,用户可以按照 工作空间维度 进行操作,包括配置工作空间的基本设施、选择合适的计算引擎、接入不同的数据源、注册开源集群、配置扩展程序,以及管理工作空间成员的权限和角色;此外,用户还可以在 全局维度 进行...

设置全局YARN资源队列

目前仅支持对数据开发(DataStudio)、数据质量、数据分析、运维中心模块设置全局YARN资源队列。前提条件 已注册EMR集群至DataWorks,详情请参见 注册EMR集群至DataWorks。设置全局YARN资源队列 进入全局YARN资源队列配置页面。进入管理...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
移动开发平台 mPaaS 云联络中心 大数据开发治理平台 DataWorks 云安全中心 数据库备份 DBS 弹性公网IP
新人特惠 爆款特惠 最新活动 免费试用