采集数据
说明 在数据集成同步任务配置前，您可以在DataWorks的 数据源 页面，配置好您需要同步的源端和目标端数据库或数据仓库的相关信息，以便在同步任务配置过程中，可通过选择数据源名称来控制同步读取和写入的数据库或数据仓库。本教程提供数据...
网站修改
搭建在线交易网站流程 搭建电商平台网站流程 搭建短视频录播网站流程 搭建会员制度收费网站流程 搭建互联网文化产品网站流程 开发App场景 开发电商平台App流程 开发短视频录播App流程 开发教育类App流程 开发旅游类App流程 开发网约车类App...
使用指南
业务合约开发 账本数据访问开发流程 用户智能合约使用账本数据访问 API 接口，开发流程如下：在 BaaS 平台上获取账本数据合约名称。获取账本数据访问 API 接口定义（ChainDataInterface.sol）。在用户合约中引入账本数据访问 API 定义。...
开发流程
常见的使用场景如下所示，您可以按照流程引导，使用子产品模块：云原生开发场景 区域 描述 相关文档 ① 高质量的数据集是高精度模型的基础，也是数据准备的核心目标。您可以通过数据集管理模块将本地数据、阿里云存储中的数据以及公共数据...
概述
关于如何自定义逻辑流操作，详细操作请参见 开发流程。自定义模块 当您需要对一个特定领域的问题创建一个完整的解决方案时，您可以尝试使用自定义模块将解决方案进行封装，以便在多个项目中复用。模块可以承载解决方案所需要的组件、页面、...
MaxFrame概述
MaxFrame是由阿里云自研的分布式计算框架，支持Python编程接口、兼容Pandas接口且自动进行分布式计算，同时可直接使用MaxCompute计算资源及数据接口，与MaxCompute Notebook、镜像管理等功能共同构成了MaxCompute完整的Python开发生态。...
MaxCompute UDF概述
UDF（User-Defined Function）即自定义函数，当MaxCompute提供的内建函数无法支撑您的业务实现时，您可以根据本文中的开发流程及使用示例，自行编写代码逻辑创建自定义函数，以满足多样化业务需求。背景信息 广义的UDF定义是 自定义标量...
开发计划
概述 提供开发计划管理功能模块，对埋点开发流程进行工具化管理，实现埋点任务的线上分发与线上流转。从需求阶段、开发阶段、测试阶段到发布阶段每个环节需要对应不同角色进行管理，涉及产品、研发、测试三种角色，建立开发计划、埋点需求...
功能发布记录 2022年之前
DataWorks的数据治理中心从全局视角、工作空间视角、个人视角，自动发现并量化平台使用过程中数据存储、任务计算、代码开发、数据质量及数据安全等维度存在的待治理问题，并通过健康分模型进行统计，以治理报告及治理排行榜的形式呈现治理...
迁移Function Studio代码至云效服务平台
步骤一：在云效创建代码库 进入 云效平台代码库，新建用于存放Function Studio 数据的代码库（即Function Studio中待迁移代码所需关联的远程仓库）。操作详情请参见 创建代码库。本文示例创建代码库 Demo2023_Function。步骤二：在云效代码...
使用流程
业务合作流程 在业务合作流程中，分为线下沟通流程和平台参与流程，具体业务合作流程参见以下流程图。产品使用流程 多方安全建模服务可以在保证多方原始数据不离开本地前提下，通过交换信息量完成模型训练。模型训练完成后，各参与方只持有...
概述
本文为您介绍使用MaxCompute Studio开发Java程序的流程以及相关目录。开发流程 通过MaxCompute Studio开发Java程序的流程如下：创建MaxCompute Java Module。开发Java程序。您可以参考如下示例开发不同的Java程序：开发UDF 开发MapReduce ...
创建并使用PAI Designer
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。右键单击目标业务流程，选择 新建节点>算法>PAI Designer。在 新建节点 对话框中输入节点 名称，并选择 路径，单击 ...
功能发布记录（2022年）
实现使用开发环境数据库进行测试、使用生产环境数据库进行接口发布的需求。2022.11.29 所有地域 所有DataWorks用户 通过向导模式生成API DataWorks数据地图支持申请Hive表权限 DataWorks 数据地图>EMR Hive表详情 页面，新增 申请权限 按钮...
加工数据
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。在 数据开发 页面，展开目标业务流程。右键单击 MaxCompute，选择 新建表。在 新建表 对话框中，输入表名称，单击 新建...
总览
故本教程也将基于此场景，从创建 Android 原生工程，到接入 mPaaS，再到接入小程序进行开发，最后到发布小程序并在 App 中打开，对整个开发流程进行完整的演示。接入方式选择 移动开发平台 mPaaS 支持多种 不同的接入方式，如果您想要像...
功能发布记录（2024年）
2024.2.22 所有地域 所有DataWorks用户 账单数据订阅及查询分析 新增在DataWorks使用 CDP/CDH的相关介绍 为您介绍在DataWorks上使用CDP/CDH的基本开发流程，以及相关费用说明、环境准备、权限控制等内容。2024.2.21 所有地域 所有DataWorks...
代码评审
开启强制代码评审并配置评审信息 登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。进入 安全设置与其他 界面。在DataStudio页面单击左下角的 图标，进入 设置 页面。...
功能特性
监控指标 流程开发 Workflow Studio 云工作流提供一个低代码、可视化的工作流设计器Workflow Studio，您可以直接在Workflow Studio创建和编辑工作流流程、为流程中各步骤配置输入输出过滤规则以及配置错误处理规则等。Workflow Studio界面...
任务调度属性配置概述
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。进入调度配置页面。在数据开发（DataStudio）界面，您需找到目标节点，进入该节点的编辑页面。单击节点编辑页面右侧...
天任务依赖分钟任务最佳实践
进入业务流程开发面板，鼠标单击 离线同步，配置新建节点的信息。单击 确认。以同样的方式再新建一个ODPS SQL节点。通过拖拽连线，设置离线同步节点为ODPS SQL节点的上游。数据同步节点用来同步每5分钟调度一次的MySQL数据至MaxCompute。...
与本地 CI/CD hook 集成
在本地环境下，云开发平台在不影响原有开发流程的前提下提供 hook 文件支撑项目本地 CI/CD，让您的原有项目轻松升级到云原生 Serverless 架构。Hook 文件需要集成在代码托管平台的触发器逻辑中，文档以 Gitlab 举例。Gitlab 提供了两种钩子...
什么是数据库网关
使用指引 如果您是第一次使用数据库网关，您可以参考下述步骤开始使用：准备工作 新建数据库网关 添加数据库 为什么选择数据库网关 数据库网关提供安全可靠、低成本的数据库接入服务，通过数据库网关您可以安全且低成本地将第三方云或本地...
设计阶段
设计工作包含数据探查和系分设计两部分：数据探查旨在了解来源数据的数据形态，例如数据质量、数据分布等。结合业务场景，帮助分析和判断需求实现的可行性以及找出潜在的数据问题和风险。系分设计则包括表设计、Mapping设计和调度设计等最...
DB管理
本文为您介绍在交互式分析Hologres管理控制台的Database管理页面，如何创建并删除数据库，并为数据库选择对应的权限策略。授权数据库 您可以在DB管理页面，使用可视化方式创建数据库。登录 Hologres管理控制台，单击 前往HoloWeb，进入...
采集数据
本文为您介绍如何新建OSS和RDS数据源来访问本教程所提供的用户信息与网站日志数据，配置数据同步链路至私有OSS数据源，并通过EMR Hive节点建表去查询同步后的数据，完成数据同步的操作过程。前提条件 开始本文的操作前，请准备好需要使用的...
创建MaxCompute数据源
创建完成后，可在DataWorks的各功能模块使用该数据源连接MaxCompute项目，进行相应的数据同步、数据开发、数据分析等操作。前提条件 已购买MaxCompute，详情请参见 开通MaxCompute。说明 建议购买MaxCompute的 地域 与创建MaxCompute数据源...
创建EMR MR节点
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。创建 业务流程。如果您已有 业务流程，则可以忽略该步骤。鼠标悬停至 图标，选择 新建业务流程。在 新建业务流程 ...
如何使用RPA流程开发HTTP请求
环境准备 HTTP请求依赖于Python的request库（RPA已内置），可直接在流程开发时引入 HTTP的一些参数格式的处理、请求返回体的解析等，可能涉及json处理，因此需要引入json库（RPA已内置）综上，在RPA编辑器中，引入依赖如下图 开发示例 本文...
云产品集成
您可以使用 DMS 录入云数据库 OceanBase 的数据，通过 DMS 的全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能，帮助企业高效、安全地挖掘数据价值，助力企业数字化转型。什么是数据管理DMS 支持的数据库...
流程管控
DataWorks提供了全链路的数据开发治理能力，为您提供了统一的数据开发治理流程，同时也支持您在DataWorks的默认流程上基于自己的业务需求在关键的流程节点进行流程管控。本文为您介绍DataWorks在数据开发过程中支持的流程管控能力。背景...
CREATE DATABASE
语法 CREATE DATABASE[IF NOT EXISTS]db_name 参数 db_name：数据库名。密码规则如下：长度不超过64个字符。以小写字符开头。可包含字母、数字以及下划线（_）。不能包含连续两个及以上的下划线（_）。不能是analyticdb，analyticdb是内置...
CREATE DATABASE
本文介绍创建数据库的基本语法。CREATE DATABASE基本语法如下：CREATE DATABASE[IF NOT EXISTS]db_name[ON CLUSTER cluster];参数说明：db_name：数据库名。以小写字母开头，可包含字母、数字以及下划线（_），但不能包含连续两个及以上的...
ALTER DATABASE
如果想要修改时序数据库的指定属性，或为其添加新的数据库属性，您可以使用 ALTER DATABASE 语句。引擎与版本 ALTER DATABASE语法 仅适用于时序引擎。无版本限制。语法 alter_database_statement:=ALTER DATABASE database_identifier[WITH...
管理数据库
设置以下参数：参数 说明 数据库（DB）名称 长度为2~64个字符。以字母开头，以字母或数字结尾。由小写字母、数字、下划线或中划线组成。数据库名称在实例内必须是唯一的。说明 数据库名称中如果包含-，创建出的数据库的文件夹的名字中的-会...
管理数据库
设置以下参数：参数 说明 数据库（DB）名称 长度为2~64个字符。以字母开头，以字母或数字结尾。由小写字母、数字、下划线或中划线组成。数据库名称在实例内必须是唯一的。说明 数据库名称中如果包含-，创建出的数据库的文件夹的名字中的-会...
创建数据库
语法：CREATE DATABASE[IF NOT EXISTS]$db_name 参数说明：db_name：数据库名。以小写字符开头，可包含字母、数字以及下划线（_），但不能包含连续两个及以上的下划线（_），长度不超过64个字符。说明 数据库名不能是analyticdb，...
CREATE EXTERNAL DATABASE
AnalyticDB MySQL 湖仓版（3.0）和 数仓版（3.0）支持通过 CREATE ...语法 CREATE EXTERNAL DATABASE[IF NOT EXISTS]<db_name>参数 db_name：外部数据库名。数据库名命名规则，请参见 命名约束。示例 CREATE EXTERNAL DATABASE adb_demo;
CREATE DATABASE
示例 创建数据库 CREATE DATABASE DB1;结果验证 您可以通过 SHOW DATABASES;语句，查看数据库是否创建成功。指定数据库属性 创建数据库DB1，其中数据存满30天后转入冷存储，存满60天后会被清除。CREATE DATABASE DB1 WITH(cold_boundary=30...
通过Mongo Shell管理数据库账号
roles":[{"role":"readAnyDatabase","db":"admin"}]} 查询目标数据库的所有数据库账号 说明 您可以通过 use database_name 命令切换数据库，其中 database_name 为目标数据库的名称。方式一：在目标数据库执行查询命令。show users 说明 ...
- 产品推荐
- 这些文档可能帮助您