配置并使用调度参数
执行冒烟测试 查看冒烟测试日志 确认生产环境任务的调度参数配置 为避免周期调度任务运行时，由于调度参数不符合预期，导致任务运行出现问题，建议在任务发布后，前往生产运维中心的 周期任务 界面，查看生产环境下该周期任务的调度参数...
创建项目
开发角色成员生产任务测试 任务发布到生产环境后，建议开发角色成员在运维中心对生产环境任务执行一次测试，以确保生产任务可正常执行。若任务执行返回成功状态，还是需要先查看日志判断执行是否正常，查询结果表是否有正常的产出。通常您...
使用限制
在使用Dataphin前，建议您先了解产品相关使用限制，确保业务可顺利开展。...该变量在开发环境执行时默认被替换为LD_Trade_dev，在生产环境执行时默认被替换为LD_Trade。您也可以在执行时设置固定的值，提高代码在不同环境执行时的灵活性。
创建并管理数据源
标准模式工作空间中，任务在不同环境执行时所访问的数据源如下：在数据开发（DataStudio）模块与开发环境运维中心执行，默认访问开发环境的数据源。在生产环境运维中心执行，默认访问生产环境的数据源。说明 配置数据源时，请确认开发环境...
用户角色和权限
鉴权原因 生产环境执行任务时，Dataphin会对任务中涉及到的资源进行鉴权。权限申请与审批 操作人 权限流程 描述 Dataphin成员 权限申请 如果您需要某资源的操作权限时（如数据表的查询权限），您可以申请获取。如何申请权限，请参见 权限...
用户角色和权限
鉴权原因 生产环境执行任务时，Dataphin会对任务中涉及到的资源进行鉴权。权限申请与审批 操作人 权限流程 描述 Dataphin成员 权限申请 如果您需要某资源的操作权限时（如数据表的查询权限），您可以申请获取。如何申请权限，请参见 权限...
构建集群
云效 Flow 使用容器化构建方式，流水线任务会随机调度到私有构建集群的一台机器上，并启动相应的容器环境执行任务。机器接入前请检查机器满足以下条件：机器需要可访问公网（用于云效 Runner 安装回调、流水线构建任务依赖下载及回调等）...
下线任务
报错：节点存在子节点，导致任务删除或下线失败 报错原因：为保障下游任务正常执行，DataWorks仅支持任务在开发环境和生产环境均无下游依赖的情况下执行任务下线操作。说明 下线节点可能导致其他依赖该节点的任务运行异常，请与依赖该节点...
责任共担
由于函数实例可能在不同的调用间复用，前面调用可能导致全局变量、环境变量和文件系统内容等发生修改，用户在代码里不可假设调用在全新的环境执行。由于函数实例不能保障一定在不同调用间复用，用户在代码里不可假设其它调用修改的全局变量...
责任共担
由于函数实例可能在不同的调用间复用，前面调用可能导致全局变量、环境变量和文件系统内容等发生修改，用户在代码里不可假设调用在全新的环境执行。由于函数实例不能保障一定在不同调用间复用，用户在代码里不可假设其它调用修改的全局变量...
使用Nginx+uWSGI部署Django项目
步骤三：部署及测试uWSGI环境 执行以下命令，安装uWSGI。sudo pip3 install uwsgi 如果回显信息如下所示，表示uWSGI已安装成功。WARNING:Running pip install with root privileges is generally not a good idea.Try `pip3 install-user` ...
搭建本地微服务应用环境
构建OnlineShop本地开发环境 执行以下命令下载OnlineShop源码。git clone https://github.com/aliyun/alibabacloud-microservice-demo.git 创建并导入项目。OnlineShop微服务的Demo在 src 路径下。在项目根目录内执行以下命令。mvn package...
独享资源组
切换数据集成任务开发环境测试运行时使用数据集成任务执行资源组：在数据开发界面打开离线同步任务，选择右侧的 数据集成资源组配置。说明 如果生产环境执行也需要使用该资源组，请修改资源组后进行节点提交发布操作。切换生产调度运行时...
AnalyticDB for MySQL
如您希望在开发环境进行冒烟测试，查看调度节点任务的执行是否符合预期，则可在节点提交时，或节点提交后执行冒烟测试，操作详情请参见 执行冒烟测试。步骤五：提交发布任务 节点任务配置完成后，需要执行提交发布操作，提交发布后节点即会...
ClickHouse SQL
如您希望在开发环境进行冒烟测试，查看调度节点任务的执行是否符合预期，则可在节点提交时，或节点提交后执行冒烟测试，操作详情请参见 执行冒烟测试。步骤五：提交发布任务 节点任务配置完成后，需要执行提交发布操作，提交发布后节点即会...
普通数据变更
建议您在测试环境执行数据变更也通过工单进行管理。通过工单进行变更会有数据备份、行数校验等保障，如果操作不符合预期可以快速恢复。说明 如果担心审批工单影响研发效率，可以设置无审批。具体操作，请参见 SQL变更。如果已配置 逻辑库、...
执行
示例#非交互环境执行，需手动调用execute方法 print(iris[iris.sepallength][:5].execute())#交互环境执行，自动调用execute方法 print(iris[iris.sepallength][:5])返回结果：sepallength sepalwidth petallength petalwidth name 0 4.9 3...
创建并使用PAI DLC节点
如您希望在开发环境进行冒烟测试，查看调度节点任务的执行是否符合预期，则可在节点提交时，或节点提交后执行冒烟测试，操作详情请参见 执行冒烟测试。步骤五：提交发布任务 节点任务配置完成后，需执行提交发布操作，提交发布后节点即会...
StarRocks
如您希望在开发环境进行冒烟测试，查看调度节点任务的执行是否符合预期，则可在节点提交时，或节点提交后执行冒烟测试，操作详情请参见 执行冒烟测试。步骤五：提交发布任务 节点任务配置完成后，需执行提交发布操作，提交发布后节点即会...
Oracle节点
如您希望在开发环境进行冒烟测试，查看调度节点任务的执行是否符合预期，则可在节点提交时，或节点提交后执行冒烟测试，操作详情请参见 执行冒烟测试。步骤五：提交发布任务 节点任务配置完成后，需执行提交发布操作，提交发布后节点即会...
PostgreSQL节点
如您希望在开发环境进行冒烟测试，查看调度节点任务的执行是否符合预期，则可在节点提交时，或节点提交后执行冒烟测试，操作详情请参见 执行冒烟测试。步骤五：提交发布任务 节点任务配置完成后，需执行提交发布操作，提交发布后节点即会...
SQL Server节点
如您希望在开发环境进行冒烟测试，查看调度节点任务的执行是否符合预期，则可在节点提交时，或节点提交后执行冒烟测试，操作详情请参见 执行冒烟测试。步骤五：提交发布任务 节点任务配置完成后，需执行提交发布操作，提交发布后节点即会...
运维中心入门
您可在运维中心查看发布至生产环境的任务，并执行测试、补数据等相关运维操作。本文以周期调度任务的运维为例，通过确认调度任务的配置是否符合预期、使用补数据计算历史时间段的数据、配置任务的智能监控规则，保障任务后续可以正常调度，...
创建并使用PAI Designer
如您希望在开发环境进行冒烟测试，查看调度节点任务的执行是否符合预期，则可在节点提交时，或节点提交后执行冒烟测试，操作详情请参见 执行冒烟测试。步骤五：提交发布任务 节点任务配置完成后，需执行提交发布操作，提交发布后节点即会...
创建EMR Kyuubi节点
如您希望在开发环境进行冒烟测试，查看调度节点任务的执行是否符合预期，则可在节点提交时，或节点提交后执行冒烟测试，操作详情请参见 执行冒烟测试。步骤五：提交发布任务 节点任务配置完成后，需执行提交发布操作，提交发布后节点即会...
调度参数
开发环境执行冒烟测试 通过手动选择业务日期模拟节点自动调度的场景，获取当前业务日期下调度参数的替换值。如何查看生产环境调度参数替换情况？如果您在数据开发修改了调度参数并且提交发布，请在生产运维中心周期任务属性面板检查调度...
Python SDK示例：SQL
执行SQL import os from odps import ODPS#确保 ALIBABA_CLOUD_ACCESS_KEY_ID 环境变量设置为用户 Access Key ID，#ALIBABA_CLOUD_ACCESS_KEY_SECRET 环境变量设置为用户 Access Key Secret，#不建议直接使用 Access Key ID/Access Key ...
创建并配置发布环境
同时，可以对已有环境执行如下操作：查看：查看发布环境的配置信息。修改：修改发布环境的配置信息。克隆：快速生成一个与当前环境配置相同的发布环境。禁用：如果当前环境近期无需使用，您可以将其禁用。禁用后，开发人员在创建发布包界面...
周期性调度
如您希望在开发环境进行冒烟测试，查看调度节点任务的执行是否符合预期，则可在节点提交时，或节点提交后执行冒烟测试，操作详情请参见 执行冒烟测试。步骤五：提交发布任务 节点任务配置完成后，需执行提交发布操作，提交发布后节点即会...
采集数据
说明 开发环境的数据源创建完成后，需要勾选 生产，以同样方式创建生产环境的数据源，否则任务生产执行会报错。Endpoint 输入 http://oss-cn-shanghai.aliyuncs.com 。Bucket 输入 new-dataworks-workshop。AccessKey ID&AccessKey Secret ...
采集数据
说明 开发环境的数据源创建完成后，需要勾选 生产，以同样方式创建生产环境的数据源，否则任务生产执行会报错。Endpoint 输入 http://oss-cn-shanghai.aliyuncs.com 。Bucket 输入 new-dataworks-workshop。AccessKey ID&AccessKey Secret ...
数据开发：开发者
冒烟测试需在开发环境执行，因此您需将节点提交至开发环境，提交后：单击工具栏中的 图标，在冒烟测试弹框配置业务日期。冒烟测试执行完成后，单击工具栏的 图标，查看测试结果。本文示例测试调度参数配置是否符合预期。result_table 调度...
PHP构建并部署到ECS
一、背景 如果你 1.使用PHP进行开发 2.需要将源码部署到ECS 那么本文档可以帮助您实现研发流程的协同自动化。二、用户诉求 一般来说，用户使用主机部署场景如下：1.对源代码进行一定的质量检测，比如单元测试，代码扫描 2....yum install php ...
管理作业
环境变量 添加作业执行的环境变量，也可以在作业脚本中直接export环境变量。调度参数 设置作业运行调度队列、内存、虚拟核数、优先级和执行用户等信息。当未设置这些参数时，作业会直接采用集群的默认值。删除作业 创建作业后，不再需要...
周期性调度作业概述
代码示例 开发环境（数据开发、开发环境运维中心）执行代码 生产环境（生产环境运维中心）执行代码 访问开发项目中的开发表：select col1 from projectname_dev.tablename;使用任务执行者个人云账号访问开发表。RAM用户（子账号）执行相关...
临时查询
环境变量 添加作业执行的环境变量，也可以在作业脚本中直接export环境变量。示例一：一个Shell类型的任务，内容是 echo${ENV_ABC}。如果此处设置了一个环境变量 ENV_ABC=12345，则 echo 命令的输出结果为 12345。示例二：一个Shell类型的...
创建并使用MaxCompute表
代码示例 开发环境（数据开发、开发环境运维中心）执行代码 生产环境（生产环境运维中心）执行代码 访问开发项目中的开发表：select col1 from projectname_dev.tablename;使用任务执行者个人云账号访问开发表。RAM用户（子账号）执行相关...
创建并使用MaxCompute表
代码示例 开发环境（数据开发、开发环境运维中心）执行代码 生产环境（生产环境运维中心）执行代码 访问开发项目中的开发表：select col1 from projectname_dev.tablename;使用任务执行者个人云账号访问开发表。RAM用户（子账号）执行相关...
一对一专家服务工作说明书
提供Apache配置文件 Apache安装目录和版本查询命令可正确执行 Apache静态html测试页面可以正常访问 提供PHP配置文件 PHP安装路径和版本查询命令可正确执行 LNMP/WNMP 环境部署 提供MySQL安装路径 MySQL服务启动\停止命令可正确执行 提供...
作业编辑
环境变量 添加作业执行的环境变量，也可以在作业脚本中直接export环境变量。示例一：一个Shell类型的任务，内容是 echo${ENV_ABC}。如果此处设置了一个环境变量 ENV_ABC=12345，则 echo 命令的输出结果为 12345。示例二：一个Shell类型的...
- 产品推荐
- 这些文档可能帮助您