Java UDF最佳实践

步骤三:新建SQL任务 在 数据处理 页签,单击左侧导航 计算任务 图标。在 计算任务 页面,单击 计算任务 后的 图标,选择 MAXC任务 MAX_COMPUTE_SQL。在 新建文件 对话框,配置参数。参数 描述 名称 填写计算任务的名称,例如 javaudf。...

Java UDF最佳实践

步骤三:新建SQL任务 在 数据处理 页签,单击左侧导航 计算任务 图标。在 计算任务 页面,单击 计算任务 后的 图标,选择 MAXC任务>MAX_COMPUTE_SQL。在 新建文件 对话框,配置参数。参数 描述 名称 填写计算任务的名称,例如 javaudf。...

使用Python读文件

Dataphin仅支持开发基于Python的脚本,支持开发依赖第三方组件的脚本。开发基于第三方组件的脚本,需要通过pip install下载第三方组件。本文为您介绍基于Dataphin如何通过构建Shell任务调用Python读取第三方文件。前提条件 添加访问地址...

使用Python读文件

Dataphin仅支持开发基于Python的脚本,支持开发依赖第三方组件的脚本。开发基于第三方组件的脚本,需要通过pip install下载第三方组件。本文为您介绍基于Dataphin如何通过构建Shell任务调用Python读取第三方文件。前提条件 添加访问地址...

MySQL节点

网络联通说明 网络连通说明 MySQL节点需要访问MySQL服务,您需要确保独享调度资源组和MySQL数据库的网络已连通,关于独享调度资源组网络连通方案,详情请参见:绑定专有网络。配置白名单 若MySQL数据库存在白名单访问控制,您需要在MySQL...

配置任务调度

本文以配置任务write_result的调度周期为周调度为例,为您介绍如何设置DataWorks的调度属性和依赖属性。前提条件 已创建虚拟节点(start)和ODPS SQL节点(insert_data,详情请参见 创建业务流程。已创建同步节点 write_result 生成的同步...

Projects(旧版)常见问题

Tips:自己对任务、分享、文件、日程等内容做更新,是不会给自己发送通知的 1、云效上的逻辑是发送给除了触发人以外的所有参与者,具体可以看下这个文档 消息和通知 2、如果是非触发人收到消息通知,确认下是否配置了邮箱且偏好设置下...

新建同步节点并运行后上线

步骤五:上线节点任务 在开发环境节点画布编辑页面,单击工具图标,上线开发环境节点任务到生产环境节点。说明 也支持在 节点任务 页面,单击目标任务 操作 列的 上线 实现节点任务的上线操作。在确认对话框中,单击 确定。在 物理化...

新建同步节点并运行后上线

步骤五:上线节点任务 在开发环境节点画布编辑页面,单击工具图标,上线开发环境节点任务到生产环境节点。说明 也支持在 节点任务 页面,单击目标任务 操作 列的 上线 实现节点任务的上线操作。在确认对话框中,单击 确定。在 物理化...

导航

选择的颜色需要在满足可用性前提下,和谐搭配 mPaaS 小程序提供的三套主导航栏图标,标题颜色会跟随背景颜色自动调整为白色或黑色。建议参考以下选色效果,选色方案示例:分段控件 分段控件一般出现在页面的顶部或者页面中,让用户可以在...

配置并管理实时同步任务

完成数据源、网络、资源的准备配置后,您可创建实时同步节点,同步数据至Kafka。本文为您介绍如何创建数据实时同步任务,并在创建完成后查看任务运行情况。前提条件 已完成数据源配置。您需要在数据集成同步任务配置前,配置好您需要同步的...

Data Lake Analytics节点

如果您需要修改在 数据开发 页面测试时使用的任务执行资源,请单击工具中的 图标,选择相应的独享调度资源组。说明 因为访问专有网络环境的数据源需要使用独享调度资源组执行任务,所以此处必须选择测试连通性成功的独享调度资源组。单击...

创建CDH Impala节点

使用限制 支持 公共调度资源组 运行该类型任务。步骤一:创建CDH Impala节点 进入数据开发页面。登录 DataWorks控制台,切换至目标地域后,单击左侧导航的 数据建模与开发>数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。...

管理数据库审计实例的标签

鼠标移动到实例的 标签 栏图标上,单击 编辑。在 标签设置 面板 新建标签 区域中,输入 标签键 和 标签值,单击 确定。说明 您可以在标签设置面板中为目标添加多个标签。新增的标签显示在 标签设置 面板的 标签 区域。单击 确定。为实例...

创建CDH Hive节点

如果您已部署CDH集群并希望借助DataWorks执行Hive任务(例如,数据查询作业或处理批量数据),可以使用CDH Hive节点。本文为您介绍如何创建CDH Hive节点。前提条件 数据开发(DataStudio)中已创建业务流程。数据开发(DataStudio)基于...

创建CDH Presto节点

单击工具中的 图标,提交节点任务。在 提交新版本 对话框中,输入 变更描述。单击 确定。如果您使用的是标准模式的工作空间,任务提交成功后,需要将任务发布至生产环境进行发布。请单击顶部菜单左侧的 任务发布。具体操作请参见 发布...

创建CDH MR节点

在DataWorks任务开发中,您可以通过创建CDH MR(MapReduce)节点处理超大规模的数据集。本文为您介绍如何在DataWorks中创建并使用CDH MR节点。前提条件 数据开发(DataStudio)中已创建业务流程。数据开发(DataStudio)基于业务流程对不同...

使用Smart Metrics创建预测任务和配置告警

本文介绍如何使用Smart Metrics插件,包括创建预测任务、查询指标和配置告警。功能入口 登录 可观测可视化 Grafana 版 控制台,在左侧导航单击 工作区管理。在 工作区管理 页面,单击目标工作区右侧的 访问地址URL 链接进入Grafana。说明...

创建CDH Spark节点

准备工作:开发Spark任务并获取JAR包 在使用DataWorks调度CDH Spark任务前,您需要先在CDH中开发Spark任务代码并完成任务代码的编译,生成编译后的任务JAR包,CDH Spark任务的开发指导详情请参见 Spark概述。说明 后续您需要将任务JAR包...

使用DataWorks

在顶部菜单,单击 图标后,单击 图标,运行离线同步任务。通过脚本模式配置并运行数据同步任务 配置网络与资源。选择离线同步任务的数据来源和数据去向,以及用于执行同步任务的资源组,并测试连通性。具体操作请参见 通过向导模式配置并...

数据解析工作台说明

本文介绍数据解析工作台的导航、画布、操作功能。背景信息 您可以使用数据解析工作台,配置数据解析任务分析处理接入数据服务的数据源。更多信息,请参见 使用说明。进入数据解析工作台 在 物联网平台控制台 的 实例概览 页面,单击...

文字产品说明书

为已有文本添加项目符号、编号或任务列表 为已有文本添加项目符号、编号或任务列表的操作步骤如下:选定要添加项目符号、编号或任务列表的段落。为已有文本添加项目符号、编号或任务列表。在 开始 功能区中,单击 图标右侧的下拉箭头,在...

管理浏览器探测任务

创建浏览器探测任务后,您可以编辑脚本录制,并对其执行修改、删除、停用和启用操作。编辑脚本录制 仅PC端的浏览器探测任务,可以编辑脚本录制。登录 云监控控制台。在左侧导航,选择 网络分析与监控>站点监控。在 监控任务 页签,单击...

加工数据

提交业务流程 打开业务流程配置面板,单击工具中的 图标。选择 提交 对话框中需要提交的节点,输入 备注,并选中 忽略输入输出一致的告警。单击 提交,待显示 提交成功 即可。运行业务流程 打开业务流程配置面板,单击工具中的 图标...

创建EMR Shell节点

为了满足特定业务需求,您...在工具,单击 图标,保存编写的SQL语句,单击 图标,运行创建的SQL任务。(可选)冒烟测试。如果您希望在开发环境进行冒烟测试,可在执行节点提交,或节点提交后执行,冒烟测试,操作详情请参见 执行冒烟测试。

创建EMR Spark节点

准备工作:开发Spark任务并获取JAR包 在使用DataWorks调度EMR Spark任务前,您需要先在EMR中开发Spark任务代码并完成任务代码的编译,生成编译后的任务JAR包,EMR Spark任务的开发指导详情请参见 Spark概述。说明 后续您需要将任务JAR包...

创建EMR MR节点

在EMR任务开发中,通过创建EMR(E-MapReduce)MR节点,可将大规模数据集分为多个Map任务以并行处理,加速数据集的并行运算。本文将以创建EMR MR节点实现从OSS中读取文本,并统计文本中的单词数为例,为您展示EMR MR节点的作业开发流程。...

运维监控

运维监控包括任务中心和全景监控,本文为您介绍如何查看任务中心和全景监控。前提条件 已根据快速入门教程完成加载样例数据操作,具体信息请参见 样例数据。查看任务流运维 登录企业数据智能平台。在页面左上角,选择>协同。在顶部菜单,...

ClickHouse SQL

单击工具图标,保存编写的SQL语句,单击 图标,运行创建的SQL任务。(可选)冒烟测试。如您希望在开发环境进行冒烟测试,查看调度节点任务的执行是否符合预期,则可在节点提交时,或节点提交后执行冒烟测试,操作详情请参见 执行冒烟...

配置同步任务

代码编写页面仅限解锁及被您自己锁定的状态方可编辑,如果他人锁定显示 图标,单击 图标,进行偷锁,偷锁成功后显示 图标,您可以开始编辑同步任务。说明 保存完成修改的 已提交 状态的同步任务后,系统自动将同步任务的状态调整为 开发中...

创建EMR Impala节点

单击工具中的 图标,提交节点任务。在 提交新版本 对话框中,输入 变更描述。单击 确定。如果您使用的是标准模式的工作空间,任务提交成功后,需要将任务发布至生产环境进行发布。请单击顶部菜单左侧的 任务发布。具体操作请参见 发布...

创建EMR Hive节点

单击工具中的 图标,提交节点任务。在 提交新版本 对话框中,输入 变更描述。单击 确定。如果您使用的是标准模式的工作空间,任务提交成功后,需要将任务发布至生产环境进行发布。请单击顶部菜单左侧的 任务发布。具体操作请参见 发布...

数仓开发任务

在项目空间的左侧导航中,单击目标业务场景前的 图标,展开业务场景中的任务流。单击目标任务流前的 图标,展开任务流的下级目录。管理数仓表。操作项 描述 操作步骤 新建表 测试库和线上库使用同一个表结构(同一个建表语句)创建表。数...

一键MaxCompute数据同步节点

如果您使用的是标准模式的工作空间,任务提交成功后,请单击顶部菜单左侧的 任务发布,将任务发布至生产环境进行发布。具体操作请参见 发布任务。查看周期调度任务。单击编辑界面右上角的 运维,进入生产环境运维中心。查看运行的周期...

查看离线计算实例详情

离线计算实例是由智能标签、表加工、质量评估、数据加工等业务产生的任务实例,运维监控支持查看离线计算任务实例的详情,包括实例信息、任务代码、实例日志。本文介绍查看离线计算实例详情。操作步骤 登录 数据资源平台控制台。在页面左上...

DataX同步数据

在 数据处理 页面,单击左侧导航 计算任务 图标。在 计算任务 页面,单击 计算任务 后的 图标,选择 通用脚本>SHELL。在 新建文件 对话框,配置参数后,单击 确定。参数 描述 名称 本教程中的名称为 DataX。调度类型 本教程中选择任务的...

DataX同步数据

在 数据处理 页面,单击左侧导航 计算任务 图标。在 计算任务 页面,单击 计算任务 后的 图标,选择 通用脚本>SHELL。在 新建文件 对话框,配置参数后,单击 确定。参数 描述 名称 本教程中的名称为 DataX。调度类型 本教程中选择任务的...

查看离线计算实例详情

离线计算实例是由智能标签、表加工、质量评估、数据加工等业务产生的任务实例,运维监控支持查看离线计算任务实例的详情,包括实例信息、任务代码、实例日志。本文介绍查看离线计算实例详情。操作步骤 登录企业数据智能平台。在页面左上角...

使用快捷功能

任务通知:单击快捷功能键中的任务通知图标(),打开任务栏。音量+-将鼠标悬浮于快捷功能键中的音量图标(),单击+或-图标,唤起手机音量升降的能力。输入:单击快捷功能键中的输入窗口图标(),单击弹出的输入框,让输入框获取焦点后...

Quick BI设置浏览器标题栏图标只有有部分用户没有显示...

问题描述 Quick BI设置浏览器标题栏图标只有有部分用户没有显示出新图标。问题原因 部分用户使用的safari浏览器能被兼容。解决方案 切换到支持的浏览器列表,Quick BI目前支持访问者和开发者两种访问模式,二者兼容的浏览器略有不同,...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云工作流 系统运维管理 性能测试 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用