Flume使用JindoSDK写入OSS-HDFS服务
已创建Hadoop环境。具体步骤，请参见 创建Hadoop运行环境。已部署Apache Flume。具体步骤，请参见 Apache Flume。已开通并授权访问OSS-HDFS服务。具体操作，请参见 开通并授权访问OSS-HDFS服务。操作步骤 连接ECS实例。具体操作，请参见 ...
团队合作开发
云开发平台通过设计，使得您的应用在第一次被初始化，准备完环境之后，未来所有的开发者加入，都不需要额外去准备开发环境，任何一个新的开发者加入到任何一个新的应用，立即就可以开始进行业务逻辑的开发。云开发平台允许团队管理员去为每...
入门实践
提交模型至开发环境计算引擎 保存数据模型后，DataWorks开发角色需要先提交数据模型至开发环境计算引擎。测试无误后，再发布至生产环境。进入 数据开发 页面。登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中...
新建数据库
Hologres实例名称 下拉框可选 无 数据库名 需要绑定的DB名 当前建议绑定开发环境的DB 服务器 Hologres实例的网络地址 实例选择后自动生成 端口 Hologres实例的网络地址 实例选择后自动生成 连通性测试 测试是否连通 无 开发环境 访问身份 ...
执行冒烟测试
本文为您介绍如何在开发环境进行冒烟测试。背景信息 为保障调度节点任务执行符合预期，建议您在发布前对任务进行冒烟测试。在使用调度参数的场景下，您也可以通过冒烟测试校验调度场景下的参数替换情况。进入数据开发 进入数据开发。登录 ...
创建工作空间
生产、开发环境隔离 定义工作空间模式，即工作空间的生产环境和开发环境是否隔离。是：需隔离生产、开发环境，该方式创建的工作空间为标准模式工作空间。否：无需隔离生产、开发环境，该方式创建的工作空间为简单模式工作空间。工作空间...
使用ROS部署LNMP环境
例如：Java Web测试环境、Node.js测试开发环境、Ruby Web开发测试环境或Hadoop/Spark分布式系统。更多ROS信息，请参见 ROS文档。操作步骤 登录 ROS管理控制台。在左侧导航栏中，选择 模板>模板示例。在页面左侧顶部，选择目标资源所在的...
DataWorks准备工作流程
本文为您介绍DataWorks的购买及环境准备流程，帮助您快速开通DataWorks并准备所需开发环境。背景信息 新用户须知 如果您是首次使用DataWorks的用户，建议先阅读以下内容。产品简介：为您介绍什么是DataWorks、DataWorks的购买建议、以及...
后台管理
操作步骤 进入应用预览页面（开发环境）或打开环境详情对话框（开发/生产环境），详细操作请参见 查看环境详情。登录Mobi应用后台管理页面。在 管理后台预览 中，单击 重置密码，系统会自动复制重置的密码。在 管理后台预览 中，单击超链接...
Snapshot（试用）
前提条件 已创建Hadoop环境、Hadoop集群或者Hadoop客户端。具体操作，请参见 创建Hadoop运行环境。已开通OSS-HDFS服务。具体操作，请参见 开通并授权访问OSS-HDFS服务。已配置4.5.0及以上版本JindoSDK。具体操作，请参见 非EMR集群接入OSS-...
搭建开发环境
HaaS Studio HaaS Studio是AliOS Things配套的开发环境基于VS Code的插件。VS Code安装完成后，可在VS Code的插件市场搜索“haas-studio”，然后点击“install”安装。配置VS Code“代码修改”、“编译”以及“烧入”都是在VS Code中完成的...
环境搭建
HBase Ganos API基于Ali-Hbase Client客户工具包与GeoTools工具包对数据库进行交互操作，本文介绍导入相关工具包的操作方法。通过以下代码在Maven工程...mvn clean install 成功编译后在target目录下生成Class文件和Jar包，证明环境搭建成功。
环境准备
步骤三：绑定引擎 本示例创建的是一个标准模式的DataWorks工作空间，对应两个MaxCompute项目，一个生产环境和一个开发环境，以下为您介绍在本实验中绑定MaxCompute引擎时的配置要点：环境 参数 说明 生产环境 MaxCompute项目名称：retail_e...
RunSmokeTest
ProjectEnv String 是 PROD 工作空间的环境，包括PROD（生产环境）和DEV（开发环境）。简单模式的工作空间无开发环境，详情请参见 简单模式和标准模式的工作空间。Bizdate String 是 2020-05-26 00:00:00 业务日期。Name String 是 xm_...
总览
H5 容器是一款移动端 Hybrid 解决方案 SDK（Nebula SDK），提供了良好的外部扩展功能，拥有功能插件化、事件机制、JSAPI ...您将需要 配置开发环境。参考 准备配置 获取更多信息。可用的网络访问。网络浏览器（建议您使用 Chrome 浏览器）。
制作 iOS 推送证书
消息推送控制台 在消息推送控制台导入证书后，您将看到以下证书信息：如上图所示，subjectDN 属性：Apple Development IOS Push Services：开发环境苹果推送证书。消息推送支持。Apple Push Service：生产环境苹果推送证书。消息推送支持。...
非EMR集群接入OSS-HDFS服务快速入门
已创建Hadoop环境。具体步骤，请参见 创建Hadoop运行环境。已开通并授权访问OSS-HDFS服务。具体操作，请参见 开通并授权访问OSS-HDFS服务。操作视频 观看以下视频了解如何通过非EMR集群快速接入OSS-HDFS服务并完成常见操作。操作步骤 连接...
通过开源HDFS客户端连接并使用文件引擎
cd$HADOOP_HOME 将Java环境变量 JAVA_HOME 添加至 etc/hadoop/目录下的 hadoop-env.sh 文件中，假设Java安装在/opt/install/java。set to the root of your Java installation export JAVA_HOME=opt/install/java 修改 etc/hadoop/hdfs-...
发布任务
标准模式工作空间提交任务后，任务仅在开发环境生效，开发环境中的任务不进行自动调度，您需要通过任务发布流程，将任务发布至生产环境后，任务才会周期调度运行。说明 在数据开发界面提交的操作都将进入任务发布界面处于待发布状态，您...
Ride环境搭建常见问题
Ride环境搭建时，会出现各种问题。本文着重对此做了梳理。一、建议先自查的几个点 如果Ride的测试case没有跑起来，一般都是安装过程中出现了错误。从目前反馈的问题来看，很有可能是以下几个方面出了问题：1、windows环境变量中是否配置了...
MaxCompute数据访问权限控制
背景信息 DataWorks通过空间预设角色与空间自定义角色与开发环境引擎Role映射，来让被授予空间角色的RAM用户拥有该角色映射的开发引擎Role权限，但默认无生产权限。您可通过DataWorks安全中心实现MaxCompute数据权限管控。应用场景 场景 同...
入门概述
但在提交任务时，不会区分开发环境和生产环境。通常，通过DataWorks的工作空间实现数据开发和运维包含以下操作：建表并上传数据 创建业务流程 创建同步任务 设置周期和依赖 运行及排错 使用临时查询快速查询SQL（可选）下图为数据开发和运...
管理数据源权限
从简单模式工作空间分享至标准模式工作空间：数据源在标准模式工作空间下变为两个，分别对应开发环境和生产环境，且内容一致。从标准模式工作空间分享至标准模式工作空间：不同环境的数据源，分享后在目标工作空间内，仍然对应各自的环境。...
什么是云开发平台
全云端的开发环境实现所测即所得、测完即上线的快速交付；一致的 Serverless 环境：不需要购买和部署传统服务器，通过阿里云 Serverless 产品线提供的服务，您可以在日常、预发、线上等多套环境中使用一致的 Serverless 环境去开发、调试、...
平台安全诊断
计算引擎生产开发环境隔离 说明 标准模式工作空间下支持将计算引擎生产、开发环境进行区分隔离，避免生产环境中的数据从开发环境泄露。DataWorks工作空间引擎 此安全检测项为您扫描当前地域下哪些工作空间绑定的计算引擎实例存在开发、生产...
数据开发功能索引
本文为您介绍DataWorks数据开发（DataStudio）界面的整体布局，以及进行开发操作的主界面（业务流程和节点）中各组件、按钮的功能作用，方便您快速...在开发环境执行冒烟测试（）：在开发环境测试当前节点的代码。开发环境冒烟测试可以模拟...
MaxCompute资源管理
数据开发 面板中的资源只有 同时上传到MaxCompute，并 提交 或 发布 后，才会出现在 MaxCompute资源 面板的开发环境或生产环境中。通过MaxCompute客户端、MaxCompute Studio等非DataWorks渠道上传的资源文件，不会在 数据开发 面板显示，但...
数据开发与运行
说明 如果您的DataWorks为标准模式，则开发环境和生产环境分离，在DataWorks的DataStudio删除资源时，只删除了开发环境的资源，生产环境的资源需要将删除操作发布到生产环境，生产环境的资源才会被删除下线。在开发环境中删除资源。在对应...
查看版本
状态 已提交：节点已提交至开发环境，但未创建发布包并发布至生产环境。您可进入发布页面发布该节点，详情请参见 发布任务。中间版本：节点已提交至开发环境并且已创建发布包，但未发布至生产环境。节点处于待发布状态。您可进入发布页面...
MaxCompute数据权限控制详情
DataWorks通过空间预设角色或空间自定义角色与开发环境引擎Role映射，来让被授予空间角色的RAM用户，拥有该空间角色映射的开发引擎Role所拥有的MaxCompute引擎权限，但默认无生产权限，本文为您介绍预设角色权限基本情况、MaxCompute权限...
批量操作
此界面的批量修改、提交仅对开发环境生效，如果您需要修改生产环境节点、资源、函数，批量修改并提交后，您需要进入任务发布界面，将刚刚的变更操作发布至生产环境。您可单击右上角的 历史操作记录，跳转至操作历史界面查看历史操作详情。
准备环境
开发个人组件前，需要配置开发环境和初始化开发项目。步骤一：安装Node.js运行环境 需要安装8.9 LTS以及以上版本：单击并选择版本下载。步骤二：安装npm包管理工具 内测用户先使用bnpm,正式开放之后会迁移至aliplus源，使用npm即可。打开...
开发前准备：绑定数据源或集群
数据源缺失开发环境或生产环境。说明 不同数据源或集群无法绑定至DataStudio（数据开发）的原因存在差异，平台会自动展示不支持绑定的原因，您可基于具体原因进行排查处理。当前仅支持绑定MaxCompute、E-MapReduce、Hologres、AnalyticDB ...
项目分配与安全
完成项目创建后，您会得到一个生产环境项目和以_dev结尾的开发环境项目。例如 asaleods 和 asaleods_dev。项目权限配置 您需要重点考虑为项目中的不同成员角色赋予不同的权限，例如生产任务如何保障不可随意变更、哪些成员可以进行代码编辑...
扩展程序概述
产品能力 DataWorks作为阿里云一站式大数据开发与治理平台，在各项能力支持上预设了很多拓展点，例如，在标准模式下，简略来看，节点创建后完成代码开发后，需先提交到开发环境中进行验证，完成后再正式发布到生产环境中，后续每天根据调度...
什么是主机应用部署
通过预置开发环境，使用智能编码能力，即可快速地编辑、调试、运行、部署云端代码。在线构建部署 云效Flow，是一款企业级、自动化的研发交付流水线，提供灵活易用的持续集成、持续验证、持续发布功能，帮助企业高质量、高效率的交付业务。...
创建CDH Impala节点
如果您希望在开发环境进行冒烟测试，可在执行节点提交，或节点提交后执行，冒烟测试，操作详情请参见 执行冒烟测试。后 续步骤 提交并发布节点任务。单击工具栏中的 图标，保存节点。单击工具栏中的 图标，提交节点任务。在 提交新版本 ...
创建并管理工作空间
生产、开发环境隔离 定义工作空间模式，即工作空间的生产环境和开发环境是否隔离。是：需隔离生产、开发环境，该方式创建的工作空间为标准模式工作空间。否：无需隔离生产、开发环境，该方式创建的工作空间为简单模式工作空间。工作空间...
MySQL节点
标准模式工作空间下，MySQL节点选择数据源时，无法下拉选择只配置开发环境但未配置生产环境的数据源。所以创建MySQL数据源时，您需要同时配置开发环境与生产环境的数据源。使用限制 MySQL节点仅支持对连接串模式创建的生产环境MySQL数据源...
加工数据
完成设置后，分别单击 提交到开发环境 和 提交到生产环境。设计业务流程 业务流程的新建及依赖关系的配置请参见 新建业务流程。进入业务流程开发面板，并向面板中拖入两个ODPS SQL节点，依次命名为 数据清洗 和 数据汇聚，并配置如下图所示...
- 产品推荐
- 这些文档可能帮助您