通用cdp引擎-通用cdp引擎文档介绍内容-阿里云

创建并管理数据源

将E-MapReduce（简称EMR）、CDH/CDP引擎合并至开源集群管理。合并后，原计算引擎的相关操作（例如，创建、编辑）将通过数据源/开源集群界面执行。详情请参见 DataWorks新版数据源公告。权限控制仅拥有运维或空间管理员角色的空间成员...

用户及权限管理

集群管理系统管理用户与权限时序引擎的用户信息与权限数据与宽表引擎通用。如果您也开通了宽表引擎，可以登录宽表引擎的集群管理系统管理用户与权限。集群管理系统的用法，请参见登录集群管理系统。重要宽表引擎集群管理系统支持TRASH...

机器翻译词典干预失败

例如，通用版引擎的干预词典只对通用版引擎生效，对专业版引擎不生效。不同API版本的干预词典，需单独上传。通用领域，请选择机器翻译通用版引擎。其他领域，请选择机器翻专业版引擎。核实一下：1、是否新建词典时选择的API与实际调用的API...

词典干预使用指南

例如，通用版引擎的干预词典只对通用版引擎生效，对专业版引擎不生效。2.选择机器翻译引擎版本、填写词典相关信息并按照示例文件将整理好的词典上传至平台。说明不同API版本的干预词典，需单独上传。通用领域，请选择机器翻译通用版引擎。...

通过控制台快速使用机器翻译通用版

如何快速测试机器翻译通用版进入机器翻译控制台，选择 API测试栏，选择机器翻译通用版翻译引擎及翻译语向即可进行测试。

Spark计算引擎

Spark通用化的引擎能力可以同时提供SQL、批处理、流处理、机器学习和图计算的能力。AnalyticDB MySQL Serverless Spark是 AnalyticDB MySQL 团队基于Apache Spark打造的服务化的大数据分析与计算服务，开通 AnalyticDB MySQL 服务后只需...

DataWorks节点合集

DataWorks的数据开发（DataStudio）模块为您提供多种类型的节点，包括用于数据同步的数据集成节点，用于数据清洗的引擎计算节点（例如，ODPS SQL、Hologres SQL、EMR Hive），以及可对引擎计算节点进行复杂逻辑处理的通用节点（例如，可...

2021年

2021年01月14日华北2（北京）华东2（上海）华东1（杭州）华南1（深圳）无 MediaFlow Processor EAS 提供的MediaFlow Processor是通用的编排引擎，可以进行视频、音频及图像分析处理。2021年01月11日华北2（北京）华东2（上海）华东1...

DataWorks On CDP/CDH使用说明

DataWorks支持基于CDH（Cloudera's Distribution Including Apache Hadoop，以下简称CDH）和CDP（Cloudera Data Platform，以下简称CDP）集群创建Hive、MR、Presto和Impala等节点，实现CDP/CDH任务工作流的配置、定时调度和元数据管理等...

文档更新动态（2022年之前）

通用功能数据源 2020-04-09 计算设置功能拓展支持离线计算引擎和实时计算引擎的配置。通用功能设置Dataphin实例的计算引擎 2020-04-09 计算源功能拓展计算源为离线数据的处理提供计算及存储资源、为实时数据的处理提供计算资源。通用...

查看账单详情

本文将为您介绍如何查看DataWorks中各计费项的计费明细账单。使用说明为方便您了解每项费用产生原因，建议您先了解DataWorks计费逻辑，具体请参见：DataWorks计费逻辑说明。...详情请参见：通用参考：取消包年包月产品的自动续费。

CDP使用常见问题

集群操作 1.如何登录工具（utility）节点？打开阿里云管控列表，点击集群名称进入集群详情页面，点击...如果已经打通隧道，请使用内网IP；如果希望通过公网访问，请复制外网IP待用。本机终端下执行 ssh root@xx.xx.xx.xx 可以登录到集群节点。

什么是阿里云Cloudera CDP

企业数据云平台Cloudera Data Platform（简称阿里云CDP），是阿里云和Cloudera联合打造的阿里云上的大数据平台。Cloudera CDP企业数据云平台 Cloudera企业数据云是社区版CDH的全新商业化升级产品，是阿里云和Cloudera联合打造阿里云上的大...

视频专区

1、CDP 产品介绍 https://developer.aliyun.com/live/247867 2、CDH/HDP 何去何从？https://developer.aliyun.com/live/247950 3、CDP 集群管理 https://developer.aliyun.com/live/248032 4、如何访问CDP集群？...

续费

本章节将为您介绍什么是CDP续费、续费的具体操作流程。CDP续费简介 CDP集群续费费用包含ECS硬件费用和云市场软件订单费用。CDP集群支持用户按照购买的订单组进行分组续费（如初始实例组，扩容实例组1，扩容实例组2等）。续费操作步骤登录 ...

缩容

本章节将为您介绍什么是CDP缩容、缩容的具体操作流程。CDP缩容简介当CDP集群计算资源或存储资源过多时，您可以对集群进行水平收缩。目前支持收缩Core组类型节点。CDP集群缩容退还费用包含ECS硬件费用和云市场软件订单费用。CDP集群缩容...

CDP专业版集群扩容流程

由于CDP专业版集群使用FreeIPA进行安全认证和用户管理，所以在扩容后也需要进行一系列的操作才能加入到集群中。本文介绍了CDP专业版集群如何将扩容产生的机器添加到集群中，并为扩容节点赋予相应的角色，为集群提供计算服务。前置条件已在...

退订

本章节将为您介绍什么是CDP退订、退订的具体操作流程。CDP退订简介 CDP集群退订费用包含ECS硬件费用和云市场软件订单费用。退订操作步骤重要退订后，线上集群的数据及计算任务将被删除无法继续使用。因此在退订前，请确保您在线上集群的...

CDP集群组件版本

本章节将为您介绍阿里云CDP集群的组件版本。阿里云 CDP 默认创建的集群中只包含了下面列表中红色标识的组件，其他组件可以在集群创建完成后，通过 Cloudera Manager 根据需求定制安装。更完整的组件列表介绍请参见 CDP 7.1.7 Runtime ...

CDP基础版集群扩容流程

本章节将为您介绍什么是CDP扩容、扩容的具体操作流程。CDP扩容简介当CDP集群计算资源或存储资源不足时，您可以对集群进行水平扩展。目前支持扩展Core组类型节点，并且新扩展节点的配置默认与组内已有节点一致。CDP集群扩容费用包含ECS硬件...

应用场景

本章节将为您介绍CDP产品的应用场景。现代数据仓库运营数据库准实时分析流式处理和分析

Data Engineering的创建与使用

进入节点cdp-ds-1-1的集群初始化脚本cdp-cde-util.sh所在目录，执行命令：./cdp-cde-utils.sh init-virtual-cluster-h<域名>-a，命令中的域名需要替换为上一步获取到的域名，比如，针对上一步骤获取到的域名，初始化命令如下：./cdp-cde-...

快速入门

操作流程创建集群访问CDP Cloudera Manager管控创建集群进入阿里云CDP控制台。在概览页面，点击右上角购买CDP产品。在CDP产品购买页面，完成集群相关配置。软件配置配置项说明地域在选择的对应地域内创建集群，一旦创建不能修改...

本章节将为您介绍如何在CDP集群...BDPHTSEC.COM = { kdc = cdp-utility-1.c-a4542b55a0e64699.cn-hangzhou.cdp.aliyuncs.com admin_server =cdp-utility-1.c-a4542b55a0e64699.cn-hangzhou.cdp.aliyuncs.com }[domain_realm].c-a4542b55a0e64699....

功能发布记录

本文为您介绍CDP产品功能及帮助文档的更新动态。2022年6月更新时间描述 2022.06.13 支持一键下单。支持用户在新购集群时自定义配置硬件。2022年4月更新时间描述 2022.04.22 新增视频专区。

对接使用CDH与CDP

DataWorks 提供了与CDH（Cloudera's Distribution Including Apache Hadoop，以下简称 CDH）与CDP（Cloudera Data Platform，以下简称CDP）集群对接的能力，在保留CDH集群或CDP集群作为存储和计算引擎的前提下，您可以使用DataWorks的任务...

产品优势

本章节将为您介绍CDP产品优势。提高开源组织版本管理效率，快速支持业务创新更多开源软件支持更高软件版本支持覆盖从边缘到AI全场景企业级的服务支持，降低运维成本，缩短故障处理时间来自阿里云和Cloudera的7*24小时大数据专家服务...

产品公测

阿里云CDP产品目前处于公测期，公测期间您可以对CDP进行一个月的免费测试和使用，对您使用的场景进行验证。您可以根据下面步骤进行公测申请。说明当前阿里云Cloudera企业云平台产品在公测试用期，试用期间您可以选购Cloudera企业云平台...

选型配置说明

选择合适的集群规格是CDP产品使用的第一步，CDP的选型配置需要考虑的主要因素包括：使用场景，估算数据量，服务可靠性以及预算等。基础版CDP集群有主节点（Master）、工具节点（Utility）和核心实例（Core）三种实例类型。专业版CDP集群...

CDP钉钉告警支持

本章节将为您介绍设置CDP钉钉告警的操作流程。CDP支持多种告警方式，默认支持邮件和SNMP告警，这两种告警模式的具体配置可以参考 CDP官网。除以上两种告警模式外，CDP还支持自定义告警脚本，当集群的健康状况触发告警阈值，就会调用用户...

为RAM账号授权

为确保RAM用户能正常使用CDP企业数据云控制台的功能，您需要使用云账号登录访问控制RAM（Resource Access Management），授予RAM用户相应的权限。背景信息访问控制RAM是阿里云提供的资源访问控制服务，更多详情请参见什么是访问控制。...

集群高可用

阿里云Cloudera CDP默认支持集群中组件HDFS NameNode、YARN ResourceManager以及Hive Metastore Server的高可用，此外对于Hive、Hue等组件用于存储元数据的元数据库MariaDB也做了主从备份，能最大限度保证服务的可用性和数据的可恢复性。...

RAM角色授权

如果您第一次进入CDP 管控台，首先进行RAM角色授权：说明使用CDP企业数据云产品之前需要主账号或权限管理员创建如下服务关联角色角色名称：AliyunServiceRoleForCDP 角色权限策略：AliyunServiceRolePolicyForCDP Cloudera企业数据云平台...

创建集群

创建集群进入阿里云CDP控制台。在概览页面，点击右上角购买CDP产品。在CDP产品购买页面，完成集群相关配置。软件配置配置项说明地域在选择的对应地域内创建集群，一旦创建不能修改。Kerberos身份认证是否开启集群的Kerberos认证...

如何选择产品类型

阿里云CDP当前提供两个产品类型：基础版、专业版。不同的产品类型支持的功能范围不同。本文介绍设置与查看产品类型的途径以及基础版与专业版之间的差别。选择与查看产品类型当您创建集群时，需要在售卖页-软件配置中选择您所需要的产品...

通用cdp引擎

新品推荐