移动数据分析有几种版本？不同版本有什么区别？
有通用版和定制版两个版本。通用版和定制版主要有两个方面的区别：产品功能上，通用版本提供给开发者普遍性的、通用的分析功能，定制版可以满足开发者个性化的分析需求...收费策略上，通用版执行统一的、明确的收费标准，定制版收费协商确认。
资源组说明
资源组功能 每种类型的资源组，按功能可分为几类：通用任务执行器：用于连接用户的数据库，获取库表元数据，执行SQL，也包括连接用户计算引擎（Flink、Spark等），提交作业。数据同步Worker：用于执行数据同步任务，包括离线同时、实时同步...
资源组说明
资源组功能 每种类型的资源组，按功能可分为几类：通用任务执行器：用于连接用户的数据库，获取库表元数据，执行SQL，也包括连接用户计算引擎（Flink、Spark等），提交作业。数据同步Worker：用于执行数据同步任务，包括离线同时、实时同步...
管理通用凭据
创建通用凭据 示例1：创建通用凭据时不指定加密密钥 执行以下命令调用 CreateSecret 接口创建通用凭据，KMS凭据管家会使用系统默认加密的方式保护凭据值。aliyun kms CreateSecret \-SecretName db_cred \-SecretData"{\"uname\":\"alice\...
任务管理
高级配置参数说明如下：参数 适用的执行模式 解释 默认值 任务失败重试次数 通用 任务运行失败自动重试的次数。说明 正在执行任务的机器重启，任务会变成失败状态，如果想立即重跑，可以配置该参数。0 任务失败重试间隔 通用 每次失败重试...
新功能发布记录
2020-11 全部 2020-10 新功能描述 发布时间 发布地域 相关文档 Inventory OpenApi Parameter Store OpenApi 通用创建执行页面选择实例支持全部选择功能 Parameter Store功能发布 2020-10 全部 GetSecretParameter-获取一个加密参数和参数值...
任务（Task）
通用属性 任务在模板中的语法如下：YAML格式 Tasks:Name:TaskName1#必填，任务名称，有效字符为[a-zA-Z0-9_-]，即英文字母数字下划线中划线，长度限制200个字符。建议使用驼峰式命名，如StartInstance。When:Condition1#选填，通过对某条件...
Data Engineering的创建与使用
进入节点cdp-ds-1-1的集群初始化脚本cdp-cde-util.sh所在目录，执行命令：./cdp-cde-utils.sh init-virtual-cluster-h<域名>-a，命令中的域名需要替换为上一步获取到的域名，比如，针对上一步骤获取到的域名，初始化命令如下：./cdp-cde-...
PREPARE
通用计划在所有执行中都是相同的，而自定义计划是为特定执行所生成的，使用调用中给出的参数值。使用通用计划可以避免计划开销，但在某些情况下，自定义计划的执行效率要高得多，因为规划器可以利用参数值的知识。（当然，如果准备好的语句...
DataWorks On CDP/CDH使用说明
DataWorks支持基于CDH（Cloudera's Distribution Including Apache Hadoop，以下简称CDH）和CDP（Cloudera Data Platform，以下简称CDP）集群创建Hive、MR、Presto和Impala等节点，实现CDP/CDH任务工作流的配置、定时调度和元数据管理等...
SQL备份与回滚（公测中）
在 变更确认 面板下方的 变更建议 区域，打开备份开关，选择是否需要定时执行变更SQL，再单击 直接执行 或 后台异步执行。后台异步执行是通过提交工单的方式进行表数据或表结构变更。回滚数据。执行成功后，您可在对应 执行结果 页签下，...
PolarDB HTAP实时数据分析技术解密
其次，在列式存储上可以使用SIMD技术进一步提升单核吞吐能力，这也是现代高性能分析执行引擎的通用技术路线（Oracle/SQL Server/ClickHouse）。PolarDB In-Memory Column Index PolarDB In-Memory Column Index功能，为PolarDB带来列式存储...
无代理检测
基线检查项 基线分类 基线检查项名称 国际通用安全最佳实践 国际通用安全最佳实践-CentOS Linux 6安全基线检查 国际通用安全最佳实践-CentOS Linux 7安全基线检查 国际通用安全最佳实践-Ubuntu 16/18/20 安全基线检查 国际通用安全最佳实践...
基于已有工程且使用 CocoaPods 接入
mPaaS_pod"mPaaS_CommonUI"10.1.32+通用 UI：通用 UI 组件库，提供各种 UI 组件。mPaaS_pod"mPaaS_BadgeService"10.1.32+红点：客户端“红点”提醒组件，支持红点、数字、New 等提醒样式，自动管理树形结构的红点关系。mPaaS_pod"mPaaS_...
查看账单详情
本文将为您介绍如何查看DataWorks中各计费项的计费明细账单。使用说明 为方便您了解每项费用产生原因，建议您先了解DataWorks计费逻辑，具体请参见：DataWorks计费逻辑说明。...详情请参见：通用参考：取消包年包月产品的自动续费。
初始化Kerberos环境
开始，在没有权限的情况下，执行一下命令[root@cdp-utility-1~]#hdfs dfs-ls/使用fayson用户运行MapReduce任务及操作Hive，需要在集群所有节点创建fayson用户.使用kadmin创建一个fayson的principal[root@cdp-utility-1 30-hdfs-JOURNALNODE...
CDP存量集群启动Kerberos
本章节将为您介绍如何在CDP集群...BDPHTSEC.COM = { kdc = cdp-utility-1.c-a4542b55a0e64699.cn-hangzhou.cdp.aliyuncs.com admin_server =cdp-utility-1.c-a4542b55a0e64699.cn-hangzhou.cdp.aliyuncs.com }[domain_realm].c-a4542b55a0e64699....
CDP专业版集群扩容流程
restarted tags:security-kerberos-tls 在cdp-utility-1-1节点的/var/cdp-pvc-install目录下，执行如下命令：ansible-playbook-i hosts.increase_nodes-extra-vars@environment/extra_vars.yml install_freeipa_client.yml 步骤二、在...
概述
规范业务团队的变更操作，沉淀通用变更能力和执行标准；帮助变更系统建设风控能力，护航业务变更执行。标准的变更过程一般可分为：计划、执行、结束三个部分，其中：计划阶段：该阶段主要包含变更申请，以及申请的准入审批。变更申请需要...
CDP集群高安全Kerberos+Ranger使用
HDFS 开始，在没有权限的情况下，执行以下命令。[root@cdp-utility-1~]#hdfs dfs-ls/使用fayson用户运行MapReduce任务及操作Hive，需要在集群所有节点创建fayson用户。使用kadmin创建一个fayson的principal。[root@cdp-utility-1 30-hdfs-...
故障止损恢复
快恢能力主要包含人工梳理快恢预案、通用垂直专项快恢能力：人工梳理预案：通过全面梳理故障场景及风险场景的可用降级预案来达到该场景触发故障时，系统自动推荐前期关联的预案，提供故障群内一键执行的方式，也提供设定执行条件，符合条件...
入门概述
背景信息 流程（Flow）定义了业务逻辑描述以及流程执行所需要的通用信息，例如一个订单管理流程可能包含创建订单、处理支付、预留库存、配送商品和通知等。在创建流程后，您可以多次执行流程，通常每次执行（Execution）有不同的输入。例如...
工作流简介
背景信息 工作流流程（Flow）定义了业务逻辑描述以及流程执行所需要的通用信息，例如一个订单管理流程可能包含创建订单、处理支付、预留库存、配送商品和通知等。在创建流程（Flow）后，您可以多次执行流程，通常每次执行（Execution）有...
Kerberos概述
键入 quit 退出KDC管理控制界面 执行 kinit jack，并键入密码 123456 即可获取到TGT，执行命令 klist 即可查看TGT的缓存位置，以及当前默认的principal 在集群的所有主机中添加用户jack：useradd jack 访问集群中的服务，如 HDFS：hdfs dfs...
基本概念
流程（Flow）定义了业务逻辑描述以及流程执行所需要的通用信息。步骤（Step）步骤是流程中的工作单元，可以是简单的原子步骤，如任务（task）、成功（succeed）、失败（fail）、等待（wait）和传递（pass）等；也可以是复杂的控制步骤，如...
快速创建和执行工作流
背景信息 云工作流 的流程（Flow）定义了业务逻辑描述以及流程执行所需要的通用信息，例如，一个订单管理流程可能包含创建订单、处理支付、预留库存、配送商品和通知等。创建完流程后，您可以多次执行流程，通常每次执行有不同的输入。例如...
快速开始
要实现客户端接入通用 UI 组件库，您必须先添加通用 UI 组件库的 SDK，然后在代码中调用 SDK 接口方法来添加控件。前置条件 您已经接入工程到 mPaaS。更多信息，请参见以下内容：基于 mPaaS 框架接入 基于已有工程且使用 mPaaS 插件接入 ...
使用限制
通用 单实例SQL赋值 执行时长与实例配置中的查询超时时间有关。条件分支 执行任务节点时间极短。DLA一键建仓 大约5小时30分钟。DBS备份 无执行时长限制。ECS远程命令 大约11小时。脚本命令 大约18小时。状态检查 表时间列状态检查 执行任务...
集群高可用
size=100M 重启MariaDB：service mysql restart 在cdp-master-1上运行命令：mysql 进入mysql终端，执行命令：reset master 将CM的数据库切换到从库上：修改在Utility节点的配置文件：vi/etc/cloudera-scm-server/db.properties#将...
CDP使用指南-Cloudera版
CDP使用指南-Cloudera版
流程简介
基本概念 流程（Flow）定义了业务逻辑描述以及执行流程所需要的通用信息，例如一个订单管理流程可能包含创建订单、处理支付、预留库存和通知用户等。在创建流程后，您可以多次执行流程。通常每次执行（Execution）有不同的输入。例如用户...
什么是阿里云Cloudera CDP
企业数据云平台Cloudera Data Platform（简称阿里云CDP），是阿里云和Cloudera联合打造的阿里云上的大数据平台。Cloudera CDP企业数据云平台 Cloudera企业数据云是社区版CDH的全新商业化升级产品，是阿里云和Cloudera联合打造阿里云上的大...
Linux系统挂载NFS协议文件系统
如果您使用的是通用型NAS，请执行以下命令。说明 推荐您通过NFS v3协议挂载文件系统，以获得最佳访问性能。NFS v4.0支持文件锁（包括range lock），如果您需要使用多台Linux ECS实例同时修改一个文件，请使用NFS v4.0协议挂载文件系统。...
挂载文件系统失败故障排查
通用型NAS，请执行以下命令。使用NFS v3协议挂载文件系统：sudo mount-t nfs-o vers=3,nolock,proto=tcp,rsize=1048576,wsize=1048576,hard,timeo=600,retrans=2,noresvport file-system-id.region.nas.aliyuncs.com:/ /mnt 使用NFS v4协议...
视频专区
1、CDP 产品介绍 https://developer.aliyun.com/live/247867 2、CDH/HDP 何去何从？https://developer.aliyun.com/live/247950 3、CDP 集群管理 https://developer.aliyun.com/live/248032 4、如何访问CDP集群？...
问题汇总
任务运行成功没有数据 场景一：节点状态成功，有执行日志 场景二：节点状态成功，无执行日志 任务运行失败 通用参考 已配置失败重跑的任务在运行失败后未重跑，并报错 Task Run Timed Out，Killed by System！任务执行报错OSError:[Errno 7...
续费
本章节将为您介绍什么是CDP续费、续费的具体操作流程。CDP续费简介 CDP集群续费费用包含ECS硬件费用和云市场软件订单费用。CDP集群支持用户按照购买的订单组进行分组续费（如初始实例组，扩容实例组1，扩容实例组2等）。续费操作步骤 登录 ...
Spark/Hive/HDFS使用JindoSDK访问OSS-HDFS服务
本文介绍如何通过在CDP集群中部署JindoSDK（4.5.0），访问OSS-HDFS服务相关操作。背景信息 OSS-HDFS服务是一款云原生数据湖存储产品，基于统一的元数据管理能力，在完全兼容HDFS文件系统接口的同时，提供充分的POSIX能力支持，能更好的满足...
基于阿里云部署的CDP白皮书
基于阿里云部署的CDP白皮书.pdf
缩容
本章节将为您介绍什么是CDP缩容、缩容的具体操作流程。CDP缩容简介 当CDP集群计算资源或存储资源过多时，您可以对集群进行水平收缩。目前支持收缩Core组类型节点。CDP集群缩容退还费用包含ECS硬件费用和云市场软件订单费用。CDP集群缩容...
- 产品推荐
- 这些文档可能帮助您