JoinSecurityGroup-将实例加入到指定安全组
每个普通安全组最多能管理 2000 台实例，企业安全组最多能管理 65536 台实例。您的安全组和实例必须属于同一个阿里云地域。您的安全组和实例的网络类型必须相同。如果网络类型为专有网络 VPC，则安全组和实例必须属于同一个 VPC。不支持...
基线检查
标准策略 企业版 旗舰版 该类型策略包含120+基线检查项，支持以下基线类型：Windows基线 未授权访问 等保合规 最佳安全实践 基础防护安全实践 国际通用安全最佳实践 弱口令 Linux基线 未授权访问 等保合规 最佳安全实践 容器安全 国际通用...
NodeGroupConfig
除集群设置的安全组外，为节点组单独设置的附加安全组。数组元数个数 N 的取值范围：0~2。string 安全组 ID。sg-hp3abbae8lb6lmb1*InstanceTypes array 节点实例类型列表。数组元数个数 N 的取值范围：1~100。string 节点实例类型。ecs.g7....
配置安全组
配置要求如下：支持指定一个或多个安全组，最多可以指定5个安全组。指定的安全组必须属于同一VPC。指定的安全组的类型必须相同。重要 Annotation请添加在Pod的metadata下，例如：创建Deployment时，Annotation需添加在spec>template>...
安全组规则
安全组规则是您自定义的访问控制规则，用于控制安全组内ECS实例的出入站流量，可以实现对云资源的访问控制和网络安全防护。使用安全组规则时，您应了解以下信息：在VPC网络下，安全组规则分为入方向和出方向，规则同时控制公网和内网流量。...
配置ECI Pod所属安全组
配置要求如下：支持指定一个或多个安全组，最多可以指定5个安全组。指定的安全组必须属于同一VPC。指定的安全组的类型必须相同。重要 Annotation请添加在Pod的metadata下，例如：创建Deployment时，Annotation需添加在spec>template>...
AttachDatabaseAccountsToUserGroup-为用户组授权...
["1","2","3"]入参数据结构 Database 对象数组 字段 类型 描述 DatabaseId string 数据库 ID。DatabaseAccountIds array[string]账号 ID 数组。最多 10 个 以下是该参数的取值示例。[{"DatabaseId":"1"}/只授权数据库 {"DatabaseId":"2",...
异构数据源访问
为确保 AnalyticDB PostgreSQL版 与Hadoop间的网络端口畅通，需将以下异构数据源访问功能会用到的Hadoop服务默认的端口全部加入安全组。具体操作，请参见 添加安全组规则。服务 端口号 Namenode IPC Hadoop2.x版本：8020 Hadoop3.x版本：...
CreateCluster-创建集群
同一个 ClientToken 多次调用的返回结果一致，同一个 ClientToken 最多只创建一个集群。A7D960FA-6DBA-5E07-8746-A63E3E4D*返回参数 名称 类型 描述 示例值 object 返回数据 ClusterId string 集群 ID。c-b933c5aac7f7*OperationId string ...
不同安全组的经典网络实例内网互通
如果您的ECS实例是经典网络类型，您可以通过设置安全组规则来实现两台不同安全组的经典网络实例内网互通，以满足您在搭建内部网站或应用服务、部署数据库集群或应用系统等业务场景下的需求。本文主要介绍实现经典网络实例内网互通的四种...
系统检查点或作业快照
1.8.0_102]at org.apache.flink.fs.shaded.hadoop3.org.apache.hadoop.fs.aliyun.oss.AliyunOSSOutputStream.close(AliyunOSSOutputStream.java:82)~?at org.apache.flink.fs.shaded.hadoop3.org.apache.hadoop.fs.FSDataOutputStream$...
常见问题
设置 等保合规检查（新增功能）安全组配置检查（新增功能）日志分析 增值服务（高级版支持主机日志和安全日志）防勒索 增值服务 网页防篡改 增值服务 说明 其他增值功能，例如防勒索、网页防篡改、安全大屏、应用白名单和自定义告警等，需...
创建DataFlow Kafka集群
附加安全组：您可以为该节点组关联最多2个附加安全组，附加安全组可以灵活定制不同的外部资源或应用程序之间的访问。挂载公网：集群是否挂载弹性公网IP地址，默认不开启。说明 创建后如果您需要使用公网IP地址访问，请在ECS上申请开通公网...
2023年
MaxCompute JSON类型使用指南（试用Beta版本）2023-06-26 新增增量查询 新说明 Transactional Table 2.0支持增量写入和存储，最重要的一个考虑就是支持增量查询以及增量计算优化，为此，专门设计开发了新的SQL增量查询语法来支持近实时增量...
ALIYUN:EMR:Cluster2
除集群设置的安全组外，为节点组单独设置的附加安全组，最多添加2个附加安全组。CostOptimizedConfig Map 否 否 成本优化模式配置。无 GracefulShutdown Boolean 否 否 节点组上部署的组件是否开启优雅下线。取值：true：开启优雅下线。...
创建集群
选择已有的安全组，或者单击 新建安全组 前往ECS控制台新建一个安全组，详情请参见 创建安全组。重要 禁止使用ECS上创建的企业安全组。节点组 您可以根据需要选择实例规格，详情请参见 实例规格族。Master：主要负责ResourceManager和...
使用CreateCluster API创建集群
选择安装应用 必须安装的依赖应用 不可同时安装的互斥应用 HDFS Hadoop-Common OSS-HDFS OSS-HDFS Hadoop-Common HDFS Hive Hadoop-Common、YARN 无 Spark2 Hadoop-Common、YARN、Hive Spark3 Spark3 Hadoop-Common、YARN、Hive Spark2 Tez...
迁移HDFS数据到OSS
在进行数据迁移、数据拷贝的场景中，最常用的是Hadoop自带的DistCp工具。但是该工具不能很好利用对象存储OSS的特性，导致效率低下并且不能保证数据一致性。此外，该工具提供的功能选项较单一，无法很好地满足用户的需求。阿里云Jindo ...
ECS安全组实践（入方向规则）
因为一台实例最多可以加入五个安全组，一个安全组最多可以包括200条安全组规则，所以一台ECS实例可能同时应用数百条安全组规则。您可以聚合所有分配的安全规则以判断是否允许流入或流出，但是，如果单个安全组规则很复杂，就会增加管理的...
写入文件提示无法满足最小写入副本要求
如果连通的命令长时间或超时不返回信息，则可通过以下命令，检查NameNode节点和DataNode节点是否在同一安全组下。hadoop dfs-ls/检查DataNode服务是否启动。登录DataNode服务所在节点，请参见 登录集群。切换到hdfs用户。su-hdfs 执行以下...
管理节点组
Hadoop、Data Science和EMR Studio集群节点组的管理操作，请参见 管理节点组（Hadoop、Data Science和EMR Studio集群）。使用限制 本文操作仅适用于数据湖（DataLake）、实时数据流（DataFlow）、数据分析（OLAP）、数据服务（DataServing...
HDFS数据源
由于snappy目前没有统一的stream format，数据集成目前仅支持最主流的hadoop-snappy（hadoop上的snappy stream format）和framing-snappy（google建议的snappy stream format）。ORC文件类型下无需填写。否 无 parquetSchema 如果您的文件...
快速入门
vim${HADOOP_HOME}/etc/hadoop/core-site.xml 如果您尚未配置${HADOOP_HOME}，可以使用下面命令将您的Hadoop安装目录配置到该环境变量。export HADOOP_HOME=your/hadoop/installation/directory 在 core-site.xml 文件中，配置如下信息。...
使用EasyRec读取Hive表
将DataScience集群的所有公网IP地址，添加至Hadoop集群的安全组中，端口为10000和9000，详情请参见 添加安全组规则。修改 ml_on_ds 目录下的文件。上传获取到的 dsdemo*.zip 至DataScience集群的header节点。通过SSH方式连接DataScience...
Spark应用配置参数说明
如果是从ECS通过VPC网络连接 AnalyticDB for MySQL，需配置安全组ID。说明 当配置了开启VPC网络时，需要同时开启ENI访问，即配置 spark.adb.eni.enabled 为true。spark.adb.eni.extraHosts 否 无 需要额外传入的IP和Host的映射关系，以便...
修改弹性网卡属性
弹性网卡最多支持加入5个安全组。关于安全组的更多信息，请参见 安全组概述 和 普通安全组与企业级安全组。操作步骤 以下步骤指导您在弹性网卡页面修改主网卡和辅助弹性网卡的名称、描述信息，以及辅助弹性网卡所属的安全组。登录 ECS管理...
DataWorks On EMR使用说明
数据地图概述 安全中心 数据保护伞 审批中心 安全中心是集数据资产分级分类、敏感数据识别、数据授权管理、敏感数据脱敏、敏感数据访问审计、风险识别与响应于一体的一站式数据安全治理界面，帮助用户落地数据安全治理事项。安全中心概述 ...
DATASOURCE:ECS:SecurityGroups
DATASOURCE:ECS:SecurityGroups类型用于查询安全组的基本信息。语法 {"Type":"DATASOURCE:ECS:SecurityGroups","Properties":{"VpcId":String,"SecurityGroupName":String,"ResourceGroupId":String,"NetworkType":String,"SecurityGroupId...
管理工作流定义
此方式下，还需配置 自定义并行度 参数，表示最多并行执行的实例数。每次补数的并行度上限为7。说明 创建工作流定义时，如果选择 并行 执行策略，则该工作流只能 并行执行 补数；如果选择 串行等待 执行策略，则该工作流只能进行 串行执行 ...
ECS安全组实践（安全组设置）
在安全组的使用过程中，通常会将所有的云服务器放置在同一个安全组中，从而可以减少初期配置的工作量。但从长远来看，业务系统网络的交互将变得复杂和不可控。在执行安全组变更时，您将无法明确添加和删除规则的影响范围。合理规划和区分...
集群管理常见问题
问题分析：该错误表示您集群已开启部署集功能，且节点组的节点数已到达部署集上限，部署集详情请参见 开启部署集。解决方法：请联系ECS服务为您当前账号提升部署集上限。如何停止采集服务日志？如果您不想EMR收集您的数据，则可以关闭采集...
日志类别及字段说明
查看云安全中心日志可以帮您及时发现、调查和响应安全事件。购买日志分析存储容量后，云安全中心默认开启了安全日志、网络日志、主机日志，分别记录系统中的安全事件、网络流量情况和主机的活动。本文介绍云安全中心支持的日志类型以及每种...
CADT快速更换ECS/ENI实例安全组
替换规则 产品 原安全组类型 可以替换的新安全组类型 云服务器ECS 普通安全组 普通安全组 企业安全组 企业安全组 普通安全组 企业安全组 弹性网卡ENI 普通安全组 普通安全组 企业安全组 企业安全组 说明 安全组会影响ECS实例的网络连通，您...
安全组概述
安全组操作指引 使用控制台 创建安全组 克隆安全组 查询安全组 添加安全组规则 查询安全组规则 修改安全组规则 删除安全组规则 修改普通安全组的组内连通策略 删除安全组 安全组与ECS实例关联的管理 安全组与弹性网卡关联管理 修改安全组 ...
安全组概述
安全组操作指引 使用控制台 创建安全组 克隆安全组 查询安全组 添加安全组规则 查询安全组规则 修改安全组规则 删除安全组规则 修改安全组的连通策略 删除安全组 安全组与ECS实例关联的管理 安全组与弹性网卡关联管理 修改安全组的名称、...
DescribeSecurityGroups-查询安全组的基本信息
一次最多支持 100 个安全组 ID，ID 之间用半角逗号（,）隔开，格式为 JSON 数组。["sg-bp67acfmxazb4p*","sg-bp67acfmxazb4p*","sg-bp67acfmxazb4p*",.]VpcId string 否 安全组所在的专有网络 ID。vpc-bp67acfmxazb4p*SecurityGroupType ...
数组函数
array_lower('[0:2]={1,2,3}':int[],1)0 array_positions(anyarray,anyelement)ARRAY 返回在第一个参数给定的数组（数组必须是一维的）中，第二个参数所有出现位置的下标组成的数组。array_positions(ARRAY['A','A','B','A'],'A'){1,2,4} ...
CreateRule-创建授权规则
[{"HostGroupId":"1","HostAccountNames":["root"]}]Hosts 数组 Host 结构 字段 类型 描述 HostId string 主机 ID HostAccountIds array[string]主机账号 ID 数组 HostGroups 数组 HostGroup 结构 字段 类型 描述 HostGroupId string 主机...
删除安全组
如果您的业务已经不再需要某个安全组，您可以删除这个安全组。安全组删除后，组内所有安全组规则将被删除。本文主要介绍如何通过ECS控制台删除安全组。前提条件 在安全组内有ECS实例或弹性网卡时，不能删除。您需要先将实例或者弹性网卡移...
CADT快速替换ECS实例安全组
替换规则 产品 原安全组类型 可以替换的新安全组类型 云服务器ECS 普通安全组 普通安全组 企业安全组 企业安全组 普通安全组 企业安全组 说明 安全组会影响ECS实例的网络连通，您在替换安全组前请确认已经调试好目标安全组，以免影响业务...
- 产品推荐
- 这些文档可能帮助您