V3.1.16版本升级通知
为了给您提供更优质的服务，我们对堡垒机V3.1版本的部分功能进行了修复和安全更新，建议您尽快升级到V3.1.16版本。升级内容 堡垒机V3.1.16版本的升级内容如下：内部组件安全更新。修复中国香港和境外地域发送短信验证失败的问题。修复含有...
应用场景
数据审计 智能解析数据库及大数据的通信流量，细粒度审计数据访问行为，通过对数据源全量行为的审计溯源、危险攻击的实时告警、风险语句的智能预警，为您最敏感的数据库资产做好最安全的监控保障。个人信息合规 可精准区分和保护个人数据，...
安全服务介绍
第三方组件测试 权限认证测试 安全配置测试 业务流程测试 移动app测试 客户端测试：安装包测试 数据传输安全测试 组件安全测试 安全增强项测试 应用更新安全测试 对于移动app的应用，客户需要同时考虑客户端和服务端的安全。阿里云全量覆盖...
什么是IoT安全运营中心
持续升级 帮助您通过获取最新安全情报、安全功能等，保障所辖范围内设备资产的持续安全检测与防护 安全情报升级：情报库及资产指纹库持续更新，并结合AI引擎自学习持续更新安全模型，提升检测与防护。协议分析升级：不断丰富全行业各协议的...
勒索事件综合防护方案
定期更新安全补丁。修改默认账号administrator的名称，为登录账号配置强口令。开启日志记录功能，集中管理日志，并进行审计分析。合理地分配账号并授权，开启审计功能，例如：为服务器、RDS数据库设立不同权限账号并启用审计功能；如果有...
API概览
BatchUpdateScdnDomain 调用BatchUpdateScdnDomain批量更新安全加速域名。StopScdnDomain 调用StopScdnDomain停用某个加速域名，将DomainStatus变更为offline。DeleteScdnDomain 调用DeleteScdnDomain删除已添加的加速域名。...
配置回调通知
内容安全最多重复推送3次回调消息。回调数据 回调数据是内容安全服务端向您设置的回调通知地址返回的数据内容。关于回调数据的结构描述，请参见 回调通知表单数据。表 1.回调通知表单数据 名称 类型 描述 checksum String 总和校验码，由...
JindoDistCp使用说明
功能全量对齐S3 DistCp和HDFS DistCp，性能较HDFS DistCp有较大提升，致力于提供高效、稳定、安全的数据拷贝工具。环境要求 JDK 1.8.0及以上。Hadoop 2.3+版本，请下载最新版的jindo-distcp-tool-x.x.x.jar，该JAR包含在jindosdk-${version...
YARN高安全特性使用指南
YARN服务管理权限 默认高安全配置为 yarn.admin.acl=hadoop，其中 hadoop 前有单个空格，表示授权给hadoop组（EMR的服务启动Linux用户通常都是使用hadoop组）作为服务管理员。Hadoop中用户默认的组映射来自节点操作系统的组信息。说明 yarn...
HDFS数据源
由于snappy目前没有统一的stream format，数据集成目前仅支持最主流的hadoop-snappy（hadoop上的snappy stream format）和framing-snappy（google建议的snappy stream format）。ORC文件类型下无需填写。否 无 parquetSchema 如果您的文件...
基线检查
标准策略 企业版 旗舰版 该类型策略包含120+基线检查项，支持以下基线类型：Windows基线 未授权访问 等保合规 最佳安全实践 基础防护安全实践 国际通用安全最佳实践 弱口令 Linux基线 未授权访问 等保合规 最佳安全实践 容器安全 国际通用...
MaxCompute/Hadoop物理视图和字段详情
本文为您介绍如何查看计算引擎为MaxCompute、Hadoop 时物理视图和字段资产详情。物理视图详情 请参见 搜索数据，进入物理视图详情页面。MaxCompute、Hadoop 引擎的物理视图展示信息基本一致，下图以MaxCompute物理视图为例。编号 描述 ① ...
ALIYUN:EMR:Cluster2
除集群设置的安全组外，为节点组单独设置的附加安全组，最多添加2个附加安全组。CostOptimizedConfig Map 否 否 成本优化模式配置。无 GracefulShutdown Boolean 否 否 节点组上部署的组件是否开启优雅下线。取值：true：开启优雅下线。...
2023年
本文为您介绍了MaxCompute 2023年内容更新的最新动态，基于此您可以了解MaxCompute中增加了哪些新功能、语法新特性和权限变更，提升项目开发效率。MaxCompute的重要功能发布记录请参见 产品重大更新。2023年12月更新记录 时间 特性 类别 ...
客户案例
客户需求 存在Hadoop1.0、2.0两个集群，技术架构复杂，平台的稳定性和安全性、资源的弹性伸缩能力都遇到了瓶颈。日志来源渠道多，实时性要求高，基于fluentd的文件采集服务，随着日志量的增多，性能、稳定性存在明显瓶颈。“人肉脚本”的...
2022年
更新说明 优化以单源最短距离算法为例的Graph作业编写。编写Graph 2022年1月更新记录 时间 特性 类别 描述 产品文档 2022-01-30 常见问题整改。更新说明 将常见问题拆解到各个模块，便于用户在遇到问题时快速查找解决措施。常见问题 2022-...
日志类别及字段说明
查看云安全中心日志可以帮您及时发现、调查和响应安全事件。购买日志分析存储容量后，云安全中心默认开启了安全日志、网络日志、主机日志，分别记录系统中的安全事件、网络流量情况和主机的活动。本文介绍云安全中心支持的日志类型以及每种...
配置Hue访问Presto服务
重要 设置安全组规则时要针对有限的IP范围。禁止在配置的时候对0.0.0.0/0开放规则。操作流程 EMR各版本默认支持Hue访问E-MapReduce（EMR）集群的Presto服务的情况，以及配置Hue访问Presto服务的操作流程如下。版本 支持情况 操作流程 EMR-3...
自助建站方式汇总
环境类型 部署方式 说明 搭建Hadoop环境 手动搭建Hadoop环境 本教程介绍如何在Linux操作系统的ECS实例上快速搭建Hadoop伪分布式环境。更换镜像部署Windows环境 云市场镜像集成了操作系统和应用程序，您可以使用阿里云市场镜像快速部署ECS...
逻辑视图和字段资产详情
表结构：包括 字段详情、描述、数据类型、关联标准（需购买数据标准模块）、数据分类（需购买安全模块）、数据分级（需购买安全模块）、热度 信息，同时您可以在 操作 列下单击 图标，查看指定字段的血缘关系。数据预览：若有当前表的查询...
异构数据源访问
为确保 AnalyticDB PostgreSQL版 与Hadoop间的网络端口畅通，需将以下异构数据源访问功能会用到的Hadoop服务默认的端口全部加入安全组。具体操作，请参见 添加安全组规则。服务 端口号 Namenode IPC Hadoop2.x版本：8020 Hadoop3.x版本：...
Hadoop DistCp介绍
使用方法 Hadoop DistCp最常见的调用是集群间拷贝，例如将nn1集群的/foo/bar 目录下的数据拷贝至nn2集群的/bar/foo 目录下：hadoop distcp hdfs:/nn1:8020/foo/bar hdfs:/nn2:8020/bar/foo 更多使用说明，请参见 Hadoop社区的DistCp使用...
网络开通流程
为Hadoop集群的安全组配置如下信息，确保MaxCompute可以访问Hadoop集群。安全组配置内容如下：配置Hadoop集群所在安全组的入方向访问规则。授权对象为ENI所在的安全组，即步骤2中创建的安全组。HiveMetaStore端口：9083。HDFS NameNode端口...
使用Druid
header-1.cluster-5678 iZbp10tx4egw3wfnh5o*安全Hadoop集群，请按如下操作进行：确保集群间能够通信（两个集群在一个安全组下，或两个集群在不同安全组，但两个安全组之间配置了访问规则）。在E-MapReduce Druid集群的每个节点的指定路径...
使用限制
安全威胁防御限制说明 云安全中心支持安全告警实时检测与处理、漏洞检测与一键修复、攻击分析、云平台安全配置检查等功能，结合告警关联分析和攻击自动化溯源，帮助您全面加固系统和资产的安全防线。在云安全中心提供的防御能力以外，建议...
功能特性
云安全中心针对公共云、多云环境、云外服务器和容器环境提供多方位的安全检测和防护能力。为满足不同场景下的安全需求，提供了 免费版、防病毒版、高级版、企业版 和 旗舰版 多个版本和增值服务。本文介绍云安全中心支持的功能及各版本的...
Hadoop使用JindoSDK访问OSS-HDFS服务
cd$HADOOP_HOME/etc/hadoop 更新配置文件 core-site.xml 以及 hdfs-site.xml。更新配置文件 core-site.xml 并添加属性。指定HDFS中NameNode的地址。name>fs.defaultFS!替换为主机名或localhost。hdfs:/localhost:9000...
处置安全事件
威胁分析与响应通过使用预定义的规则或您自定义的规则，将关联的多个安全告警聚合成一个完整的安全事件，帮助您迅速识别并对云产品的安全告警作出响应。建议您定期检查并处理安全事件，以提升云产品的安全水平并确保系统的完整性。前提条件...
Hadoop Yarn RPC 0 Day在野利用分析与传播手段披露
阿里云安全监测到Kinsing僵尸网络变种，该僵尸网络除了沿用之前的攻击手法，最新利用了Hadoop Yarn RPC未授权访问漏洞进行传播。概述 Hadoop Yarn是Hadoop的核心组件之一。Hadoop Yarn RPC未授权访问使得攻击者无需认证即可通过RPC通信执行...
MaxCompute+Hadoop搭建实践
本文以E-MapReduce的Hive为例，为您介绍在MaxCompute中如何创建外部项目，并查询Hadoop中的表数据。准备Hadoop数据源 创建Hadoop集群，具体操作请参见 开通阿里云EMR服务。进入Hive准备数据。使用Workbench方式登录集群主节点后，在终端...
漏洞管理常见问题
漏洞提示无更新说明检测出漏洞的软件目前无官方更新源，无法在云安全中心控制台完成修复，您可以参考下述说明，选择合适的处理方案：您在对某些漏洞进行更新修复时，可能收到以下提示：Package xxx already installed and latest version ...
数据同步
ls/tmp/cdc/staging_sales/Found 2 items-rw-r-2 hadoop hadoop 0 2019-11-26 11:11/tmp/cdc/staging_sales/_SUCCESS-rw-r-2 hadoop hadoop 93 2019-11-26 11:11/tmp/cdc/staging_sales/part-m-00000 为更新数据建立临时表，然后MERGE到...
数据湖集群
因此数据湖集群对每一个节点组增加了最多两个附加安全组，从而可以精细化控制节点组出入端口的规则。另外，EMR数据湖集群将挂载公网功能移到了节点组，这样可以更好的搭配附加安全组实现精细化的对外开放公网的管理。Spark部署 数据湖集群...
检测响应常见问题
如果后续再次检测到该告警发生，云安全中心会更新该告警发生时间为最新检测到的时间，并将该告警的状态置为 未处理。为什么可疑域名访问告警首次发生时间和检出时间不一致？云安全中心在接收到DNS解析数据时，需要使用算法对DNS解析数据做...
Ranger概述
Ranger组件介绍 Ranger主要由三个组件组成：Ranger Admin 您可以创建和更新安全访问策略，这些策略被存储在数据库中。各个组件的Plugin定期对这些策略进行轮询。Ranger Plugins Plugin嵌入在各个集群组件的进程里，是一个轻量级的Java程序...
通过ES-Hadoop将HDFS中的数据写入Elasticsearch
ES-Hadoop是Elasticsearch推出的专门用于对接Hadoop生态的工具，可以让数据在Elasticsearch和Hadoop之间双向移动，无缝衔接Elasticsearch与Hadoop服务，充分使用Elasticsearch的快速搜索及Hadoop批处理能力，实现交互式数据处理。...
通过CDH5 Hadoop读取和写入OSS数据
CDH（Cloudera's Distribution,including Apache Hadoop）是众多Hadoop发行版本中的一种，最新版本CDH6.0.1中的Hadoop3.0.0版本已经支持OSS，但CDH5中的Hadoop2.6版本不支持OSS。本文介绍如何配置CDH5支持OSS读写。前提条件 拥有一个已搭建...
漏洞公告|Apache Hadoop FileUtil.unTar命令注入漏洞
漏洞影响 漏洞影响的Hadoop版本：2.0.0<= ApacheHadoop<= 2.10.1 3.0.0-alpha <= ApacheHadoop<= 3.2.3 3.3.0 <= ApacheHadoop漏洞影响的EMR版本：存量集群的EMR 3.x系列、EMR 4.x系列、EMR 5.x系列（EMR-5.8.x及之前的版本）均受到影响。...
什么是EMR on ECS
安全 支持企业级多租户资源管理，支持对表、列、行级别的权限控制和日志审计，支持数据加密。多租户管理能力需自行配置，能力不完善，无法满足企业级需求。可靠 大规模、企业级环境的检验，随开源版本升级，并经过专业的兼容性验证测试，...
迁移HDFS数据到OSS
在进行数据迁移、数据拷贝的场景中，最常用的是Hadoop自带的DistCp工具。但是该工具不能很好利用对象存储OSS的特性，导致效率低下并且不能保证数据一致性。此外，该工具提供的功能选项较单一，无法很好地满足用户的需求。阿里云Jindo ...
- 产品推荐
- 这些文档可能帮助您