CC攻击防护最佳实践
请求特征畸形或不合理 由于很多CC攻击请求是攻击者随意构造的，在仔细观察日志后，往往会发现这些请求有很多与正常请求不相符的畸形报文特征。常见的畸形报文特征包括：user-agent异常或畸形：例如，包含Python等自动化工具特征、明显格式...
LoRaWAN智能厕所
本实践推荐使用阿里云物联网...如果设备已经上线，则可以直接看到机器人的消息推送，实现厕所使用状态的实时推送了，如下图所示。如果需要把厕所的使用状况使用TableStore，云数据库MySQL等云产品存储起来，可以使用存储节点。最终结果如图：
账户安全最佳实践
使用验证码（适用于普通网页或H5）为普通PC页面或H5页面启用验证码是防护重点接口的最简单和有效的手段。接入验证码服务通常需要您在业务代码中做少许改动，一般一至二个工作日即可完成。一般的验证码能够有效拦截使用简单工具脚本发起的...
网站地图
背景信息 站点地图就是根据网站的结构、框架、内容，生成的导航网页文件，一般存放在根目录下并命名sitemap，为爬虫指路，增加网站重要内容页面的收录。本产品可自动生成网站地图，同时支持使用网站地图生成工具获取xml格式的文件手动上传...
云虚拟主机被爬虫访问耗费大量流量的解决方法
问题描述 用户使用云虚拟主机搭建的网站被爬虫访问，耗费大量流量和带宽的处理方法。解决方案 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于ECS、RDS...
Robots.txt
Robots.txt主要针对爬虫技术，用简单直接的txt格式文本方式告诉对应的爬虫被允许的权限。本文旨在介绍添加Robots.txt的途径。背景信息 当一个搜索蜘蛛访问一个站点时，它会首先检查该站点的根目录下是否存在Robots.txt，如果存在，搜索蜘蛛...
启用边缘安全
传统的CDN加速服务无法抵御大规模的网络攻击，但游戏、金融、政企安防、电商、医疗领域等易受攻击又必须兼顾加速的业务场景，需要既有安全防护能力又拥有稳定高效的全链路加速的安全服务。阿里云DCDN为您提供一站式安全和加速的整体解决...
CreateProtectionModuleRule
minRatio：Float类型|必选|风险判定条件，即IP访问请求中访问指定资源类型的占比阈值（对应专项资源爬虫识别算法）或IP访问请求中访问指定路径的占比阈值（对应定向路径爬虫识别算法），超过阈值后判定为风险。取值范围：0.01~1。定向路径...
网站地图
背景信息 站点地图就是根据网站的结构、框架、内容，生成的导航网页文件，一般存放在根目录下并命名sitemap，为爬虫指路，增加网站重要内容页面的收录。进入站点地图页面：在产品控制台左侧的导航栏中单击 网站管理>网站地图。设置网站地图...
使用场景
电商领域 电商Web网站是最容易受到攻击的应用类型，潜在攻击者通过各种方式得到用户的真实IP地址，从而发起网络攻击，最终目的是让用户无法对外提供服务。医疗领域 各类医疗网站也是最容易受到攻击的应用类型，经常会受到各类网络攻击。...
CreateProtectionModuleRule-在WAF防护功能模块中创建...
操作者必须同时具备关联操作的权限，操作才能成功。操作 访问级别 资源类型 条件关键字 关联操作 yundun-waf:CreateProtectionModuleRule Write 全部资源*无 无 请求参数 名称 类型 必填 描述 示例值 Domain string 是 要添加防护规则配置...
政企安全加速
阿里云政企安全加速依托阿里云全球分布的加速网络，承载全面的安全防护能力。为政府、金融、传媒、零售和交通等企业，提供边缘安全和加速一站式服务。使用场景 场景 事件 政府 发生突发社会事件时，政府网站及应用产生高并发访问请求。面对...
DescribeProtectionModuleRules
示例 {"Status":0,"Version":1,"Content":{"name":"百度蜘蛛白名单","conditions":[],"expressions":["remote_addr inl 'ioc.210d077a-cf34-49ad-a9b3-0aa48095c595'&uri=^'/'"],"bypassTags":"antibot","tags":["antibot"]},"RuleId":...
开通和配置Bot管理
创建网页防爬场景化防护规则 如果您的实际业务通过浏览器访问网页或H5页面（包括App中使用的H5页面）等，您可以创建网页防爬场景化防护模板，自定义防护规则，防御网页爬虫。登录 Web应用防火墙3.0控制台。在顶部菜单栏，选择WAF实例的资源...
ModifyProtectionModuleRule
定向路径爬虫识别算法（PR）对应的配置信息应包含以下子参数：keyPathConfiguration：Array类型|可选|请求的路径信息，支持指定最多10条路径，只在使用定向路径爬虫识别算法时需传入该子参数。以JSON字符串格式表示。具体包含以下参数：...
使用CDN后对网站的SEO是否存在影响
在CDN不稳定、因为受到恶意攻击出现更换IP地址的情况下，由于DNS缓存出现问题或者爬虫本身的缓存问题，导致爬虫的访问出现异常，对SEO会有一定的影响。如果保证前面的两点对SEO实际是有促进作用的，主要体现在以下两个方面。使用CDN之后，...
当探测请求被误识别成攻击或爬虫时，如何给探测请求...
如果您发现探测连接的目标IP地址是一个安全防火墙产品，则请优先排查是否因为防火墙产品的安全策略将探测请求误识别成攻击或爬虫的情况，如果是，则请给该探测请求加白。处理方法 探测请求是否被防火墙产品的安全策略误识别成攻击或爬虫，...
StopSpider-停止网站导入任务
[spiderId]：爬虫任务id。以上 URL 省略了请求Header参数及编码等因素。以上 URL 中省略了访问应用的 host 地址。请求协议 HTTP HTTP请求方式 POST 支持格式 JSON 返回结果 参数 类型 描述 errors List 错误内容 status String status：...
DescribeProtectionModuleRules-查询WAF防护功能规则...
示例 {"Status":0,"Version":1,"Content":{"name":"百度蜘蛛白名单","conditions":[],"expressions":["remote_addr inl 'ioc.210d077a-cf34-49ad-a9b3-0aa48095c595'&uri=^'/'"],"bypassTags":"antibot","tags":["antibot"]},"RuleId":...
ModifyProtectionRuleStatus-启用或禁用域名配置WAF...
启用或禁用域名WAF防护功能模块，如网站防篡改、合法爬虫、爬虫威胁情报、自定义防护策略、网站白名单。接口说明 您可以通过设置 DefenseType 参数值指定防护功能模块配置。具体参数值的含义，请参见请求参数 DefenseType 的描述。调试 您...
ModifyProtectionModuleRule-修改WAF防护功能配置规则
操作者必须同时具备关联操作的权限，操作才能成功。操作 访问级别 资源类型 条件关键字 关联操作 yundun-waf:ModifyProtectionModuleRule Write 全部资源*无 无 请求参数 名称 类型 必填 描述 示例值 Domain string 是 要修改规则配置的...
边缘WAF概述（新版）
支持 访问控制/限流 IP黑名单 支持 区域封禁 支持 自定义防护策略 支持 扫描防护 支持 监控报表 概览、报表 支持 日志服务 实时日志 支持 Bot管理 合法爬虫 支持 爬虫威胁情报 支持 爬虫智能算法 支持 APP防护 支持 处置手段 验证码、...
常见问题
正确示例 async function captchaVerifyCallback(captchaVerifyParam){ return new Promise((resolve)=>{$.ajax({ Url:'xxxx',data:'xxxx',success:(result)=>{ resolve({ captchaResult:true,bizResult:false,});},});});} 错误示例 async...
防护策略概述
如果您通过浏览器访问网页或H5页面（包括App中使用的H5页面）等，您可以通过设置浏览器访问网页的防爬场景化规则，更有针对性地对业务进行爬虫风险防护。如果您使用的是基于iOS或Android原生开发的App（不包括App中使用的H5页面），您可以...
计费说明
30 爬虫行为算法 提供典型爬虫行为识别的通用算法实例，可配置基本业务参数和风险阈值进行机器学习，输出智能防护结果以对抗高级爬虫。30 账户安全 识别账户关联的业务接口（例如注册、登录等）上发生的账户安全风险事件，并进行防御。具体...
名词解释
CDN：全称是Content Delivery Network，即内容分发网络，CDN是构建在网络之上的内容分发网络，依靠部署在各地的边缘服务器，通过中心平台的负载均衡、内容分发、调度等功能模块，使用户就近获取所需内容，降低网络拥塞，提高用户访问响应...
其他问题
当一个搜索蜘蛛访问一个站点时，它会首先检查该站点根目录下是否存在robots.txt，如果存在，搜索机器人就会按照该文件中的内容来确定访问的范围，如果该文件不存在，所有的搜索蜘蛛将能够访问网站上所有没有被口令保护的页面。（如果网站不...
配置浏览器访问网页的防爬场景化规则
您可以基于实际业务场景对防爬规则进行场景化定制，更有针对性地对业务进行爬虫风险防护。本文介绍如何配置浏览器访问网页场景的防爬场景化规则。背景信息 防爬场景化配置功能支持基于不同业务场景定制防爬规则，结合智能算法，精准识别...
政务舆情分析系统的数据库解决方案
并结合计算、搜索、大数据类产品，为您推荐以下政务场景下的舆情监测系统架构：架构说明：云服务器ECS：爬虫引擎可部署于阿里云ECS，可以根据爬取量决定使用ECS的机器资源数，在每天波峰的时候可临时扩容资源进行网页爬取。原始网页爬取...
WAF安全报表
关于Bot管理的设置方法，请参见以下文档：配置浏览器访问网页的防爬场景化规则 设置合法爬虫规则 设置爬虫威胁情报规则 设置App防护 访问控制/限流报表说明 访问控制/限流 报表展示触发了 CC安全防护、扫描防护 和 访问控制 规则的Web请求...
DCDN企业版为政企提供加速和安全一站式服务
阿里云DCDN企业版依托阿里云全球分布的加速网络，承载全面的安全防护能力，为政府、金融、传媒、零售和交通等企业，提供边缘安全和加速一站式服务。DCDN企业版商务模式 DCDN企业版产品与官网标准CDN或者DCDN产品不同，由于提供了额外的企业...
ListSpider-列举网站导入任务
fail：运行失败 importCount Int 爬取网页数量 如果请求网页的http响应code不是200，则视为网页错误，网页内容不会入库。因此这里的数量和实际入库数量可能会不一致。message String 运行失败时的失败原因 响应体示例 {"status":"OK",...
申请免费试用WAF
如果您的Web业务（例如网站、App等）面临Web通用攻击、应用资源消耗型攻击、爬虫攻击等威胁，推荐您参照本文介绍试用WAF，体验WAF提供的一站式应用安全解决方案。本文介绍如何申请免费试用WAF。使用须知 WAF试用服务面向 未开通WAF 的用户...
ModifyProtectionModuleStatus
bot_intelligence：表示爬虫威胁情报。antifraud：表示数据风控。bot_algorithm：表示智能算法。bot_wxbb：表示App防护。bot_wxbb_pkg：表示App防护中的版本防护。ac_cc：表示CC安全防护。ac_blacklist：表示IP黑名单。ac_highfreq：表示...
API概览
ModifyProtectionRuleStatus 为域名配置开启或关闭WAF防护功能模块（包括网站防篡改、合法爬虫、爬虫威胁情报、自定义防护策略、网站白名单等模块）中已创建的规则。DescribeDomainRuleGroup 查询域名配置当前使用的规则防护引擎的防护规则...
DescribeProtectionModuleStatus
bot_intelligence：表示爬虫威胁情报。antifraud：表示数据风控。bot_algorithm：表示智能算法。bot_wxbb：表示App防护。bot_wxbb_pkg：表示App防护中的版本防护。ac_cc：表示CC安全防护。ac_blacklist：表示IP黑名单。ac_highfreq：表示...
错误码
爬虫风险管理的防护功能未关闭。AntibotServerError Anti-bot service is unavailable.爬虫风险管理不可用。TaskNotFound The specified task does not exist.任务未找到。TaskIsRejected The task has been rejected.任务被拒绝。...
设置CC安全防护
拦截爬虫 如果在某段时间内，您发现网站的访问流量中有大量爬虫请求，若不排除是攻击傀儡机模拟爬虫进行CC攻击，则可以对爬虫的请求执行拦截操作。规则配置示例如下。防盗链 当浏览器访问某个网页时，会带上Referer字段，告诉服务器该请求...
GeoServer简介
同时能够将网络地图输出为jpeg、gif、png、SVG、KML等格式。GeoServer能够运行在任何基于J2EE/Servlet容器之上，嵌入MapBuilder支持AJAX的地图客户端OpenLayers，除此之外还包括许多其他的特性。安装包下载 适配GeoServer 2.13.x...
如何配置跨域数据
跨域问题形成的原因 由于每个网站都包含各种用户接口、订单接口和文章接口，这意味着每个人都可以将这些接口返回的数据放入自己的网站，甚至是实时放入。因此浏览器采用同源策略，用于限制一个源站点的脚本获取其他源站点的资源。说明 同源...
- 产品推荐
- 这些文档可能帮助您