apache使用.htaccess文件实现屏蔽wget下载网站内容
经发现,虽然wget遵循 robots.txt 规则,但是那个还是可以绕过去,现在把我自己使用的屏蔽方法分享给大家:
1. 屏蔽下载任何文件
.htaccess
?1 2 3 4 5 6 | SetEnvIfNoCase User-Agent "^wget" bad_bot <Limit GET POST> ?? Order Allow,Deny ?? Allow from all ?? Deny from env=bad_bot </Limit> |
2. 屏蔽下载部分文件
.htaccess
?1 2 3 4 5 6 7 8 | SetEnvIfNoCase User-Agent "^Wget" bad_bot SetEnvIfNoCase User-Agent "^Wget/1.5.3" bad_bot SetEnvIfNoCase User-Agent "^Wget/1.6" bad_bot <Files ~ "\.(html|pdf|mp3|zip|rar|exe|gif|jpe?g|png|php|jsp) $"> Order Allow,Deny Allow from all Deny from env=bad_bot </files> |
下一篇:由Apache 500错误引出的临时文件问题分析解决
新加坡服务器的速度怎么样
深圳机房IDC数据中心如何办理托
超融合最少需要几台服务器
泰国服务器供应商哪家的比较好?
海外服务器哪个好?怎么选
什么是Isp路由服务器?有什么用
泰国服务器租赁和托管分别有哪些
租用新加坡服务器时应该注意什么
超融合一体机和服务器的区别
泰国服务器租用怎么选租用到好的