请问nginx如何设置才能拒绝wget等方式扒站复制网站?
网友回复
两种办法:
一、判断User-Agent。
把以下内容添加到nginx的conf文件中,之后重启nginx即可。if ($http_user_agent ~* (Wget|ab) ) { return 403; } if ($http_user_agent ~* LWP::Simple|BBBike|wget) { return 403; }
二、iptables防火墙
wget爬站最明显的现象就是并发连接比较大,一个ip一分钟内可能建立的tcp连接非常多,我们只要限制同一个IP一分钟内最多允许建立10个连接,超出的连接会被iptables丢弃,不会到达nginx,具体设置多少根据自己的情况灵活运用。
/sbin/iptables -A INPUT -p tcp --dport 80 -i eth0 -m state --state NEW -m recent --set /sbin/iptables -A INPUT -p tcp --dport 80 -i eth0 -m state --state NEW -m recent --update --seconds 60 --hitcount 10 -j DROP service iptables save
google账号如何更改地区与国家?
为啥我的安卓手机chatgpt app打开报错Something went wrong. You may be connected to a disallowed ISP. If you are us
c#如何修改windows的代理设置?
国内华为andriod安卓苹果ios手机如何使用chatgpt4o的app?
win10中怎么让bat批处理文件打开和关闭代理服务?
win10中怎么让bat批处理文件运行完成后不关闭窗口?
docker启动容器后如何挂载宿主文件并执行命令?
有没有lnmp的docker镜像?
何为超级以太网联盟(UEC)?
如何用go语言写一个加密的socks5代理通讯?