萬盛學電腦網

您现在的位置: 萬盛學電腦網 >> 程式設計 >  >> 伺服器教學

Nginx防垃圾流量Perl清洗腳本實戰:基於Referer識別與動態封禁

架構概覽

雙層防護機制:

  1. 日誌分析腳本(Shell + Cron):定期掃描Nginx Access Log,統計可疑Referer域名訪問頻次,產生封禁名單/tmp/purge_cps.log。
  2. Nginx + Perl模組攔截:請求進入時,Perl腳本檢查Referer頭是否命中名單,命中即返回404。

第一層:日誌分析腳本 purge_traffic.sh

#!/bin/bash
LOG="/var/log/nginx/www-access.log"
THRESHOLD=100   # 單IP/域名超過100次判定為異常
WHITELIST_REGEX='\.xxx\.cn|\.baidu\.com|google\.com'

if [ -f "$LOG" ]; then
  tail -10000 "$LOG" \
  | grep -E 'cps_site|tracert\.php\?source' \
  | awk -F'"' '{if ($4 ~ /^http:/) print $4}' \
  | awk -F'/' '{print $3}' \
  | grep -v -E "$WHITELIST_REGEX" \
  | sort | uniq -c | sort -nr | head -60 > /tmp/cps_site.log

  awk -v th="$THRESHOLD" '$1 > th {print $2}' /tmp/cps_site.log > /tmp/purge_cps.log
fi

關鍵點:

  • 僅分析最近1萬行,降低I/O壓力。
  • 白名單機制避免誤封搜尋引擎/合作夥伴流量。
  • 閾值THRESHOLD可依業務調整(建議50-200)。

加入Crontab每2-5分鐘執行一次:*/3 * * * * /path/purge_traffic.sh

第二層:Perl攔截模組 purgetraffic.pm

package purgeTraffic;
use nginx;

sub purge {
    my $r = shift;
    my $ua = $r->header_in("Referer");
    return 0 unless $ua;

    open(my $fh, '<', "/tmp/purge_cps.log") or return 0;
    my @list = <$fh>;
    close($fh);

    chomp @list;
    foreach my $domain (@list) {
        return 1 if $ua =~ /\Q$domain\E/;
    }
    return 0;
}
1;
__END__

Nginx配置整合

http {
    perl_modules /etc/nginx;
    perl_require purgetraffic.pm;
    perl_set $purge purgeTraffic::purge;

    server {
        server_name www.xxx.cn;
        if ($purge = 1) { return 404; }  # 直接拒絕垃圾流量
        # ... 其他配置
    }
}

修改後nginx -s reload生效。

進階優化建議

  • 增加IP白名單(ignore.ip.list)並chattr +i防篡改。
  • 結合limit_req_zone限制單IP請求頻率,雙重保障。
  • 將封禁動作改為return 444(直接斷開連線,不回應Header)更節省資源。
  • 日誌分析腳本可擴展為統計User-Agent、請求URI等多維度特徵。
copyright © 萬盛學電腦網 all rights reserved