March 5, 2006
这是谁家的蜘蛛(hl_ftien_spider) ?
作者:eygle
出处:http://blog.eygle.com
今天网站流量再度攀升,经检查原来是一个名为"hl_ftien_spider"的蜘蛛在疯狂的爬我的网站网页.
grep hl_ftien_spider access_log.20060304 |awk '{print $1 $2 $4 $3 $12}'
218.68.240.81-[04/Mar/2006:22:57:11-"hl_ftien_spider" ................ |
这样胡乱爬网页跟攻击没有什么区别,马上封了该ip地址,iptables在封锁ip上还是非常有效的:
iptables -A INPUT -s 218.68.240.38 -j REJECT |
查询了一下该Ip地址,是来自天津的:
您要查询的是"218.68.240.38",它被理解为"218.68.240.38" 官方数据: % [whois.apnic.net node-1] 路由: 218.68.0.0/15 |
谁知道这是哪家的蜘蛛出来乱爬么?
Google上也没有有用的信息,似乎是流氓引擎吧.
补充:后来知道这是海量的蜘蛛,海量后来更改了搜索算法。Posted by eygle at 12:31 AM | Comments (10)
