google竟然把服务器挤爆了
早上我刚刚恢复过去数据库,然后我打开了网站,允许访问,晚上哥们就给我哭诉,网站被攻击了,空间被关闭了。
我顿时就纳闷了,看发帖量估计没有多少的访问量啊,又有谁会知道这个网址呢,主域名我没给他转跳,只是开了主域名下的一个子文件夹,天,这事闹的。
等了两天,空间商终于上班,然后同意给开启空间,为了安全起见,还是先把网站禁止访问了(就是说网站可以打开,但是还是禁止了),下载了log文件一看,擦,google一直重复的请求同一个页面,他,他他是不是又毛病了????
google在11/Dec/2010:18:47:05 +0800这个时间不知道在这个页面发现了什么,而且还喊来了助手,多个google服务器一起访问这个页面,这里面这的有金子么?
看这兄弟几个119.77.135.212 -187.141.165.84 -96.47.226.66 -123.205.76.21 -83.228.42.200 -12.164.31.197 -207.28.249.82 -98.126.33.98 -217.113.59.32一个一个挤得好凶啊,这还不是完全统计啊,其他的我就不点名了。
到11/Dec/2010:18:57:39 +0800,只有10分钟,google就成功的拿下了这个网站,管理员把这个空间给关闭了!汗一个。
现在我分析,可能是这个版块有什么google喜欢的东西,所以引来了大量的蜘蛛;另一个可能是这个页面打不开,所以google的一个服务器请求别的服务器来打开这个页面,结果网站真的打不开了。另一个方面,空间商真的是不行,你就不会限制链接请求数量么,同一个ip重复的访问一个页面都分辨不出来。这个是防火墙配置的不怎么样,不防CC和DDoS,这个主机商,反正是国内的,我不说了。
现在应该解决这个问题啊,本想用robert.txt禁止一切的搜索引擎,但是万一他们把主页快照给弄没了怎么办呢,所以,禁止它访问版块,首页上只有版块的链接,还有redirect的链接(discuz默认禁止索引redirect的网页),所以,网站只留给搜索引擎一个主页,如果安装上首页多格的话还能索引刚发的文章,这样可以缓解搜索引擎的大量访问了吧。
问题也随之而来,怎么才能逐步的放开呢,毕竟有索引才能吸引更多的人来到这儿。
给大家个log大家看着玩吧
版权声明:
作者:xinyu2ru
链接:https://www.rxx0.com/software/even-the-u-s-dollar-tumbled-to-a-google-server.html
来源:RUBLOG-分享我的生活
文章版权归作者所有,未经允许请勿转载。
水车
没有遇到过这样的事情,学习学习好了。
xinyu2ru
@水车
我也是第一次遇到啊,不知道为啥呢
Junan
不是很懂~~呵呵~
ljpbin
我的一个服务器被百度蜘蛛占用大量资源,就把蜘蛛给屏蔽了,适合做黄站
xinyu2ru
@ljpbin
那空间商贱贱的说一开空间就被攻击,就算是google,他也应该有个发现网站时间差吧
xinyu2ru
@Junan
你,或许不需要懂吧
严重浪漫
老实说,看不懂,学习了