[閒聊]搜尋引擎真的很煩
發表於 : 2007-02-13 07:43
網站不斷被百度跟google掃到資料庫掛掉
封鎖ip也沒用,robots.txt也沒用
誰能提供根絕搜尋引擎bot的好辦法呀呀呀
封鎖ip也沒用,robots.txt也沒用
誰能提供根絕搜尋引擎bot的好辦法呀呀呀
因為現在 spider 變聰明了,會用 proxy 上網,鎖一個 class C 也可以換另一個 XDckmarkhsu 寫:最近一直很常看到,封鎖IP也沒用
我一直非常疑惑,難道 spider 會欺騙防火牆XD?
明明我就可以,很顯然是你們封鎖錯了:p
chiouss 寫:因為現在 spider 變聰明了,會用 proxy 上網,鎖一個 class C 也可以換另一個 XDckmarkhsu 寫:最近一直很常看到,封鎖IP也沒用
我一直非常疑惑,難道 spider 會欺騙防火牆XD?
明明我就可以,很顯然是你們封鎖錯了:p
所以我都擋 User-Agent...
至於用 robots.txt 嘛...你認為土匪來你家會先按門鈴嗎?想也知道當然不會嘛
所以我就是在問如何"擋 User-Agent"的方法?進藤光 寫:你沒爬對地方... XD
在 phpBB 裡面封鎖 IP 是沒用的啦~~
自問自答:sashow 寫:chiouss 寫:因為現在 spider 變聰明了,會用 proxy 上網,鎖一個 class C 也可以換另一個 XDckmarkhsu 寫:最近一直很常看到,封鎖IP也沒用
我一直非常疑惑,難道 spider 會欺騙防火牆XD?
明明我就可以,很顯然是你們封鎖錯了:p
所以我都擋 User-Agent...
至於用 robots.txt 嘛...你認為土匪來你家會先按門鈴嗎?想也知道當然不會嘛
我爬過文了, 但仍找不到相關詳細方法, "擋 User-Agent", 即是要如何做呢?
可以教教我嗎? 謝謝.
我也是,而且現在我的站莫名其妙的會擋住googleMeowmeow 寫:我早就登記多次了。