如何預防百度和Google對我家的網站進行Query? 日前突然發現我們的Web主機的Connection數突然爆增,去資料庫中查了一下這些Query居然是來自百度和Google,基本上我們家的網站是沒有什麼機密資料啦,不過一下子衝進來那麼多的Query可真是讓IIS主機操死了,請問有沒有什麼辦法可以阻止百度和Google對我家的網站進行Query呢?使用URLScan可以嗎?謝謝 PS.我家的網站是指我公司的網站,這樣叫習慣了~~ |
回覆: 如何預防百度和Google對我家的網站進行Query? 直接想到的是在iis裡把ip擋掉 |
回覆: 如何預防百度和Google對我家的網站進行Query? 查一查啥叫robots.txt吧:sleep: :sleep: .... |
回覆: 如何預防百度和Google對我家的網站進行Query? [QUOTE=wangcm;964501]查一查啥叫robots.txt吧:sleep: :sleep: ....[/QUOTE] 就是這個光,感謝您了~~Google、百度皆可用 :) |
回覆: 如何預防百度和Google對我家的網站進行Query? robots.txt 對 百度無效 :fd: |
回覆: 如何預防百度和Google對我家的網站進行Query? [QUOTE=dou0228;964519]robots.txt 對 百度無效 :fd:[/QUOTE] 真的嗎?如果這樣的話,百度的這個網頁不就是寫假的了 :( [url]http://www.baidu.com/search/guide.html#1[/url] |
回覆: 如何預防百度和Google對我家的網站進行Query? 很久以前試過沒用, 所以都用 Apache mod_env 檔下.. [code] # stop fu*king BaiDu Spider <IfModule mod_env.c> SetEnvIfNoCase User-Agent BaiDuSpider is_robot <Directory /usr/local/www/xoops2> Order Allow,Deny Allow from all Deny from env=is_robot </Directory> </IfModule> [/code] |
回覆: 如何預防百度和Google對我家的網站進行Query? User-agent: Googlebot Disallow:/*.bak$ Disallow:/*.exe$ Disallow:/*.cgi$ Disallow:/*.js$ Disallow:/*.php$ Disallow:/*.rar$ Disallow:/*.zip$ Disallow:/*.mp3$ Disallow:/*.iso$ Disallow:/*.mpg$ Disallow:/*.txt$ Disallow: /*? User-agent: BaiDuSpider Disallow: / User-agent: felix Disallow: / User-agent: Googlebot-Image Disallow: /*.gif$ Disallow: /*.jpg$ Disallow: /*.png$ Disallow: /*? User-agent: * Disallow: /~phpMyAdmin/ Disallow: /~updata/ Disallow: /~usercgi/ 好像有點用.......@@a |
所有時間均為 +8。現在的時間是 12:41 PM。 |
XML | RSS 2.0 | RSS |
本論壇所有文章僅代表留言者個人意見,並不代表本站之立場,討論區以「即時留言」方式運作,故無法完全監察所有即時留言,若您發現文章可能有異議,請 email :[email protected] 處理。