PCZONE 討論區

PCZONE 討論區 (https://www.pczone.com.tw/vbb3/)
-   -- 網 路 技 術 版 (https://www.pczone.com.tw/vbb3/forum/29/)
-   -   如何預防百度和Google對我家的網站進行Query? (https://www.pczone.com.tw/vbb3/thread/29/133096/)

iamyy 2007-05-10 10:39 AM

如何預防百度和Google對我家的網站進行Query?
 
日前突然發現我們的Web主機的Connection數突然爆增,去資料庫中查了一下這些Query居然是來自百度和Google,基本上我們家的網站是沒有什麼機密資料啦,不過一下子衝進來那麼多的Query可真是讓IIS主機操死了,請問有沒有什麼辦法可以阻止百度和Google對我家的網站進行Query呢?使用URLScan可以嗎?謝謝

PS.我家的網站是指我公司的網站,這樣叫習慣了~~

even 2007-05-10 10:59 AM

回覆: 如何預防百度和Google對我家的網站進行Query?
 
直接想到的是在iis裡把ip擋掉

wangcm 2007-05-10 11:15 AM

回覆: 如何預防百度和Google對我家的網站進行Query?
 
查一查啥叫robots.txt吧:sleep: :sleep: ....

iamyy 2007-05-10 11:35 AM

回覆: 如何預防百度和Google對我家的網站進行Query?
 
[QUOTE=wangcm;964501]查一查啥叫robots.txt吧:sleep: :sleep: ....[/QUOTE]

就是這個光,感謝您了~~Google、百度皆可用 :)

dou0228 2007-05-10 01:31 PM

回覆: 如何預防百度和Google對我家的網站進行Query?
 
robots.txt 對 百度無效 :fd:

iamyy 2007-05-10 02:00 PM

回覆: 如何預防百度和Google對我家的網站進行Query?
 
[QUOTE=dou0228;964519]robots.txt 對 百度無效 :fd:[/QUOTE]

真的嗎?如果這樣的話,百度的這個網頁不就是寫假的了 :(

[url]http://www.baidu.com/search/guide.html#1[/url]

dou0228 2007-05-10 04:28 PM

回覆: 如何預防百度和Google對我家的網站進行Query?
 
很久以前試過沒用, 所以都用 Apache mod_env 檔下..

[code]
# stop fu*king BaiDu Spider
<IfModule mod_env.c>
SetEnvIfNoCase User-Agent BaiDuSpider is_robot
<Directory /usr/local/www/xoops2>
Order Allow,Deny
Allow from all
Deny from env=is_robot
</Directory>
</IfModule>
[/code]

hcchen 2007-05-10 07:03 PM

回覆: 如何預防百度和Google對我家的網站進行Query?
 
User-agent: Googlebot
Disallow:/*.bak$
Disallow:/*.exe$
Disallow:/*.cgi$
Disallow:/*.js$
Disallow:/*.php$
Disallow:/*.rar$
Disallow:/*.zip$
Disallow:/*.mp3$
Disallow:/*.iso$
Disallow:/*.mpg$
Disallow:/*.txt$
Disallow: /*?

User-agent: BaiDuSpider
Disallow: /

User-agent: felix
Disallow: /

User-agent: Googlebot-Image
Disallow: /*.gif$
Disallow: /*.jpg$
Disallow: /*.png$
Disallow: /*?


User-agent: *
Disallow: /~phpMyAdmin/
Disallow: /~updata/
Disallow: /~usercgi/


好像有點用.......@@a


所有時間均為 +8。現在的時間是 12:41 PM



 XML   RSS 2.0   RSS 
本站使用 vBulletin 合法版權程式
站務信箱 : [email protected]

本論壇所有文章僅代表留言者個人意見,並不代表本站之立場,討論區以「即時留言」方式運作,故無法完全監察所有即時留言,若您發現文章可能有異議,請 email :[email protected] 處理。