<xmp id="mkwey">

<menu id="mkwey"></menu>

<xmp id="mkwey">

<xmp id="mkwey"><nav id="mkwey"></nav>

最新文章

公司公告

業務范圍

聯系我們

上班時間：星期一至星期六
電話： 0311-83998177 89856787
手機： 18931879114
E-Mail： flyes@flyes.net
一部：石家莊市西里街30號
中山西路433號金魚文化產業園4層
二部：中山西路433號金魚文化產業園4層

點擊這里給我發消息

更多

河北網站建設不可不重視百度的善意警告！SEO注意

發布時間:2011-10-21 05:49:31 瀏覽次數:2414

河北網站維護公司，網站外包公司，網站運營公司，石家莊網站運維公司

禁止搜索引擎收錄的方法

什么是robots.txt文件?
搜索引擎使用spider程序自動訪問互聯網上的網頁并獲取網頁信息。spider在訪問一個網站時，會首先會檢查該網站的根域下是否有一個叫做 robots.txt的純文本文件，這個文件用于指定spider在您網站上的抓取范圍。您可以在您的網站中創建一個robots.txt，在文件中聲明該網站中不想被搜索引擎收錄的部分或者指定搜索引擎只收錄特定的部分。

請注意，僅當您的網站包含不希望被搜索引擎收錄的內容時，才需要使用robots.txt文件。如果您希望搜索引擎收錄網站上所有內容，請勿建立robots.txt文件。

robots.txt文件放在哪里?
robots.txt文件應該放置在網站根目錄下。舉例來說，當spider訪問一個網站（比如 http://www.abc.com）時，首先會檢查該網站中是否存在http://www.abc.com/robots.txt這個文件，如果 Spider找到這個文件，它就會根據這個文件的內容，來確定它訪問權限的范圍。

網站 URL	相應的 robots.txt的 URL
http://www.w3.org/	http://www.w3.org/robots.txt
http://www.w3.org:80/	http://www.w3.org:80/robots.txt
http://www.w3.org:1234/	http://www.w3.org:1234/robots.txt
http://w3.org/	http://w3.org/robots.txt

相關文章

上一篇:PowerEasy SiteWeaver通過cdn訪問后臺登錄出現500錯誤解決方法

下一篇:石家莊網站營銷之搜索引擎中如何讓網站排名更前？

嫩模超大胆大尺度人体写真,国产CHINESEHDXXXX美女,大肉蟒撑开稚嫩紧窄,波多野结衣乳巨码无在线

<蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <文本链> <文本链> <文本链> <文本链> <文本链> <文本链>