日本精品视频一区二区-日本精品中文字幕在线播放-日本久草视频-日本久草网-日本久久道一区二区三区


武漢做網站的公司|禁止搜索引擎收錄的方法

2017年 / 04月27日

    為什么要禁止搜索引擎收錄?武漢做網站的公司—武漢盛世互聯小編為你介紹:一般我們網站可能會有較大的文件,如:圖片、FLASH、JS、視頻等,為了節省寬帶,也為了方便搜索引擎抓取,我們會設置robots協議,禁止搜索引擎收錄。如果你希望搜索引擎收錄網站所有的內容,就不要建立robots.txt協議。

    武漢做網站的公司|禁止搜索引擎收錄的方法

    一般來說spider在訪問一個網站時,最先就是查看網站的robots.txt,用于指定蜘蛛抓取網站上的數據。在文件中聲明該網站中不想被搜索引擎收錄的部分或者指定搜索引擎只收錄特定的部分。

    robots.txt文件放在哪里?

    robots.txt文件應該放置在網站根目錄下。當spider訪問一個網站,比如武漢做網站的公司—盛世互聯官網:http://m.hznrj.cn時,首先會檢查該網站中是否存在http://m.hznrj.cn/robots.txt這個文件,如果Spider找到這個文件,它就會根據這個文件的內容,來確定它訪問權限的范圍。如圖下:

robots.txt協議

    禁止搜索引擎收錄的方法

一、禁止搜索引擎跟蹤網頁的鏈接,而只對網頁建索引

    如果您不想搜索引擎追蹤此網頁上的鏈接,且不傳遞鏈接的權重,請將此元標記置入網頁的部分:

robots

二、如果您不想百度追蹤某一條特定鏈接,百度還支持更精確的控制,請將此標記直接寫在某條鏈接上:

robots

三、要允許其他搜索引擎跟蹤,但僅防止百度跟蹤您網頁的鏈接,請將此元標記置入網頁的部分:

robots

四、我想禁止百度圖片搜索收錄某些圖片,該如何設置?

    禁止Baiduspider抓取網站上所有圖片、禁止或允許Baiduspider抓取網站上的某種特定格式的圖片文件可以通過設置robots實現,例:

1、禁止Baiduspider抓取網站上所有圖片,僅允許抓取網頁,禁止抓取任何圖片。

robots

2、僅允許Baiduspider抓取網頁和.gif格式圖片,允許抓取網頁和gif格式圖片,不允許抓取其他格式圖片。

robots

3、僅禁止Baiduspider抓取.jpg格式圖片

robots

    最后需要說明的是:百度會嚴格遵守robots的相關協議,請注意區分您不想被抓取或收錄的目錄的大小寫,百度會對robots中所寫的文件和您不想被抓取和收錄的目錄做精確匹配,否則robots協議無法生效。想了解更多可閱讀武漢網站優化的相關新聞。

主站蜘蛛池模板: 午夜视频91 | 国产精品亚洲精品日韩己满十八小 | 亚洲欧美日韩中文综合v日本 | 国产高清在线精品一区二区 | 南京巨根无套操到你窒息 | 国产成人精品三区 | 国产精品麻豆99久久 | 国产亚洲一欧美一区二区三区 | 91国内在线视频 | 欧美在线免费观看视频 | 久久精品国产72国产精福利 | 日韩在线www | 欧美一区二区在线观看视频 | 日本粉嫩毛片视频 | 久久久久久久久66精品片 | 久久国产网站 | 青青青视频免费一区二区 | 狠狠色噜噜狠狠狠狠888奇米 | 日韩欧美在线中文字幕 | 三级视频黄色 | 国产一区二区在线免费观看 | 亚洲一级影院 | 三级黄色毛片视频 | 国产伦子一区二区三区四区 | 91在线激情在线观看 | 亚洲欧美综合一区二区三区四区 | 国产高清一级毛片 | 邪恶亚洲| 伊人影院中文字幕 | 国产成人禁片免费观看视频 | 国产精品免费αv视频 | 高清黄色毛片 | 成人做爰又黄又爽免费视频 | 欧美日韩综合网在线观看 | 免费看毛片软件 | 美女任你躁免费视频 | 国产视频一区在线观看 | 国产99热久久这里有精品999 | 伊人久久伊人 | 黄色免费片 | 韩国一级毛片视频免费观看 |