您好,歡迎來到廣東朝陽企訊通科技有限公司! 設為首頁 | 加入收藏 | 在線留言
走進朝陽
網站建設
網站推廣
網站代運營
建站套餐
營銷學堂
東莞服務熱線:
0769-22020318、22020328
佛山服務熱線:
0757-63228001、63228002
全國統一服務熱線:
400-612-0769
在線留言
您的位置: 首頁 ->  常見問題  -> 詳解東莞seo網站優化中禁止搜索引擎收錄robots.txt文件的方法?

詳解東莞seo網站優化中禁止搜索引擎收錄robots.txt文件的方法?


1、什么是robots.txt文件?
  這是東莞seo網站優化常識的范疇,搜索引擎使用spider程序自動訪問互聯網上的網頁并獲取網頁信息,spider在訪問一個網站時,會首先會檢查該網站的根域下是否有一個叫做 robots.txt的純文本文件,這個文件用于指定spider在您網站上的抓取范圍。您可以在您的網站中創建一個robots.txt,在文件中聲明 該網站中不想被搜索引擎收錄的部分或者指定搜索引擎只收錄特定的部分。
  請注意,僅當您的網站包含不希望被搜索引擎收錄的內容時,才需要使用robots.txt文件,如果您希望搜索引擎收錄網站上所有內容,請勿建立robots.txt文件。
2、我在robots.txt中設置了禁止百度收錄我網站的內容,為何還出現在百度搜索結果中?
  如果其他網站鏈接了您robots.txt文件中設置的禁止收錄的網頁,那么這些網頁仍然可能會出現在百度的搜索結果中,但您的網頁上的內容不會被抓取、建入索引和顯示,百度搜索結果中展示的僅是其他網站對您相關網頁的描述。
3、robots.txt文件放在哪里?
  robots.txt文件應該放置在網站根目錄下。舉例來說,當spider訪問一個網站(比如 http://www.abc.com)時,首先會檢查該網站中是否存在http://www.abc.com/robots.txt這個文件,如果 Spider找到這個文件,它就會根據這個文件的內容,來確定它訪問權限的范圍。以上信息均由朝陽網絡提供,東莞seo網站優化了解更多此方面信息的朋友們請來這里http://www.larvmk.icu/
首 頁 | 走進朝陽 | 服務項目 | 網站建設 | SEO優化 | 網站代運營 | 朝陽案例 | 建站套餐 | 聯系我們
Copyright 2003-2014 114my.net, All Rights Reserved 粵ICP備15113932號
服務熱線:0769-22020318/22020328 傳真:0769-22020338 版權所有:廣東朝陽企訊通科技有限公司 網站地圖 sitemap
朝陽科技為互聯網專業的網站建設公司,整合網絡營銷實戰策劃,提供東莞網站建設,東莞網站推廣,東莞網頁設計,東莞網絡營銷培訓等服務    
更多

關閉
網站咨詢
點擊這里給我發消息
點擊這里給我發消息
11选五中奖规则 雷霆vs独行侠 金斧子配资 艾德配资 赛车快速 3d字谜图谜总汇全 三级片电影在线观看 长春酒店按摩日结 华盛配资 黑暗故事 闲来宁夏麻将怎么开挂 A级片性交视频 6场半全场 云南十一选五助手 活塞vs火箭录像 体彩6+1 澳洲幸运10网