免费国产黄网站在线观看可以下载-免费国产黄网站在线观看视频-免费国产黄网站在线看-免费国产黄线在线播放-免费国产精成人品-免费国产精品丝袜

6、什么是Robots?Robots.txt文件放在哪里?

發(fā)布時間:2019-11-12 19:49:23   瀏覽人數(shù): 14237 次  

答:搜索引擎通過一種程序robot(又稱spider),自動訪問互聯(lián)網(wǎng)上的網(wǎng)頁并獲取網(wǎng)頁信息。

可以在網(wǎng)站中創(chuàng)建一個純文本文件robots.txt,在這個文件中聲明該網(wǎng)站中不想被robot訪問的部分,這樣,該網(wǎng)站的部分或全部內(nèi)容就可以不被搜索引擎收錄了,或者指定搜索引擎只收錄指定的內(nèi)容。

robots.txt文件應(yīng)該放在網(wǎng)站根目錄下。舉例來說,當(dāng)robots訪問一個網(wǎng)站(比如http://www.abc.com)時,首先會檢查該網(wǎng)站中是否存在http://www.abc.com/robots.txt這個文件,如果機器人找到這個文件,它就會根據(jù)這個文件的內(nèi)容,來確定它訪問權(quán)限的范圍。


資料來源網(wǎng)絡(luò),僅供學(xué)習(xí)交流,如您發(fā)現(xiàn)本文中有涉嫌抄襲,請發(fā)送郵件至:support@iisp.com,一經(jīng)查實,本站將立刻刪除涉嫌侵權(quán)內(nèi)容。


上一篇:7、什么是外鏈?如何做?
下一篇:5、什么是sitemap?

旗下網(wǎng)站:耐思智慧 - 淘域網(wǎng) - 我的400電話 - 中文域名:耐思尼克.cn 耐思尼克.top

耐思智慧 © 版權(quán)所有 Copyright © 2000-2025 IISP.COM,Inc. All rights reserved

備案號碼: 粵ICP備09063828號  公安備案號: 公安備案 粵公網(wǎng)安備 44049002000123號  域名注冊服務(wù)機構(gòu)許可:粵D3.1-20240003 CN域名代理自深圳萬維網(wǎng)

聲明:本網(wǎng)站中所使用到的其他各種版權(quán)內(nèi)容,包括但不限于文章、圖片、視頻、音頻、字體等內(nèi)容版權(quán)歸原作者所有,如權(quán)利所有人發(fā)現(xiàn),請及時告知,以便我們刪除版權(quán)內(nèi)容

本站程序界面、源代碼受相關(guān)法律保護, 未經(jīng)授權(quán), 嚴(yán)禁使用; 耐思智慧 © 為我公司注冊商標(biāo), 未經(jīng)授權(quán), 嚴(yán)禁使用

法律顧問:珠海知名律師 廣東篤行律師事務(wù)所 夏天風(fēng) 律師

主站蜘蛛池模板: 国产毛片儿 | 日日射影院 | 婷婷综合五月 | 俄罗斯午夜影院 | 国产亚洲欧洲精品 | 天天爽夜夜爽精品视频一 | 站长推荐国产午夜免费视频 | 久久r热这里有精品视频 | 久久伊 | 一级一级毛片看看 | 奇米线在人线免费视频 | 网站久久 | 久久久久久久久毛片精品 | 四虎在线永久免费观看 | 91视频a| 免费观看黄色a一级录像 | 国产精品自拍亚洲 | 天天干天天干天天干天天干天天干 | 亚洲精品免费视频 | 婷婷免费高清视频在线观看 | 日本一级毛片视频无遮挡免费 | 澳门久久精品 | 久久久久综合网久久 | 天天操天天插天天干 | 国产精品久久亚洲不卡动漫 | 国产www在线观看 | 久久久青青久久国产精品 | 久久久久国产精品四虎 | 天天综合天天 | 国产精品丝袜在线 | 久热这里只精品热在线观看 | 久久国产精品一国产精品 | 国产精品激情综合久久 | 欧美国产日韩在线 | 国产欧美在线观看视频 | 性欧美暴力猛交xxxxx高清 | 美国美女一级毛片免费全 | 国产精品免费_区二区三区观看 | 国产精品成人免费视频 | 国产永久一区二区三区 | 久草丁香 |