<dfn id="rtftp"><strike id="rtftp"></strike></dfn>
<form id="rtftp"></form>

    <mark id="rtftp"></mark>

    <p id="rtftp"></p>

    <p id="rtftp"></p>

        <nobr id="rtftp"><big id="rtftp"></big></nobr>
        <b id="rtftp"></b>

            <strike id="rtftp"></strike>

                資訊中心

                資訊中心

                robots.txt概念和10條注意事項

                robots.txt概念

                如果我們網站內有某些特殊的文件不讓搜索引擎收錄,那怎么辦?

                答案是:使用一個叫做robots.txt的文件。

                robots.txt文件告訴搜索引擎本網站哪些文件是允許搜索引擎蜘蛛抓取,哪些不允許抓取。

                搜索引擎蜘蛛訪問網站任何文件之前,需先訪問robots.txt文件,然后抓取robots.txt文件允許的路徑,跳過其禁止的路徑。

                總結:robots.txt是一個簡單的.txt文件,用以告訴搜索引擎哪些網頁可以收錄,哪些不允許收錄。

                關于robots.txt文件的10條注意事項:

                1、如果未創建robots.txt文件,則代表默認網站所有文件向所有搜索引擎開放爬取。

                2、必須命名為:robots.txt,都是小寫,robot后面加"s"。

                3、robots.txt必須放置在一個站點的根目錄下。


                評論(0 條評論)
                游客

                歡迎咨詢技術,多一份參考總有益處

                點擊QQ咨詢
                添加我,免費做你的網絡顧問
                返回頂部
                久久综合给久久狠狠97色_无码av免费一区二区三区_97夜夜澡人人爽人人_精品久久久久无码专区中文字幕

                <dfn id="rtftp"><strike id="rtftp"></strike></dfn>
                <form id="rtftp"></form>

                  <mark id="rtftp"></mark>

                  <p id="rtftp"></p>

                  <p id="rtftp"></p>

                      <nobr id="rtftp"><big id="rtftp"></big></nobr>
                      <b id="rtftp"></b>

                          <strike id="rtftp"></strike>