網站seo優化

網站一(yī / yì ／yí)旦上(shàng)線後，搜素引擎蜘蛛第一(yī / yì ／yí)個(gè)爬取網站文件的(de)就(jiù)是(shì)robots.txt文件，所謂的(de)robots.txt就(jiù)是(shì)搜索引擎協議文件，因此要(yào / yāo)檢查分析協議文件是(shì)否書寫正确，因爲(wéi / wèi)書寫正确的(de)robots.txt協議文件至關重要(yào / yāo)，一(yī / yì ／yí)般設置robots.txt協議文件主要(yào / yāo)有以(yǐ)下幾個(gè)方面：

（1）不(bù)希望被搜索引擎蜘蛛爬取到(dào)的(de)文件都要(yào / yāo)屏蔽掉，主要(yào / yāo)屏蔽：網站後台JS、CSS文件和(hé / huò)網站後台圖片等。

（2）不(bù)希望被搜索蜘蛛抓取到(dào)的(de)網頁鏈接也(yě)都要(yào / yāo)屏蔽掉，主要(yào / yāo)屏蔽：網站後台登錄網址、網站動态路徑等。

（3）可以(yǐ)将XML格式的(de)網站地(dì / de)圖放進robots.txt末尾處，這(zhè)麽做的(de)好處就(jiù)是(shì)方便搜素引擎蜘蛛爬取網站的(de)所有文章，提高網站文章的(de)收錄率。