網(wǎng)站上有些頁面不希望被搜索引擎收錄，我們可以使用robots的文件或者meta robots 標(biāo)簽。
?
什么是meta robots 標(biāo)簽？
meta robots 標(biāo)簽是頁面head部分meta標(biāo)簽的一種，用于指令搜索引擎禁止索引（收錄）本頁內(nèi)容。
?
meta robots 標(biāo)簽的寫法：
<meta name=”robots”content=”noindex,nofollow”>
標(biāo)簽的意義：禁止所有搜索引擎索引本頁面，禁止跟蹤本頁面上的鏈接。
Noindex：搜索引擎不索引此網(wǎng)頁（可以抓取，但不出現(xiàn)在搜索結(jié)果中）。
Nofollow：?搜索引擎不繼續(xù)通過此網(wǎng)頁的鏈接索引搜索其它的網(wǎng)頁。
?
<meta name>=”robots”content=”noindex” >
標(biāo)簽的意義：禁止索引本頁面，但允許蜘蛛跟蹤頁面上的鏈接，也可以傳遞權(quán)重。
使用了noindex meta robots標(biāo)簽的頁面會(huì)被抓取，但不會(huì)被索引，也就是說頁面URL不會(huì)出現(xiàn)在搜索結(jié)果中，這一點(diǎn)與robots文件不同。
?
meta robots 標(biāo)簽的作用：
1、不想讓網(wǎng)站被收錄使用meta robots 標(biāo)簽，禁止搜索引擎索引本頁，同時(shí)禁止跟蹤頁面上的鏈接。
2、禁止索引本頁面，但是允許蜘蛛跟蹤頁面鏈接，也可以傳遞權(quán)重。
?
meta robots標(biāo)簽很多搜索引擎是不支持的，只有少數(shù)搜索引擎能夠識(shí)別并按給定的值抓取。因此還是推薦用robots.txt文件來限制抓取，大家了解有關(guān)meta robots 標(biāo)簽知識(shí)以及寫法。
閱讀本文的人還可以閱讀：
SEO優(yōu)化攻克目標(biāo)關(guān)鍵詞的三大錦囊
網(wǎng)站結(jié)構(gòu)如何優(yōu)化對搜索引擎友好？網(wǎng)站對搜索引擎不友好的表現(xiàn)
