robots meta標簽是標簽頁(yè)面head部分meta標簽的一種形式,主要用于指令搜索引擎蜘蛛禁止索引這個(gè)網(wǎng)站頁(yè)面的用和意義內容,從而不會(huì )被搜索引擎收錄該頁(yè)面。標簽在很多喜歡在網(wǎng)上寫(xiě)個(gè)人博客類(lèi)的用和意義網(wǎng)站的朋友,經(jīng)常會(huì )把有些頁(yè)面屏蔽蜘蛛抓取,標簽讓該頁(yè)面不會(huì )顯示在(zai)搜索引擎結果列表當中。用和意義
比較簡(jiǎn)單的標簽robots meta標簽格式為,這段代碼所設置的用和意義robots meta標簽的作用是禁止所有搜索引擎索引該網(wǎng)站頁(yè)面,禁止跟蹤該頁(yè)面上的標簽鏈接。谷歌、用和意義必應、標簽雅虎等搜索引擎都支持的用和意義robots meta標簽如下:
noindex:??告訴蜘蛛不要索引該網(wǎng)站頁(yè)面;
nofollow:告訴蜘蛛不要跟蹤該網(wǎng)站頁(yè)面上的鏈接;
nosni??ppet:ヾ(?■_■)ノ告訴搜索引擎不要在搜索結果中顯示┐(′?`)┌摘要描述文字;
noodp:告訴??搜索引擎不要使用開(kāi)發(fā)目錄中的標題和描述;
而百度搜索引擎目前只支持nofollow和noarchive兩種標簽形式。
robots meta標簽的標簽內??容可以寫(xiě)在一起,以英文逗號間隔,用和意義中間可以有空格,標簽也ヽ(′▽?zhuān)?ノ可以沒(méi)有空格,多個(gè)r??obots meta內容也可以寫(xiě)成不同的標簽形式。例如:??、這兩個(gè)(ge)內容可以寫(xiě)成一種形式,并且(?Д?)meta robots標簽是不用區分大小寫(xiě)的。??
robots meta標簽的主要作用和存在的意義在于禁止搜索引擎索引,如果想讓搜??索引擎蜘蛛正確的抓取網(wǎng)站頁(yè)面的內容,robots meta標簽就沒(méi)有存在的意義了。比如:的寫(xiě)法是沒(méi)有任何意義的,