nofollow這個(gè)概念最初是由谷歌公司在2005年的時(shí)候提出來(lái)的,當時(shí)提出這個(gè)標簽的解釋主要是為了應付越來(lái)越泛濫的外鏈群發(fā)作弊,意思就是說(shuō),只要加入了這個(gè)nofollow標簽的鏈接,爬蟲(chóng)就不會(huì )進(jìn)行抓取。
再附加說(shuō)明下,因為絕大多數群發(fā)外鏈是出現在博客或論壇當中,當有人留言和發(fā)文時(shí),通過(guò)平臺本身程序可以為網(wǎng)友發(fā)布的鏈接加上nofollw標簽,這樣在這些平臺上群發(fā)外鏈,對搜索引擎本身就不會(huì )增加其對應的抓取工作量了,因為搜索引擎一發(fā)現加了nofollow標簽,就不會(huì )進(jìn)行爬行了。
我們來(lái)分析下原理,你的一個(gè)新站,擁有1000個(gè)頁(yè)面,里面有非常多的客服幫助啊,注冊,登錄,用戶(hù)協(xié)議等,這些內容所在的頁(yè)面對搜索引擎而言,是沒(méi)什么價(jià)值的,同時(shí),即使搜索引擎抓取了這些頁(yè)面,對你網(wǎng)站本身的SEO也幫助不大。
我們假設這些對搜索引擎無(wú)價(jià)值的頁(yè)面有300個(gè),但是我們知道的是,一個(gè)新站,不可能短期內搜索引擎就進(jìn)行全部收錄,搜索引擎的原理也是先發(fā)現你的網(wǎng)站,然后“住”進(jìn)來(lái),根據你頁(yè)面的鏈接進(jìn)行抓取,而抓取的量假設每天是100個(gè)(因為我們知道搜索引擎對新站頁(yè)面的抓取數量可不太令人滿(mǎn)意),建議可以看下之前寫(xiě)的搜索引擎喜歡怎么樣的網(wǎng)站。
那么抓取完你1000個(gè)頁(yè)面,搜索引擎用了10天時(shí)間,過(guò)程當中還有一些篩選,比如一些重復或相似的內容,以及一些類(lèi)似登錄啊注冊之類(lèi)的沒(méi)什么價(jià)值的頁(yè)面,最終有可能又會(huì )把這些已經(jīng)抓取進(jìn)來(lái)的頁(yè)面重新從數據庫里刪除掉。
現在的問(wèn)題已經(jīng)很明顯了,如果你合理的利用nofollw這個(gè)標簽,把一些對提升網(wǎng)站SEO沒(méi)多大價(jià)值的頁(yè)面鏈接加上這個(gè)標簽,搜索引擎自然節約了很多無(wú)效的爬行時(shí)間,對你網(wǎng)站的有效抓取就會(huì )提升,這一點(diǎn),在實(shí)踐操作中,是非常有用的,特別是對于新站,以及一些龐大的B2C或一些海量數據的信息類(lèi)網(wǎng)站,合理利用nofollow標簽,提升對搜索引擎友好度,可以使你的有效抓取獲得提升,對提升你的SEO流量也是有非常大的幫助的。