1.在首頁(yè)多展示未被抓取的網(wǎng)頁(yè)的URL
我們先需要把未抓取的URL列表提取出來(lái),然后我們可以把這些URL在首頁(yè)展示,以增加被搜索引擎抓取的機(jī)會(huì),許多網(wǎng)站之所以在首頁(yè)有新文章版塊、隨機(jī)展示版塊,其實(shí)也大都是為了增加被搜索引擎抓取的機(jī)會(huì)從而增加網(wǎng)站頁(yè)面的收錄,首頁(yè)的權(quán)重是一個(gè)網(wǎng)站中較高的URL頁(yè)面,往往也是蜘蛛最活躍的頁(yè)面,所以在首頁(yè)展示往往可以增加收錄。
2.靈活調(diào)整搜索引擎的抓取頻率
在谷歌網(wǎng)站管理員工具中,其中有一項(xiàng)就是我們可以根據(jù)自己網(wǎng)站的情況,調(diào)整搜索引擎的抓取頻率,在默認(rèn)的情況下,谷歌是按照你的網(wǎng)站的服務(wù)器承認(rèn)情況,來(lái)調(diào)整它的抓取頻率的,它的原則就是在你服務(wù)器能夠承受的情況下、盡可能多的去抓取。因此,如果我們想提高它的抓取頻率,我們可以在這谷歌網(wǎng)站管理同工具里邊進(jìn)行調(diào)整,當(dāng)然這個(gè)只能是針對(duì)谷歌的。
3.多發(fā)一些網(wǎng)站列表頁(yè)URL的外鏈
蘇州網(wǎng)站建設(shè)在SOSO的官方SEO指南中,曾經(jīng)提到過(guò)這一點(diǎn),也就是說(shuō)我們可以專注于我們的列表頁(yè),可以給一些列表頁(yè)多發(fā)一些外鏈,因?yàn)榱斜眄?yè)里邊的有效URL比較多,當(dāng)搜索引擎蜘蛛抓取到列表頁(yè)后,就會(huì)抓取列表頁(yè)中的產(chǎn)品URL,從而增加我們的收錄。
4.分析搜索引擎的抓取日志
當(dāng)我們的網(wǎng)頁(yè)被收錄之前,首先是需要搜索引擎來(lái)爬行、抓取的,當(dāng)搜索引擎抓取到你的頁(yè)面后,而且它覺得你的文章質(zhì)量符合它的收錄標(biāo)準(zhǔn)的時(shí)候,它就會(huì)把你的網(wǎng)頁(yè)收錄進(jìn)它的索引庫(kù)、 然后經(jīng)過(guò)處理給予你的網(wǎng)頁(yè)相應(yīng)的關(guān)鍵詞的排名,而分析日志,可以清楚的知道我們哪些頁(yè)面被抓取了,哪些頁(yè)面沒有被抓取,網(wǎng)站的每個(gè)目錄的抓取情況,這樣我們可以采取相應(yīng)的措施來(lái)促進(jìn)搜索引擎的收錄。