公司網(wǎng)站制作商業(yè)網(wǎng)站中存在大量無效URL不利于搜索引擎收錄
日期 : 2021-04-16 21:09:19
商業(yè)網(wǎng)站中存在大量無效URL不利于搜索引擎收錄。很多商業(yè)網(wǎng)站中都有產(chǎn)品條件過濾系統(tǒng), 大量過濾條件頁面內(nèi)容重復(fù)或極為類似, 使得網(wǎng)站整體質(zhì)量下降, 同時大量過濾條件頁面沒有對應(yīng)產(chǎn)品, 頁面無內(nèi)容造成搜索引擎蜘蛛的誤解, 另外爬行大量過濾條件頁面極大浪費蜘蛛爬行時間, 造成有用頁面收錄機會下降。
這些無效URL不會被收錄反倒有負(fù)面作用, 對此越來越多的人考慮iframe + robots禁止。如果只將過濾部分代碼放進iframe, 很多人認(rèn)為這部分內(nèi)容不屬于當(dāng)前頁面, 也即隱藏了內(nèi)容。但其依然是客觀存在的, 搜索引擎是可以發(fā)現(xiàn)iframe中的內(nèi)容和鏈接的, 依然有爬行這些URL的可能性, 所以還要加robots禁止爬行。
這些無效URL不會被收錄反倒有負(fù)面作用, 對此越來越多的人考慮iframe + robots禁止。如果只將過濾部分代碼放進iframe, 很多人認(rèn)為這部分內(nèi)容不屬于當(dāng)前頁面, 也即隱藏了內(nèi)容。但其依然是客觀存在的, 搜索引擎是可以發(fā)現(xiàn)iframe中的內(nèi)容和鏈接的, 依然有爬行這些URL的可能性, 所以還要加robots禁止爬行。