掃二維碼與項目經(jīng)理溝通
我們在微信上24小時期待你的聲音
解答本文疑問/技術咨詢/運營咨詢/技術建議/互聯(lián)網(wǎng)交流
百度站長平臺:網(wǎng)站頁面長度過長，也會導致不收錄？
2017-06-21 23:05
欄目：行業(yè)資訊
查看(7852)
文/來自百度站長平臺
最近院長收到一個非常典型的抓取優(yōu)化例子，整理一下分享給各位，各位站長們謹記不要出現(xiàn)相同的情況：
站點反饋：
網(wǎng)站主體內(nèi)容都是js生成，針對用戶訪問，沒有做優(yōu)化；但是網(wǎng)站特針對爬蟲抓取做了優(yōu)化，直接將圖片二進制內(nèi)容放到了html中導致頁面長度過長；然而優(yōu)化后發(fā)現(xiàn)內(nèi)容卻不被百度收錄
頁面質(zhì)量很好，還特意針對爬蟲做了優(yōu)化，為什么內(nèi)容反而不收錄了呢？
工程師分析：
1、網(wǎng)站針對爬蟲爬取做的優(yōu)化，直接將圖片二進制內(nèi)容放到了html中導致頁面長度過長，網(wǎng)站頁面長度達164k；
2、?站點優(yōu)化后將主體內(nèi)容放于最后，圖片卻放于前面；
3、爬蟲抓取內(nèi)容后，頁面內(nèi)容過長被截斷，已抓取部分無法識別到主體內(nèi)容，最終導致頁面被認定為空短而不收錄。
工程師建議：
1、不建議站點使用js生成主體內(nèi)容，如js渲染出錯，很可能導致頁面內(nèi)容讀取錯誤，頁面無法抓取
2、?如站點針對爬蟲爬取做優(yōu)化，建議頁面長度在128k之內(nèi)，不要過長
3、針對爬蟲爬取做優(yōu)化，請將主體內(nèi)容放于前方，避免抓取截斷造成的內(nèi)容抓取不全
轉(zhuǎn)載請注明出處：百度站長平臺:網(wǎng)站頁面長度過長，也會導致不收錄？ - 微構網(wǎng)絡
- 聯(lián)系我們
- 電話：15574303608
- 郵箱：server@csweigou.com
- 地址：長沙市五一西路錦繡中環(huán)1116(五一廣場平和堂對面)
- 大項目團隊：長沙市芙蓉區(qū)五一大道曉園大廈17樓B座
移動版官網(wǎng)
尋找項目經(jīng)理
- 在線咨詢
- 15574303608
-
項目經(jīng)理微信
-
移動版官網(wǎng)