一、網站服務器空間要穩定
網站服務器空間是否穩定,可通百度資源網站管理后臺中的抓取異常列表進行查看,看出服務器的穩定性,同時可進行抓取測試。
二、檢查robots.txt協議文件是否允許抓取
網站首頁、及各欄目頁面是否被屏蔽抓取,具體的robots抓取規則的書寫一定要規范合理使用。
三、檢查網站各個頁面路徑是否良好
調用的參數越多越不利于收錄;
使用site:網站檢查是否有動靜態共存路徑;
四、重要的頁面不能寫在JS標簽內
首頁導航、版塊樣式、各欄目頁塊型模、內頁版塊都不能寫JS標簽里,不會看代碼的用戶,可以使用谷歌瀏覽器,設置成不允許javascript抓取,刷新之后看頁面效果,JS部分不能展示及顯示出效果。
五、頁面內容質量良好
網站頁面內容鏈接合理,內容質量良好,且沒有頻繁改動頁面,內容不存在采集行為,且無用戶搜索需求。