资源有限时,最先处理的不是“多发文章”,而是保证网站能被正常抓取、能被正确索引、核心页面能承接已有需求。对baidu网站而言,这三件事没做好,后续内容与外链投入都会被浪费。建议按下面顺序逐项检查,每项都给出查法、判断标准和适用条件。
要查的是搜索引擎能否正常访问你的页面。做法是查看服务器日志中百度蜘蛛的访问记录,再配合抓取诊断工具测试首页和几个重要栏目页。如果日志里长期没有蜘蛛访问,或者诊断返回超时、403、503,说明抓取环节存在阻碍。此时优先处理服务器稳定性、防火墙误拦、robots.txt误封。适用条件:网站上线一段时间但收录极少。判断结果:抓取恢复后,索引和排名才有讨论基础。
要查的是哪些页面已经被收录,哪些没有。做法是用站点查询指令查看大致收录规模,再逐条检查首页、栏目页、重点内容页是否出现在结果中。如果只有首页被收录,栏目和内容页大量缺失,问题通常出在链接结构或页面质量上。此时优先修内链,让每个重要页面都能从首页通过少量点击到达。适用条件:网站有明确的主推页面。判断结果:核心页面进入索引后,才可能参与后续排序。
要查的是标题、描述和正文是否回答了用户搜索该词时想解决的问题。做法是挑出三到五个最重要的页面,对照搜索词逐页检查:标题是否说清页面主题,首屏是否直接给出答案,正文是否有可执行信息。如果页面只是堆砌相关词而没有解决具体问题,优先改写而不是继续新增页面。适用条件:已有页面有索引但几乎没有点击或停留。判断结果:匹配度提升后,点击和转化才有改善空间。
一个假设例子:某站点有200个页面,日志显示蜘蛛每天只访问首页,栏目页全部未收录。此时先修内链和robots设置,而不是再写50篇新文章。因为新文章同样进不了索引,投入不会产生效果。
打开服务器日志和抓取诊断工具,记录最近一周蜘蛛对首页、栏目页、内容页的访问次数与返回状态码。把返回异常和从未被访问的URL列成一张表,按“抓取—索引—内容”的顺序逐项处理,处理完一项再验证一项。