站点上线一个月,site 语法查不到任何结果,后台统计也没有蜘蛛来访。先别急着改标题和堆关键词,收录为零通常是抓取环节就断了,内容还没被看到。

第一步:确认蜘蛛能进来

curl -A "Mozilla/5.0 (compatible;
Baiduspider/2.0; +http://www.baidu.com/
search/spider.html)" -I https://你的域名/

返回 200 且没有跳转到验证页才算通。返回 403、503 或者一直 302 到登录页,都是服务器层把蜘蛛挡了,改内容毫无意义。

第二步:检查三处开关

  • robots.txt 是否放行,且返回类型是 text/plain
  • 页面 head 里有没有误加的 noindex
  • 是否开启了「禁止搜索引擎收录」类的站点设置

第三步:把入口交出去

在资源平台完成站点验证,提交 sitemap,再用普通收录接口推送首页和栏目页。推送接口每天有额度,优先推列表页,让蜘蛛顺着链接往下爬。

新站有观察期,收录慢是常态。保持每周稳定更新、内链结构清晰,比反复提交更有效。判断是否有进展,看抓取频次和抓取异常,而不是只看 site 结果。

另外别用采集内容铺量,一旦被判低质,后续再想恢复要多花几个月。先把首页、栏目页和十篇左右原创内容做扎实,收录自然会上来。

作者 9823189

发表回复