对于域名收录异常这种状况, 比如新网站没有收录、收录的数量突然大幅减少、或者只是部分页面不见了等等这些现象, 来进行排查的时候, 核心的处理路径应该是这样安排的, 首先第一步要先去确认搜索引擎到底是不是已经把那些链接的地址给抓取到了, 然后再进一步去确认被抓取到的内容是否能够被正常地进行渲染展示, 最后再去仔细排查在站点层面是否存在受到惩罚或者是被屏蔽的因素, 下面就是按照这个排查的优先级高低来列出的完整操作步骤。
确认抓取状态
1. 先登录到搜索引擎的站长工具,比如说百度的站长平台或者Google Search Console域名收录异常排查方法, 再去查看那个「抓取统计」页面或是「URL检查」栏目, 这样一来就能确认一下, 目标URL在最近30天以内, 到底是不是有过被抓取的记录。
2. 需要在搜索引擎的地址栏输入 site:你的域名这种形式的内容, 然后对已经收录的页面数量进行查看, 并将这个实际的数字与您原本所预期的数字相对比, 以此来判断二者在情况上是否存在不一致的地方。
3. 如果抓取的记录是零的话, 就需要先去检查一下看robots.txt文件是不是把这个相关的路径给误屏蔽掉了, 同时要查看一下sitemap.xml这个文件有没有提交上去, 并且它返回的HTTP状态码是不是200。
检查页面可访问性与渲染
1. 使用无痕模式浏览器前往目标URL进行访问, 然后仔细确认页面返回的HTTP状态码确实是200, 以此办法来排除掉404、301或者5xx这类异常情况的发生。
2. 检查一下是不是被硬生生地跳转去了别的域名或者别的端口, 还要看看是不是出现了混合内容这种问题, 就是在HTTPS的页面里加载了HTTP的资源, 从而导致页面渲染失败。
3. 如果页面的内容是依靠JavaScript来进行动态渲染的, 你务必要确认抓取的软件是不是能够取到完整的文档对象模型, 百度对于JavaScript渲染的支持范围其实是比较有限的, 建议大家把核心的内容换成在服务器端进行渲染。
排查站点级惩罚与屏蔽
1. 在站长平台的那个叫做安全与质量的功能模块里头, 确认一确认一下是否存在恶意代码注入这种问题, 还有没有发生站群作弊的情况, 另外还要查看是否有隐藏文字之类的违规行为记录。
2. 你可以使用WHOIS这个工具去查一下那个域名的注册时间, 顺便也看看它以前到底是用来干啥的。如果你新买的这个域名之前曾经被人用来搞那种黑帽式的搜索引擎优化操作的话, 那你得主动向搜索引擎那边提交一个人工复审的请求才行。
3. 通过使用多组IP地址来进行模拟访问操作, 从而确认服务器的IP地址并没有被列入到相关的黑名单位置。
检查技术配置
1. 请检查页面的标题部分以及元描述部分, 这两个地方是不是都写好了目标关键词, 并且从整站来看, 每个页面的这两个内容是独一无二的, 不会重复使用。
2. 需要检查内链结构是不是完整的, 并且要看核心的页面能不能通过从首页开始点击两到三次就到达。
3. 大家需要首屏加载时间保持在3秒这一限制标准里面, 要是超时了有可能触发降权。
4. 大家务必要仔细检查一遍, 看看是不是不小心把那些meta标签给设置错了, 具体来说就是noindex和nofollow这些标签的情况。
提交与催促收录
1. 在确认上述排查工作没有出现任何异常之后, 便可以通过站长平台来进行URL的批量提交操作, 这里需要注意的是, 百度这一方是支持所谓的快速收录功能的, 并且它给的每日配额数量是10条, 而Google那边则是要通过Indexing API来进行提交的。
2. 如果在提交之后过了7至14天的时间还是没有生效的话, 可以通过站长平台上的反馈中心去找到人工审核这一通道进行联系。
持续监控
把每周收录量的监控表给建立起来, 如果发现数据的波动超过了百分之二十的话, 要马上把前面说的那个排查流程给触发掉, 为了跟踪外部的收录变化这种情况, 可以借助像5118这种工具, 也可以去用Ahrefs这类工具来进行跟踪。
注意事项
排查的顺序不能随便更换, 得首先去把抓取层面存在的那些毛病给排除掉, 之后再去查看内容层面那里有什么状况, 这样能够防止做出没有效果的举动。
所有的修改工作结束之后, 务必要重新提交网站地图,然后等待下一个抓取周期以便生效。
对于多站点架构这一情况域名收录异常排查方法, 必须要把各个子域名逐个去检查一下, 千万不可以漏掉。
