域名收录的定义
域名收录这件事是说, 搜索引擎, 比如说像百度、Google、Bing这些, 把某一个域名, 还有这个域名下面所有的网页, 全部都放到他们自己的索引数据库里面去。
等这个过程做完了之后呢, 用户要是想用关键词来搜索东西的话, 就都能找得到在这个域名下面的那些页面了。所以说域名收录是网站能够拿到自然来的搜索流量的一个最基础的先决条件, 如果没有被收录的那个域名, 是不会在任何一个搜索结果里面出现的。
域名被收录需满足的核心条件
1. 域名解析正常, 该域名必须已经完成DNS解析流程, 并且指向一个有效的服务器IP地址。
2. 网站内容可抓取这句话的意思是, 服务器没有通过设置 robots.txt 来全面禁止大家去抓取数据, 而且各个页面都能正常返回 HTTP 200 这个状态码, 同时在请求发出之后, 回应的时间不会超过 10 秒钟。
3. 内容具备原创性与价值: 页面里有实质性的原创内容, 不是没有内容的空壳子, 也不会去重复使用那些模板, 里面的信息密度足够高, 能够支撑用户进行搜索的需求。
4. 关于站点结构规范, 这个要求是要采取那种分好层次的、看起来很清楚的网址层级。另外, 还得准备一个网站地图文件, 这个文件的名称就是sitemap.xml。
在把这个文件准备好之后, 就要把它交上去, 交给搜索引擎那边的一个管理平台去处理。这个管理平台的名字叫做Webmaster平台, 大家经常听到的例子比如说是百度的站长平台, 或者是Google Search Console这样的东西。
5. 无违规记录的意思是, 域名和网站并没有被搜索引擎列入黑名单, 也没有处于沙盒观察期, 原因是域名及网站没有因为作弊、恶意跳转以及违规内容而出现这类情况。
域名收录的标准流程
第一步:提交站点。你要去对应的搜索引擎的站长工具的后台, 把域名还有sitemap这些信息都提交上去, 用这种方式来主动告诉爬虫们, 哪里是抓取数据的入口。
第二步:等待爬虫抓取。搜索引擎会根据优先级, 定期派遣爬虫去访问域名的页面, 比如百度用的是baiduspider, google用的是googlebot。
在第三步:页面审核与索引这个环节里面, 当那个负责抓取的程序把网页的内容给采集完毕以后, 系统中的这一套处理机制会接着动手, 对咱们看到的这些页面去做出一个好坏的质量上的评价, 还要把这些重复的都挑出来去掉, 再把它们按类别分好, 那些通过了考核、符合咱们说的那些标准的页面啊, 就会最终被存放到那个叫做索引库的地方里去。
第四步:收录生效。通常来说, 新的域名需要等待7个到30个自然日的时间, 才能够完成它的第一次被收录, 这个时间的长短是根据站点内容的更新频率以及站点权重的不同而有所变化的。在完成首次收录之后, 如果继续保持定期的更新, 那么就可以持续地获得新页面的收录机会。
域名未被收录的高频原因与对应处理
官方提示
各个搜索引擎在收录方面的策略, 会随着算法的不断更新而持续进行调整, 站长们需要经常去查看站长工具后台里的那个名为“索引覆盖”的报告, 同时要关注收录数量的变化情况以及出现的任何异常提示, 以便做出及时的响应, 而不是选择被动地去等待, 对于域名的收录这件事来说, 它并不是一个只进行一次就完事的一锤子买卖, 事实上, 它是一个需要站长付出精力、进行长期维护和持续经营的过程。
