如果谷歌没有收录你的网站,那么网站自然不会出现在搜索结果,无法获得的搜索引擎自然流量。关于谷歌收录的相关问题,也是站长圈子屡见不鲜的话题。
今天就与大家一起分享下如何让谷歌快速收录网站的11个小技巧(不仅针对谷歌,其实适用于所有搜索引擎),本文会教你如何解决以下这三个问题:
你的整个站点没有被索引;
一部分页面有索引,而其他的没有;
新发布的页面并没有呗即时索引。
但是首先,请确保我们保持一致,并充分理解索引的意义。
什么是抓取和索引?
Google是通过抓取来发现新的网页,然后将这些网页添加到索引中。他们使用称为Googlebot的网络爬虫来进行此操作(如果你的WordPress网站安装了Spider Analyser,你会发现许多类型的爬虫)。
很困惑?让我们来对一些名词做一些解释:
抓取:在网页上跟踪超链接以发现新内容的过程。
索引:将网页存储在庞大的数据库中的过程。
网络爬虫:一种执行抓取的程序。
Googlebot:谷歌的网络爬虫。
当你在Google搜索内容时,其实是在要求Google返回其索引中的所有相关页面。 由于通常有成千上万的网页符合要求,因此Google的排名算法会尽力对网页进行排序,以便你会首先看到最好的和最相关的结果。
这里要阐述的一个要点是,索引和排名是两个不同的事情。
索引为了是参与,而排名是为了获胜。
如果你都没有参与是不可能获得获胜的。
如何检查你的页面是否被索引了
进入谷歌搜索引擎,然后进行如下搜索 site:yourdomain.com
这里的数字显示的是谷歌大致的索引页面数量。
如果你想检查某个具体的页面是否被索引的话,同样也可以进行这样的操作site:详细的网址
(此方法仅适合谷歌) 。
如果没有任何结果的话,就说明页面没有被索引。
如果你是Google Search Console的用户的话,你只需要查看覆盖率额报告就可以找到精准的索引数据。你只需要进入:
Google Search Console > 索引 > 覆盖率
查看有效页面的数量(包括警告页面数量)。
如果这两个数字的总和不是零,那么Google至少会将你网站上的某些页面编入索引。 如果没有,那么你可能遇到严重的问题,因为你的网页均未被索引。
除上述site命令的方法,你也可以使用Google Search Console来检测特定页面是否被谷歌索引。你只需要将页面URL放入URL检测工具中。
如果页面被索引,那么会显示“URL is on Google(URL在谷歌中)”。
如果页面没有被索引,那么这里会显示“URL is not on Google(URL不在谷歌中)”
如何让谷歌收录网站页面
你的网站或者页面没有被谷歌收录?
如果是谷歌搜索引擎,你可以尝试使用以下这些:
- 进入Google Search Console。
- 进入URL检测工具。
- 将需要索引的URL粘贴到搜索框中。
- 等待谷歌检测URL。
- 点击“请求编入索引”按钮。
当你发布新帖子或页面时,最好这么操作。你实际上是在告诉Google,你已经在网站上添加了一些新内容,它们应该去看看。
但是,请求编入收录索引不太可能解决旧页面的索引问题,并且这只是一个最原始的方式,提交链接不能确保你的URL一定被收录,尤其是百度。
如果要全面解决网站搜索引擎收录问题,请按照下面的清单进行诊断并解决问题。
下方是一些解决方法的快速访问链接,你可能已经试过其中一些:
- 去除Robots.txt中的抓取阻碍
- 去除不必要的noindex标签
- 将需要索引的页面包含在网站地图中
- 去除不必要的canonical标签
- 检查页面是否是孤岛页面
- 修复不必要的内部nofollow链接
- 在“强力”页面中加入内部链接
- 确保页面独特并且有价值
- 去除或优化低质量页面 (优化“抓取预算”)
- 建立高质量的外链
- 使用一切可用的推送方式
1) 去除Robots.txt中的抓取阻碍
Google或者百度没有索引整个网站?这可能是由于robots.txt文件存在抓取阻碍导致的。
进入http://yourdomain.com/robots.txt检查详细的问题。
检查是否右下方的这两段中的任意一个代码:
(1)这样的规则将会告诉谷歌不要索引你的网站;
User-agent: Googlebot
Disallow: /
(2)这样的规则将会告诉百度不要索引你的网站;
User-agent: Baiduspider
Disallow: /
(3)这样的规则将会告诉所有搜索引擎不要索引你的网站;
User-agent: *
Disallow: /
上述三个规则不允许搜索引擎蜘蛛抓取网站上的任何页面。要解决此问题,你只需要删除它们,就这么简单。
如果百度或者谷歌只是没有为单个网页编制索引,也有可能是robots.txt中的某个代码导致的。
要检测单个URL是否因robots.txt没有被谷歌搜索引擎索引收录:
请将URL粘贴到Google Search Console中的URL检测工具中。点击覆盖率板块以显示更多详细信息,然后查找“是否允许抓取? 否:被robots.txt阻止”错误。
这就代表,页面被robots.txt阻止了。
要检测单个URL是否因为robots.txt没有被百度收录索引:
进入网站关联的百度搜索资源平台,找到robots菜单,选择对应的站点名称,点击检测并更新后,在校验出输入你要验证的URL地址,点击校验。(不过不太好使,老用不了,这个功能)
如果是这种情况,请重新检查你的robots.txt文件中是否有与该页面或相关目录有关的“Disallow”规则。
在需要的情况下移除这段代码即可。
2) 去除不必要的noindex标签
如果你告诉谷歌不索引某个网页,谷歌是不会为其编制索引的。这可以让一部分页面保持隐秘。有两种方法可以做到这一点:
方法1:meta标签
在页面的<head>
中如果出现如下任意代码,则不会被谷歌或者百度收录索引:
<meta name=“robots” content=“noindex”>
<meta name=“googlerobot” content=“noindex”>
<meta name=“baiduspider” content=“noindex”>
这是一个针对爬虫的meta标记,它告诉搜索引擎它们是否可以为该页面编制索引。
小提示. 核心的参数是“noindex”,如果出现了“noindex”就代表页面设置了不索引。
如果你想找到网上所有拥有noindex meta标签的页面,你只需要使用Ahrefs的网站诊断工具做个检测即可。然后进入Indexability (可索引性)报告。寻找“Noindex page(不索引页面)“提示。
点击后查看所有被屏蔽的页面。删除那些需要索引页面的noindex meta标签。
方法2:X‑Robots-Tag
网络爬虫遵循X-Robots-Tag的HTTP响应标头。你可以使用服务器端脚本语言(例如PHP)、. htaccess文件中的内容或通过更改服务器配置来实现此效果。
Google Search Console中的URL检查工具可告诉你,是否是由于此标头而阻止Google抓取页面。只需输入URL,然后查找“允许索引?否:在“ X‑Robots-Tag” http标头中检测到“ noindex”标记。
如果你想检测整个站点是否存在这样的问题,那么可以使用Ahrefs的网站诊断工具,并且在Page Explorer (页面分析)筛选框中选择“Robots information in HTTP header(检查HTTP表头的Robots信息)”进行查看:
同时,告诉网站开发者,修改需要要索引的页面的表头。
推荐阅读: 使用X-Robots-Tag HTTP表头进行特定的SEO:技巧和窍门
3) 将需要索引的页面包含在网站地图中
网站地图会告诉Google或者百度等搜索引擎网站上的哪些页面很重要,哪些不重要。它同时也可以为搜索引擎的抓取频率做一些指导。
一般情况下搜索引擎应该都能够在你的网站上找到网页,无论它们是否在站点地图中,但将它们包括在网站地图内仍然是一种很好的做法。毕竟,没必要让百度或者谷歌进行毫无意义的抓取。
要检查网页是否在你的站点地图中,请使用Google Search Console中的URL检查工具。如果你看到“URL不在Google上”和“站点地图:不适用”,则表明该URL不在你的站点地图中或未建立索引。
没有使用Google Search Console?进入你的网站地图,通常是这个地址:http://yourdomain.com/sitemap.xml,然后搜索这个页面的URL。
或者,你想找到所有的不在网站地图中,但有需要索引的页面,你只需要使用你Ahrefs网站诊断工具。进入Page Explorer (页面分析),并进行如下筛选:
这些页面应该在你的网站地图中,所以添加进去。添加后,通过下方的Ping方法告诉谷歌你已经更新了这个网站地图。
http://www.google.com/ping?sitemap=http://yourwebsite.com/sitemap_url.xml
将后方的提示换成你的网站地图地址,你应该可以收到下方这样的消息:
这样可以让谷歌加速索引你的页面。
关于生成WordPress网站Sitemap
有很多WordPress专用的SEO优化插件都支持生成Sitemap网站地图,比如All in One SEO,Yoast SEO,Google XML Sitemaps或者我们的Smart SEO Tool。
Smart SEO Tool插件支持生成标准的XML网站地图,并且能够将网站地图更新通知到谷歌和Bing搜索引擎;并且生成的地图文件满足部分搜索引擎单个文件不超过50000条URL地址的要求。
注:提交sitemap地图,务必遵循“非索引型Sitemap地址提交”。
索引 ≠ 排名
在Google上获得索引、收录,并不代表你能获得排名或者是流量。
这是两个不同的东西。
索引意味着搜索引擎已经看到了你的网站,但是并不意味着你的内容值得搜索引擎对特定关键词进行排序。
这就是SEO需要做的——优化网页以针对特定关键词进行排名的艺术。
简单的来说,SEO包含:
- 找到你的用户在搜索什么;
- 围绕话题创作内容;
- 针对目标关键词进行优化;
- 外链建设;
- 对页面内容进行更新,保持“新鲜”。
… 以及一些文章:
最后
搜索引擎不索引你网站或页面的原因只有两个:
- 技术性问题导致它无法索引;
- 它认为你的内容没有价值,不值得被索引。
这两个问题很可能同时存在。但是,我想说技术问题要普遍得多。技术问题还可能导致低质量内容的自动生成(例如,分页问题)。
尽管如此,通过上面的检查表多数是可以解决索引问题的。
只要记住索引≠排名即可。如果你想对任何有价值的关键词进行排名,并吸引源源不断的自然流量,那么SEO就是至关重要的。
然后,SEO优化无非来来去去就那些要点:“Google SEO入门优化教程,89个谷歌SEO优化实用技巧”,重点还得看站长是否能够遵守这些规则并持久做站。
简言概之,优质的内容——网站优化——链接建设——搜索引擎推送,反复实践,各个击破。相信总会有惊喜来临之时!
想了解更多:谷歌SEO、谷歌优化、外贸快车、小语种网站、谷歌ADS、Youtube视频、外贸牛、全球贸易通、扬州谷歌优化、杭州谷歌优化、上海谷歌优化、请添加
郑重声明:本文版权归原作者所有,转载文章仅为传播更多信息之目的,如作者信息标记有误,请第一时间联系我们修改或删除,多谢。