如何拒绝搜索引擎收录网站

庆瑞seo博客1年前网站优化202

共计 1004 个字符,预计需要花费 3 分钟才能阅读完成。

如何拒绝搜索引擎收录网站

一个新的 网站 建好之后,只要 搜索引擎 蜘蛛抓取到的、网站内容不是很差劲那么搜索引擎就很有可能收录我们的网站,如果因为某种原因不想让搜索引擎收录网站,那要如何操作?下面本篇文章就来给大家讲解一下。

方法一:设置 robots.txt 方法

可以利用设置 robots.txt 来屏蔽搜索引擎蜘蛛,那么什么是 robots.txt?

搜索引擎使用 spider 程序自动访问互联网上的网页并获取网页信息。spider 在访问一个网站时,会首先会检查该网站的根域下是否有一个叫做 robots.txt 的纯文本文件,这个文件用于指定 spider 在您网站上的抓取范围。您可以在您的网站中创建一个 robots.txt,在文件中声明该网站中不想被搜索引擎收录的部分或者指定搜索引擎只收录特定的部分。

请注意,仅当您的网站包含不希望被搜索引擎收录的内容时,才需要使用 robots.txt 文件。如果您希望搜索引擎收录网站上所有内容,请勿建立 robots.txt 文件。

如何使用 robots.txt 屏蔽搜索引擎蜘蛛?

搜索引擎默认的遵守 robots.txt 协议,创建 robots.txt 文本文件放至网站根目录下,编辑代码如下:

User-agent: *
Disallow: /

通过以上代码,即可告诉搜索引擎不要抓取采取收录本网站,注意慎用如上代码:这将禁止所有搜索引擎访问网站的任何部分。

如果只想禁止百度收录全站,可以编辑如下代码:

User-agent: Baiduspider
Disallow: /

如果只想禁止 Google 收录全站,可以编辑如下代码:

User-agent: Googlebot
Disallow: /

方式二:设置网页代码方法

在网站首页代码 与 之间,加入如下代码,即可禁止搜索引擎抓取网站并显示网页快照。

在网站首页代码 与 之间,加入如下代码,即可禁止百度搜索引擎抓取网站并显示网页快照。

在网站首页代码 与 之间,加入如下代码,即可禁止谷歌搜索引擎抓取网站并显示网页快照。

以上就是如何拒绝搜索引擎收录网站的详细内容,更多请关注王尘宇博客其它相关文章!

备案号:豫ICP备19030587号

相关文章

SEO人员一定要知道的SEO专业术语!!!

共计 1926 个字符,预计需要花费 5 分钟才能阅读完成。 好些人一听 seo 就懵了,就别提 SEO 专业术语了。接下来我会分三次普及一下 SEO 相关的专业术语1、什么是 搜索引擎搜索引...

竞价排名真的是价高者得吗?

竞价排名真的是价高者得吗?

共计 930 个字符,预计需要花费 3 分钟才能阅读完成。 互联网时代,当人们想要了解某些信息的时候,都会习惯性的打开浏览器进行搜索,最常用的就是 百度 搜索了,因此百度搜索结果页面的排名就...

友情链接怎么做 seo交换友情链接的作用

共计 2034 个字符,预计需要花费 6 分钟才能阅读完成。 友情链接 也称为网站交换链接、互惠链接、互换 链接、联盟链接等,是具有一定资源互补优势的网站之间的简单合作形式,即分别在自己的...

SEO排名,4个优化时间周期,必备掌握!

共计 1505 个字符,预计需要花费 4 分钟才能阅读完成。 在做 seo 的过程中,我们都知道,任何一项 SEO 工作都是需要一个时间周期的,它并不是立刻响应,理由非常简单,搜索引擎 总是需...

公众号可被搜索引擎抓取,微信或将更加“互联互通”

公众号可被搜索引擎抓取,微信或将更加“互联互通”

共计 1999 个字符,预计需要花费 5 分钟才能阅读完成。 尽管官方已经回应,但这也可能是微信进一步“互联互通”的先兆。微信 公众号 的内容只能在微信中看,这可以说早在多年前就已经成为用户...

seo门槛变高了?为何现在优化有点难?

seo门槛变高了?为何现在优化有点难?

共计 488 个字符,预计需要花费 2 分钟才能阅读完成。 seo优化未来的发展变化是变得简单还是越来越难呢?随着 搜索引擎 的发展,互联网信息越来越多,搜索引擎算法也在不断的更新,单纯的靠...

发表评论    

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。