首页 专题 SEO 如何拒绝搜索引擎收录网站

如何拒绝搜索引擎收录网站

May 24, 2019 pm 03:29 PM
搜索引擎 网站

拒绝搜索引擎收录网站的方法:可以在head标签中添加内容【<meta name="robots" content="noarchive">】,禁止搜索引擎抓取网站并显示网页快照。

如何拒绝搜索引擎收录网站

一个新的网站建好之后,只要搜索引擎蜘蛛抓取到的、网站内容不是很差劲那么搜索引擎就很有可能收录我们的网站,如果因为某种原因不想让搜索引擎收录网站,那要如何操作?下面本篇文章就来给大家讲解一下。

方法一:设置 robots.txt 方法

可以利用设置robots.txt来屏蔽搜索引擎蜘蛛,那么什么是robots.txt?

搜索引擎使用spider程序自动访问互联网上的网页并获取网页信息。spider在访问一个网站时,会首先会检查该网站的根域下是否有一个叫做 robots.txt的纯文本文件,这个文件用于指定spider在您网站上的抓取范围。您可以在您的网站中创建一个robots.txt,在文件中声明该网站中不想被搜索引擎收录的部分或者指定搜索引擎只收录特定的部分。

请注意,仅当您的网站包含不希望被搜索引擎收录的内容时,才需要使用robots.txt文件。如果您希望搜索引擎收录网站上所有内容,请勿建立robots.txt文件。

如何使用robots.txt屏蔽搜索引擎蜘蛛?

搜索引擎默认的遵守 robots.txt 协议,创建 robots.txt 文本文件放至网站根目录下,编辑代码如下:

User-agent: *
Disallow: /
登录后复制

通过以上代码,即可告诉搜索引擎不要抓取采取收录本网站,注意慎用如上代码:这将禁止所有搜索引擎访问网站的任何部分。

如果只想禁止百度收录全站,可以编辑如下代码:

User-agent: Baiduspider
Disallow: /
登录后复制

如果只想禁止Google收录全站,可以编辑如下代码:

User-agent: Googlebot
Disallow: /
登录后复制

方式二:设置网页代码方法

在网站首页代码与之间,加入如下代码,即可禁止搜索引擎抓取网站并显示网页快照。

<meta name="robots" content="noarchive">
登录后复制

在网站首页代码与之间,加入如下代码,即可禁止百度搜索引擎抓取网站并显示网页快照。

<meta name="Baiduspider" content="noarchive">
登录后复制

在网站首页代码与之间,加入如下代码,即可禁止谷歌搜索引擎抓取网站并显示网页快照。

<meta name="googlebot" content="noarchive">
登录后复制

以上是如何拒绝搜索引擎收录网站的详细内容。更多信息请关注PHP中文网其他相关文章!

本站声明
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智能驱动的应用程序,用于创建逼真的裸体照片

AI Clothes Remover

AI Clothes Remover

用于从照片中去除衣服的在线人工智能工具。

Undress AI Tool

Undress AI Tool

免费脱衣服图片

Clothoff.io

Clothoff.io

AI脱衣机

AI Hentai Generator

AI Hentai Generator

免费生成ai无尽的。

热门文章

R.E.P.O.能量晶体解释及其做什么(黄色晶体)
1 个月前 By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.最佳图形设置
1 个月前 By 尊渡假赌尊渡假赌尊渡假赌
威尔R.E.P.O.有交叉游戏吗?
1 个月前 By 尊渡假赌尊渡假赌尊渡假赌

热工具

记事本++7.3.1

记事本++7.3.1

好用且免费的代码编辑器

SublimeText3汉化版

SublimeText3汉化版

中文版,非常好用

禅工作室 13.0.1

禅工作室 13.0.1

功能强大的PHP集成开发环境

Dreamweaver CS6

Dreamweaver CS6

视觉化网页开发工具

SublimeText3 Mac版

SublimeText3 Mac版

神级代码编辑软件(SublimeText3)

有什么学c语言的网站 有什么学c语言的网站 Jan 30, 2024 pm 02:38 PM

学c语言的网站:1、C语言中文网;2、菜鸟教程;3、C语言论坛;4、C语言帝国;5、脚本之家;6、天极网;7、红黑联盟;8、51自学网;9、力扣;10、C Programming。详细介绍:1、C语言中文网,这是一个专门为初学者提供C语言学习资料的网站,内容丰富,包括基础语法、指针、数组、函数、结构体等多个模块;2、菜鸟教程,这是一个综合性的编程学习网站等等。

如何使用任务计划程序打开网站 如何使用任务计划程序打开网站 Oct 02, 2023 pm 11:13 PM

您是否每天在大约相同的时间频繁访问同一网站?这可能会导致花费大量时间打开多个浏览器选项卡,并在执行日常任务时使浏览器充满混乱。好吧,打开它而不必手动启动浏览器怎么样?这非常简单,不需要您下载任何第三方应用程序,如下所示。如何设置任务计划程序以打开网站?按键,在搜索框中键入任务计划程序,然后单击打开。Windows在右侧边栏上,单击“创建基本任务”选项。在名称字段中,输入要打开的网站的名称,然后单击下一步。接下来,在触发器下,单击时间频率并点击下一步。选择您希望活动重复多长时间并点击下一步。选择启

将将网站转换为独立的 Mac 应用程序的方法 将将网站转换为独立的 Mac 应用程序的方法 Oct 12, 2023 pm 11:17 PM

在macOSSonoma和Safari17中,您可以将网站变成“网络应用程序”,这些应用程序可以位于Mac的扩展坞中,并且可以像任何其他应用程序一样访问,而无需打开浏览器。继续阅读以了解其工作原理。多亏了Apple的Safari浏览器中的新选项,现在可以将您经常访问的互联网上的任何网站变成一个独立的“网络应用程序”,位于Mac的扩展坞中,随时供您访问。Web应用程序与任何应用程序一样与任务控制和舞台管理器配合使用,也可以通过Launchpad或SpotlightSearch打开。如何将任何网站变

百度云盘搜索引擎入口 百度云盘搜索引擎入口 Feb 27, 2024 pm 01:00 PM

百度云是能够让用户存放很多文件的软件,那么百度云盘搜索引擎入口是什么呢?用户们可以输入https://pan.baidu.com这个网址就能够进入百度云盘,这篇百度云盘搜索引擎最新入口分享就能够告诉大家具体的介绍,下面就是详细的介绍,赶紧看看吧。百度云盘搜索引擎入口1、千帆搜索网址:https://pan.qianfan.app支持网盘:聚合搜索,阿里、百度、夸克、蓝奏、天翼、迅雷网盘查看方式:需登录、关注公号获取激活码优点:网盘很全,资源很多,界面简单。2、猫狸盘搜网址:alipansou.c

Java开发:如何实现搜索引擎和全文检索功能 Java开发:如何实现搜索引擎和全文检索功能 Sep 21, 2023 pm 01:10 PM

Java开发:如何实现搜索引擎和全文检索功能,需要具体代码示例搜索引擎和全文检索是现代互联网时代的重要功能。它们不仅可以帮助用户快速找到想要的内容,还可以为网站和应用程序提供更好的用户体验。本文将介绍如何使用Java开发搜索引擎和全文检索功能,并提供一些具体的代码示例。使用Lucene库实现全文检索Lucene是一款开源的全文检索引擎库,由ApacheSo

谷歌浏览器更换搜索引擎怎么设置?浏览器更换搜索引擎方法 谷歌浏览器更换搜索引擎怎么设置?浏览器更换搜索引擎方法 Mar 15, 2024 pm 12:49 PM

  谷歌浏览器怎么更换搜索引擎?谷歌浏览器是一款很受用户欢迎的浏览器,它不仅拥有着简单易上手的服务、实用的工具等辅助功能,能够满足不同用户的不同需求,搜索引擎一般都是默认谷歌,如果我们想要更换应该怎么设置呢?下面小编就来分享一下方法吧。  更换方法  1、点击打开Google浏览器。  2、点击三点图标打开菜单界面。  3、点击设置选项可以进入到浏览器的设置界面中。  4、在设置界面找到搜索引擎模块。  5、点击管理搜索引擎按钮。  6、可以看到一个添加按钮,点击这个添加按钮可以添加搜索引擎。 

谷歌浏览器谷歌搜索引擎使用方法 谷歌浏览器谷歌搜索引擎使用方法 Jan 04, 2024 am 11:15 AM

谷歌浏览器很不错使用的小伙伴非常的多,很多的小伙伴都希望使用谷歌自己的搜索引擎,但是不知道怎么用,下面就为你们带来了谷歌浏览器谷歌搜索引擎使用方法快看看吧。谷歌浏览器怎么用谷歌搜索引擎:1、打开进入谷歌浏览器,点击右上角的更多打开设置。2、进入设置后点击左侧的“搜索引擎”。3、查看自己的搜索引擎是不是“Google”。4、如果不是的话可以点击下拉将其改为“Google”即可。

如何检查网站死链 如何检查网站死链 Oct 30, 2023 am 09:26 AM

检查网站死链的方法有使用在线链接工具、使用站长工具、使用robots.txt文件和使用浏览器开发者工具等。详细介绍:1、使用在线链接工具,有很多在线的死链检测工具,比如LinkDeath、LinkDefender和Xenu等,这些工具可以自动检测网站中的死链;2、使用站长工具,大部分的站长工具,如Google的站长工具、百度的站长工具等,都提供了死链检测的功能等等。

See all articles