如何禁止搜索引擎收录抓取

发布时间:2024-11-03 点击:41
如果你的网站涉及个人隐私或者机密性非公开的网页,怎样告诉禁止搜索引擎收录抓取,下面侯庆龙说下以下方法,希望对不想被搜索引擎收录抓取网站有所帮助。
第一种、robots.txt方法
搜索引擎默认的遵守robots.txt协议,创建robots.txt文本文件放至网站根目录下,编辑代码如下:
user-agent:*
disallow:
通过代码,即可告诉搜索引擎不要抓取采取收录本网站。
第二种、网页代码
在网站首页代码<head>与</head>之间,加入<metaname=robotscontent=noarchive>代码,此标记禁止搜索引擎抓取网站并显示网页快照。
如何禁止百度搜索引擎收录抓取网页
1、编辑robots.txt文件,设计标记为:
user-agent:baiduspider
disallow:/
2、在网站首页代码<head>与</head>之间,加入<metaname=baiduspidercontent=noarchive>即可禁止百度搜索引擎抓取网站并显示网页快照。
3、联系百度管理人员,信箱地址为:webmaster@baidu.com,用网站联系人信箱发电邮,如实说明删除网页快照的情况,经百度核实后,网页停止收录抓取。
4、登陆百度自己的“百度快照”帖吧和“百度投诉”帖吧,发个帖子,表明删除网页收录网站快照的原因,当百度管理人员,看到会给予处理。
如何禁止google搜索引擎收录抓取网页
1、编辑robots.txt文件,设计标记为:
user-agent:googlebot
disallow:/
2、在网站首页代码<head>与</head>之间,加入<metaname=googlebotcontent=noarchive>即可禁止百度搜索引擎抓取网站并显示网页快照。
seo优化:侯庆龙原载网址:www.noseo.org.cn
版权所有。转载时必须以链接形式注明作者和原始网址及本声明。


坚持对搜索引擎优化非常重要
重庆网站优化中"相关性"的运用
如果让网站打开的速度赶上高铁
网络营销应该从用户需求出发
网站建设如何设置标题有利于优化
网页设计中的视觉重要性
网络营销的十种方法
上海网站制作他们的效率到底怎么样?