我不想我的网站被Baiduspider访问,我该怎么做?

发布时间:2024-04-28 点击:4
baiduspider遵守互联网robots协议。您可以利用robots.txt文件完全禁止baiduspider访问您的网站,或者禁止 baiduspider访问您网站上的部分文件。 注意:禁止baiduspider访问您的网站,将使您的网站上的网页,在百度搜索引擎以及所有百度提供搜索引擎服务的搜索引擎中无法被搜索到。关于 robots.txt的写作方法,请参看百度的 robots.txt写作方法
您可以根据各产品不同的user-agent设置不同的抓取规则,如果您想完全禁止百度所有的产品收录,可以直接对baiduspider设置禁止抓取。
以下robots实现禁止所有来自百度的抓取:
user-agent: baiduspider
disallow: /
以下robots实现禁止所有来自百度的抓取但允许图片搜索抓取/image/目录:
user-agent: baiduspider
disallow: /
user-agent: baiduspider-image
allow: /image/


怎么免费建站?这个网站一招搞定
公司网站做SEO的好处(为什么每个公司都应该关注SEO)
百度推出惊雷算法会影响外链正常使用吗
网站建设应该包括哪些内容?
怎样快速提升网站在搜索引擎中的权重呢
如何优化网站排名(为你的网站带来更多的流量)
请记住网站域名注册的三大要点!
自定义 微信分享样式 教程