wordpress新站点如何设置网站蜘蛛爬虫禁止收录站点robots.txt

摘要:如何设置让搜索引擎不收录我们的网站,最有效最简单的方式是采用robots.txt,把现有的主流搜索引擎的蜘蛛机器人都屏蔽…

如何设置让搜索引擎不收录我们的网站,最有效最简单的方式是采用robots.txt,把现有的主流搜索引擎的蜘蛛机器人都屏蔽掉,这样就能保障我们的新站不被收录,方法我们进行内容调整和框架布局。以下是一个比较全面的从百度、谷歌、搜狗、雅虎全系列的搜索引擎蜘蛛屏蔽方法,复制以下代码,复制上传到你的网站根目录,大功告成。妈妈再也不用担心我的网站被收录了。

此文由“快兔兔AI采集器”自动生成,目的为演示采集器效果,若侵权请及时联系删除。

原文链接:http://www.wazhuti.com/1849.html

更多内容