有的网站搭建出来,是为了给内部看的,并不希望在互联网上面存在记录,于是,在后台这里,设置了禁止索引,不希望搜索引擎发现。
该站点运营了长时间,有备案,经常更新原创的内容,并且设置了登陆用户才能访问,然后今天查看时,果然,不论是在百度、360、搜狗、必应、还是谷歌,site该域名都是没有记录的。
意味着,各个搜索引擎的确是遵循了规矩,因为,当一个网站出来后,即便你不去做任何优化,各个爬虫自然而然会到访,并且抓取里面的信息,形成快照。
后台这个设置真的很管用,有人说,可以通过robots文件进行操作,但编辑robots的规则,肯定没有直接点击来得快。
如果你也想这么操作,可直接前往设置-阅读这里,点击此处保存即可。
请登录之后再进行评论