Robot.txt设置错误,禁止了蜘蛛的抓取怎么解除啊

来源：学生作业帮助网 编辑：作业帮 时间：2024/05/14 08:56:44

Robot.txt设置错误,禁止了蜘蛛的抓取怎么解除啊

把这个文件里面的内容全部删掉就行了.默认什么都不写的话 就是允许蜘蛛抓取全站内容