Robot.txt设置错误,禁止了蜘蛛的抓取怎么解除啊

来源:学生作业帮助网 编辑:六六作业网 时间:2024/12/24 03:12:34
Robot.txt设置错误,禁止了蜘蛛的抓取怎么解除啊Robot.txt设置错误,禁止了蜘蛛的抓取怎么解除啊Robot.txt设置错误,禁止了蜘蛛的抓取怎么解除啊把这个文件里面的内容全部删掉就行了.默

Robot.txt设置错误,禁止了蜘蛛的抓取怎么解除啊
Robot.txt设置错误,禁止了蜘蛛的抓取怎么解除啊

Robot.txt设置错误,禁止了蜘蛛的抓取怎么解除啊
把这个文件里面的内容全部删掉就行了.默认什么都不写的话 就是允许蜘蛛抓取全站内容