暖石网
【暖石网改价通知】10月31日晚22点,现3580套餐将下架停售。31日晚22点前购买3580套餐的同学,仍可正常享受现3580套餐的一切学习服务。
nuanshi
登录 | 注册
学员问答    >    查看问答
老师,问个使用问题,如果我使用User-agent* Disallow:course/ 那是不是禁止抓取course下面的所有内容?
mranarchy 2016-05-22 14:36
相关课程:实操课程系列 > SEO > 了解禁止收录机制
下一条问答 / 上一条问答
牛小kk 2016-05-23 13:39

你理解的是正确的,但是写的稍微有点小问题。

无论是disallow还是allow,这里面写的其实都是相对路径,相对根目录的一个路径,所以禁止抓取course下面的所有页面,应该写成Disallow:/course/    前面少了个“/”

这个问答对你有帮助吗?
有帮助