暖石网
【改价通知】现3580转行求职套餐,将于10月31日晚22点下架停售。现在购买,仍可享受套餐下所有学习服务,点击立即抢购!
nuanshi
登录 | 注册
学员问答    >    查看问答
老师,你好,爬虫只能从网站首页开始爬吗?还是也可以从子栏目去爬呢?
黑芝麻糊 2016-05-15 13:02
相关课程:实操课程系列 > SEO > 网站链接结构
下一条问答 / 上一条问答
牛小kk 2016-05-15 17:48

看爬虫如何到你的网站,比如爬虫主动来到你的网站那肯定从首页开始的。如果爬虫是通过其他网站的友链来到你的网站,那看你的友链放的什么,你放到子栏目的url,那爬虫过来就访问的是子栏目的页面。

这个问答对你有帮助吗?
有帮助