指定网络爬虫禁止访问的目录是

来源：步遥情感网

指定网络爬虫禁止访问的目录是Disallow。Disallow：用于指定网络爬虫禁止访问的目录。若Disallow选项的内容为空，说明网站的任何内容都是被允许访问的。

显示全文