robots.txt怎么写,我想禁止访问一个文件夹,不是在根目录

2025-01-07 08:32:35
推荐回答(1个)
回答1:

要是不起作用这个要禁止得怎么写? ...生动的叫做“蜘蛛” 蜘蛛在爬去网站页面之前,会先去访问网站根目录下面的一个文件,就是robots.txt。这个文件...