搜索引擎robots文件中允许蜘蛛抓取所有页面Allow:与Allow: ⼀有区别么

2025-03-03 05:09:02
推荐回答(1个)
回答1:

没有区别,因为“Allow:”就是允许抓取全部页面了,然而”Allow: /”是允许抓取服务器根目录下面所有文件,所以加不加/没区别