robots.txt怎么写才能限制蜘蛛抓我的图片、CSS等文件

2025-02-22 11:10:46
推荐回答(1个)
回答1:

应该这么写:
User-agent: *   
Disallow: /*?*   
Disallow: /images/   
Disallow: /backbar/   
Disallow: /css/  
Disallow: /*.jpg$
Disallow: /*.jpeg$
Disallow: /*.gif$
Disallow: /*.png$
Disallow: /*.bmp$
Disallow: /*.js$
Disallow: /*.php$