禁止Baiduspider抓取网站上所有图片 仅允许抓取网页,禁止抓取任何图片。
User-agent: Baiduspider Disallow: /*.jpg$ Disallow: /*.jpeg$ Disallow: /*.gif$ Disallow: /*.png$ Disallow: /*.bmp$
仅允许Baiduspider抓取网页和.gif格式图片 允许抓取网页和gif格式图片,不允许抓取其他格式图片
User-agent: Baiduspider Allow: /*.gif$ Disallow: /*.jpg$ Disallow: /*.jpeg$ Disallow: /*.png$ Disallow: /*.bmp$
仅禁止Baiduspider抓取.jpg格式图片
User-agent: Baiduspider Disallow: /*.jpg$