[已答] 重要事求教robots.txt写法关系到每一个站长 [复制链接]
查看:786 | 回复:9

itolqtbl · 发表于 2017-11-11 13:08:30

禁止Baiduspider抓取网站上所有图片

仅允许抓取网页，禁止抓取任何图片。

User-agent: Baiduspider

Disallow: .jpg$

Disallow: .jpeg$

Disallow: .gif$

Disallow: .png$

Disallow: .bmp$

这是网上的实例，我想问是不是如果想禁止所有搜索网站抓取本站图片，仅允许抓取网页写法如下

User-agent: *

Disallow: .jpg$

Disallow: .jpeg$

Disallow: .gif$

Disallow: .png$

Disallow: .bmp$

请高手严格指点，这个对每个站长都重要，如果写好这个你会少交很多钱。

cibsdu · 发表于 2017-11-11 15:22:33

网站里面没有放robots.txt文件不敢乱写！

itolqtbl · 发表于 2017-11-11 22:58:14

在线等求教

zhao825 · 发表于 2017-11-12 14:36:00

没有你这样写的robots.txt文件，写的不对，跟我学一下怎么写的robots.txt文件吧！！
User-agent:*
Disallow:　/abc/ 是不是屏蔽百度死连接呀！！

Super_._Jim · 发表于 2017-11-12 19:51:56

值得一看的

itolqtbl · 发表于 2017-11-12 23:43:36

楼上这样写有点怪吧

oupu17 · 发表于 2017-11-13 08:24:39

User-agent: *
Allow: /
sitemap:http://www.oupu17.com/sitemap.xml

成人之美99 · 发表于 2017-11-20 14:48:49

提示: 作者被禁止或删除内容自动屏蔽

dingxiaoxue6 · 发表于 2017-11-28 15:40:39

robots.txt确实很重要

成人之美99 · 发表于 2018-1-19 14:35:27

提示: 作者被禁止或删除内容自动屏蔽

百独托管7500 紫田网络	超高转化播放器收cps[推荐]	速盾CDN 免实名免备防屏蔽	阿里云爆款特卖9.9元封顶	提升alexa、IP流量7Q5团队
【腾讯云】中小企福利专场	【腾讯云】多款产品1折起	高防随时退换好耶数据	小飞国外网赚带你月入万元	炎黄网络4H4G10M 99每月
香港带宽CN2/美国站群优惠	中客数据中心服务器租用	联盟系统移动广告平台中易	企业专场腾讯云服务器2.5折	九九数据工信部正规资质
腾讯云新用户大礼包代金券	高价收cpa注册量高价展示	【腾讯云】2核2G/9.93起	租服务器找45互联随时退换	阿里云短信服务验证秒达

[已答] 重要事求教robots.txt写法关系到每一个站长 [复制链接]
查看:786 | 回复:9

QQ绑定

落伍手机绑定

落伍者

落伍微信绑定

[已答] 重要事求教robots.txt写法 关系到每一个站长 [复制链接] 查看:786 | 回复:9

QQ绑定

落伍手机绑定

落伍者

落伍微信绑定

[已答] 重要事求教robots.txt写法关系到每一个站长 [复制链接]
查看:786 | 回复:9