当前位置:主页 > 文化 > Robots

Robots

  1. robots.txt可以告诉百度您网站的哪些页面可以被抓取,哪些页面不可以被抓取。

  2. 您可以通过Robots工具来创建、校验、更新您的robots.txt文件,或查看您网站robots.txt文件在百度生效的情况。

  3. Robots工具目前支持48k的文件内容检测,请保证您的robots.txt文件不要过大,目录最长不超过250个字符。

  • 上一篇:焦点科技公告点评:年末费用确认较为集中但收入高增长为2011年奠
  • 下一篇:没有了

    最新文章

  • Robots
  • 焦点科技公告点评:年末费用确认
  • 焦点评论]点评中国主要杂志
  • 吴桂英:推进健康湖南行动、爱国
  • 直播进行时:家庭教育与孩子心理
  • 专栏 健康素养66条(十六)
  • “618购物节”盛大开幕!娘家人
  • 汇添富成长焦点四季报点评:优质
  • 第114届CSF文化会直播平台即将上
  • 【健康提“素”百日行动(17)】
  • 随机推荐

  • 援鄂医护日志:“只要患者能健康
  • 五五购物节 “国潮市集”提振社
  • 京冀人员申领天津“健康码”后
  • 焦点点评10万汽车库存难顶崩盘压
  • ofo退押金套路依旧:变身“返利
  • 直播进行时:家庭教育与孩子心理
  • 海峡论坛 2011
  • 拣选或购买货品或服务的行为)
  • 超多优惠!线上+线下江门开启“
  • 职场健康谁来负责?圣奥“健康办
  • 热门点击

  • SKT终结GEN连胜赛后K皇耿直点评
  • 焦点评论]点评中国主要杂志
  • 五五购物节 “国潮市集”提振社
  • 逛街不购物 我就这么酷
  • ofo退押金套路依旧:变身“返利
  • “中国文化越来越受到世界关注”
  • 《lol》怎么看待比赛BP环节 职业
  • 云中逛博物馆、线上阅读……朝阳
  • 银河证券:建议重点关注超市、购
  • 【健康幸福过大年】关于新型冠状