Robots是什么意思pc软件 文章资讯 手机软件

您当前的位置→图文中心电脑技术Robots是什么意思
阅读排行

Robots是什么意思


2014/2/17  编辑:admin 来源:本站整理

 一、Robots是什么意思?

  Robots是一个英文单词, 对英语比较懂的网友朋友相信都知道, Robots的中文意思是机器人。 而我们我自己通常提到的主要是Robots协议, 这也是搜索引擎的国际默认公约。

  二、Robots协议是什么?

  Robots协议通常被称为是爬虫协议、机器人协议, 主要是就在搜素引擎中会见到, 其本质是网站和搜索引擎爬虫的沟通方式, 用来指导搜索引擎更好地抓取网站内容, 而不是作为搜索引擎之间互相限制和不正当竞争的必备工具。

  百度为什么称360违反Robots协议呢?主要是因为百度认为360搜素对自身产生了竞争, 百度不真的希望自己旗下的贴吧, 文库, 知道, 百科等网站产品, 被360搜素收录, 并且在Robots协议中标注屏蔽360搜素, 而360直接绕过了robots协议继续采集百度旗下产品网站的信息, 因此被百度起诉。

  不复杂的说, 任意一个网站只要在其robots协议中加入禁止某搜索引擎访问, 那么该搜索引擎就无权收录该网站的内容。 而robots的重要性在于, 一个网站有权利可以能够存在于互联网中, 但又不被指定的搜索引擎索引放到搜索结果中, 因为搜索引擎在互联网上就像国王, 网站就是每个人的小家, 而robots协议则是对抗国王的最后利器, 正所谓“风能进雨能进国王不能够进”。

  在网站中, Robots协议是一个记事本文件程序, 我们只要将Robots.txt文件放置在网站跟目录, 里边可以标注, 哪些网站目录不希望被搜索引擎抓取即可, 其格式如下图所示:

Robots是什么意思Robots是什么意思 arpun.com

相关文章
  • 安卓端车牌识别,日后Android车牌识别sdk会用到安卓端车牌识别
  • Android 8.OBUG闹铃失效
  • 谷歌Chrome 61支持WebVR 浏览
  • 蘑菇ROM助手提取IMG文件内容的方法
  • 优优刷机助手获取root权限的方法
  • Brother 兄弟 HL-3170CDW限量特卖附驱动下载
  • 世界上首台搭载144Hz刷新率屏幕的游戏笔记本华硕ROG Chimera
  • Android应用的启动性能,如何测试Android应用的启动速度
  • PRO 7好不好?PRO7测评
  • 雷蛇游戏本 THX 版 Blade Pro 评测VS灵刃游戏本
  • 完美刷机下载的rom保存在什么地方?完美刷机下载的rom保存位置在哪里
  • 您的连接不是私密连接 chrome 解决办法
  • 浏览器市场份额出炉,Chrome独占60%
  • Android中Glide获取缓存大小并清除缓存图片
  • 10.5寸iPad Pro首发评测:黄金尺寸的生产力工具
  • 仙境传说ro天空之城新版本什么时候出 天空之城新版本上线时间
  • 安卓Android手机的神秘黑客代码
  • 世嘉经典街机《疯狂出租车》登陆iOS/Android:免费
  • 传苹果将为下一代手表配micro LED屏幕 更节能
  • 10.5英寸和12.9英寸iPad Pro渲染图欣赏
  • 发表评论
    网站帮助 - 广告合作 - 下载声明 - 网站地图