Robots协议,互联网开放不是万能挡箭牌

2014-08-07 20:56

随着互联网的日益普及，Robots协议已然开始被很多人了解，网站通过Robots协议来禁止其他网站随意抓取自己的部分内容已经成为行业惯例。
但是在相关网络法律制定滞后的中国，当这样一种行业惯例遇上法律空白时，其引发的问题也就尤为值得深思。
我们为什么需要Robots协议
就如同我们常常看到的那个牌子——“某某重地，闲人免进”，现实世界中，我们早已形成了一种共识，公域开放，私域保护。在美国因为不熟悉当地法律，擅闯私人空间造成的悲剧更是一再发生。人们需要有公共空间进行信息的自由传递，同样也需要有私人空间来保护个人隐私。当然即便是公共空间中，也会有法律、道德这些予以约束。
Robots协议正是这样的共识在互联网世界的一种延伸。这一协议是由荷兰籍网络工程师Martijn Koster 于1994年首次提出的，作为国际互联网界通行的道德规范。网站可以通过robots协议告诉搜索引擎哪些页面可以抓取，哪些页面不能抓取。
虽然最初只是由一部分企业和个人发起，但无论是谷歌、微软、BAT这样的巨头，还是个人站长们基本上都是选择遵守Robots协议的。
谁也不希望自己的核心信息被爬虫轻易抓取，即便是自己不能确定是否会有用的信息。因为信息的价值就在于，于某人看似无用的信息，却又可能被他人利用，或者一段时间之后被利用，从而伤害到信息所属者的利益。在大数据时代中，Robots协议对于保护个人隐私的重要性更是不言而喻。
既然是惯例，那必然是长期以来大家约定俗成的事情，就如同等车排队一样。当所有人都在排队的时候，那大家可以高效率的完成上下车。但当突然出来一个人加塞到前面，而其他人又劝阻无效的情况下，惯例约束下的平衡就被打破了，这个队也就排不下去了。最终伤害的是大多数的人的利益，而受益者可能仅仅是那个加塞者。
尴尬就在于此，等车排队和Robots协议都只能算作惯例，而非法律，全靠自觉，没有任何强制力。人不要脸，天下无敌这样的道理可谓亘古不变。
这个时候是不是需要有一定的法律效力的文件或者判决对破坏惯例的人予以惩戒呢，我想应该是需要的，要不然这世界一定会是无赖横行，文明无从谈起。
我们怎么来尊重Robots协议
谈到法律，最近刚好有一起和Robots协议有关的案件，那就是百度诉36

余下全部

共有评论0条

<返回

<返回首页