学界热议违反robots协议将损害互联网

2019年05月15日 来源:

近日,某数字公司搜索违背Robots协议,抓取百度、谷歌等站内容,并致使众多站内信息被泄漏一事引起了社会各界的关注。那么,Robots协议究竟是一项什么样的规定?违反该协议会造成什么样的影响和危害?笔者特地访问了多个著名院校的计算机专业教授,请他们就这一话题表达了自己的观点。 (来源:南方都市报(来源:南方都市报南都)南都)

Robots协议究竟是一项什么样的规定?违背该协议会造成什么样的影响和危害?笔者针对最近引发广泛关注的Robots协议,特地访问了多个著名院校的计算机专业教授。

Robots协议是搜索引擎在抓取站信息时要遵照的一个规则,是国际互联界通行的道德规范。站主人通过Robots协议明示自动抓取程序,服务器上什么内容可以被抓取,什么内容不可以被抓取。这是保证互联行业健康发展的自律准则,虽然不是强迫命令,但业界都应该遵守。中国互联企业要想在国际舞台受到更多关注、得到更大的发展,没有理由不遵照这个游戏规则。如果不遵守,不仅伤害了违规企业自身的形象,也伤害了中国互联行业的整体声誉,得不偿失。中国工程院院士高文表示。

上海交通大学教授张娅表示:Robots协议是互联业界共同认可的一项协议,是国际搜索引擎的通用规则,我也曾经供职于Yahoo这样的互联企业,遵守Robots协议是学术界和工业界的共鸣,也应当被互联企业视为行业发展的道德准则。

据介绍,Robots协议是站出于安全和隐私考虑,防止搜索引擎抓取敏感信息而设置的。搜索引擎的原理是通过一种爬虫spider程序,自动搜集互联上的页并获取相关信息。而鉴于络安全与隐私的考虑,每个站都会设置自己的Robots协议,来昭示搜索引擎,哪些内容是愿意和允许被搜索引擎收录的,哪些则不允许。搜索引擎则会依照Robots协议给予的权限进行抓取。

对于企业违反Robots协议的行为,浙江大学计算机学院院长庄越挺形象地比喻:互联站页面,如同广阔农村中的一个菜园,各有其主。一般而言,访客进去逛逛无可厚非,但是如果主人在边界立下界碑:未经允许不得入内,这就意味着主人的意愿成为外界是不是获准入园参观的标准。Robots协议就是这样一块界碑,它虽然不具法律效应,但是人们都普遍遵守。未经允许入园就参观不仅违反了游戏规则,也有违道德标准。一样的道理,违背Robots协议,等同于违背了搜索引擎的行业规范,以这种方式获取资源是一种不道德的竞争。(来源:南方都市报(来源:南方都市报南都)南都)

北京大学信息与管理学院教授赖茂生则认为,违背站意愿强制抓取信息的行为,不但突破了道德的底线,也突破了法律的底线。我国《民法通则》第4条规定:民事活动应当遵守自愿、平等、等价有偿、诚信信用原则。另外,依照著作权法的原理,当对数据库内容的复制使用达到一定数量时,实际上就构成了对数据库内容选择和编排的复制使用,则可能构成侵权。(来源:南方都市报(来源:南方都市报南都)南都)

计算机专家们对部分企业违反Robots协议带来的危害表示严重的忧虑,他们认为这不仅将破坏互联行业的良性发展,最终还将严重伤害用户利益。

哈尔滨工业大学教授刘挺表示,Robots协议是互联中站为搜索引擎所制定的内容抓取规则,体现了业界同行之间的相互信任。如果不遵守Robots协议,将会破其业界信任,使得站的内容不愿意被抓取的内容被搜索引擎索引,最终伤害用户的利益。而清华大学计算机系教授马少平则指出,如果不遵照Robots协议,肆意抓取站的内容,站的信息被任意泄漏,将对互联的良性发展产生巨大的破坏作用。

赖茂生教授还特别呼吁称,希望政府有关部门进一步加强监管和指导,媒体方面多做正面引导,强化正能量的作用,法律部门和法学界加强对此案例涉及的法律问题及其解决方案的研究,扶正压邪,以保障这个新兴行业健康有序地发展壮大,促进我国科技创新战略早日实现。(文/张丽)

资料:robots协议

robots协议(也称为爬虫协议、爬虫规则、机器人协议等)也就是t,站通过robots协议告知搜索引擎哪些页面可以抓取,哪些页面不能抓取。Robots协议是站国际互联界通行的道德规范,其目的是保护站数据和敏感信息、确保用户个人信息和隐私不被侵犯。因其不是命令,故需要搜索引擎自觉遵守。一些病毒如malware(马威尔病毒)常常通过忽略robots协议的方式,获得站后台数据和个人信息。

月经量多该吃点什么好
经期延长的几种原因
女性经期小腹部胀痛
相关文章
  • 乐信IPO背后被隐去的现金贷和理直气壮的
    乐信IPO背后被隐去的现金贷和理直气壮的

    设计观点orm/w630h472/20171221/h-Wd-fypvuqe8313598.jpg" alt="乐信集团成功登陆纳斯达克" data-link="">集团成功登陆 距离上市不到一个月,老对手乐信也正式递交了IPO招股书。 不同于趣店在市场的火热,在迎来现金贷监管后上市的乐信显得有些黯淡,融资额也从最初的5亿美元,缩...

  • 五种早餐绝不能随便吃
    五种早餐绝不能随便吃

    不吃早餐对身体的危害,已经被越来越多的人所认识到。早餐一定要吃,但同时也要注意该怎么吃,不该怎么吃。不恰当的早餐饮食习惯,同样会损害你的健康,带走你的快乐。有几种相当受欢迎的常见早餐吃法,您要记住:不能这样吃!吃法一:“回味早餐&rdq...

  • 两岸两会签署核电安全合作协议全文
    两岸两会签署核电安全合作协议全文

    两岸两会签署核电安全合作协议(全文)新华社天津10月20日电 海峡两岸关系协会会长陈云林20日与台湾海峡交流基金会董事长江丙坤在天津签署了《海峡两岸核电安全合作协议》。全文如下:海峡两岸核电安全合作协议“安全第一”是核电应用普遍遵守的基本原则,攸...

  • 中国超模第8期上演惊人爆破大片
    中国超模第8期上演惊人爆破大片

    《中国超模》第8期 上演惊人爆破大片时尚真人秀节目《中国超模》于上周四(7月9日)播出第八期,几位女学员在荧光T台彩妆秀中表现惊艳,让到场的嘉宾都眼前一亮。而在硬照拍摄中,她们不惧巨响的爆破声,在火焰纷飞的场景中淡定发挥,也让摄影师赞叹不已。在...

  • 我区代表团审议政府工作报告王君巴特尔韩长
    我区代表团审议政府工作报告王君巴特尔韩长

    我区代表团审议政府工作报告 王君巴特尔韩长赋等参加 -3月5日,我区代表团举行全团会议,审议政府工作报告。首席摄影马建斌摄3月5日下午,出席十二届全国人大一次会议的我区代表团举行全团会议,审议政府工作报告。王君、巴特尔、潘逸阳、呼尔查、邢云、乌...

  • 少儿春晚昨日精彩上演
    少儿春晚昨日精彩上演

    少儿春晚昨日精彩上演来源:黄海晨刊 发布时间: 08:15:32? 本报讯( 李刚业) 1月15日下午,2012日照市少儿春节联欢晚会在日照广播电视台演播室举行,参加晚会的少年儿童载歌载舞,为观众奉献了一场新春视听盛宴。? 下午2点半,晚会在喜庆的歌舞表演中拉开了序幕...