冯亮：360违背Robots协议将破坏互联网秩序

 10月16日，百度诉奇虎360违反“Robots协议”构成不正当竞争一案在北京市第一中级人民法院开庭审理。庭审中，双方就“Robots协议是否具有约束力”这一问题展开了激烈争辩，Robots协议再次引发关注。微软公司最有价值专家冯亮评论认为，Robots协议代表着搜索引擎和网络内容提供者双方都应该遵循的行为及技术规范，违背Robots协议将破坏互联网秩序。

     Robots协议也就是爬虫协议，其设置的目的正是为保护网站数据和敏感信息以及用户个人信息和隐私不被侵犯。冯亮指出：“Robots协议代表着搜索引擎和网络内容提供者双方都应该遵循的行为及技术规范，只有双方都严格遵守此类协议并且确实执行，用户和网站的机要信息及隐私数据才可以得到真正的安全保障。”

     早在2012年11月，中国互联网协会曾牵头发起《互联网搜索引擎服务自律公约》，首次将遵守Robots协议纳入实质性条款。公约中明确指出：“搜索引擎服务应当遵循国际通行的行业惯例与商业规则，遵守机器人协议（Robots协议）”、“违反Robots协议抓取内容的企业，应在收到权利人符合法律规定的通知后，及时删除、断开侵权链接，努力维护健康有序的网络环境。”360与其他11家搜索引擎服务商共同签署了公约，也就是承诺了遵守Robots协议。

     在案件中，360以百度网站没有版权为由，违反行业通行规则Robots协议，强行抓取百度百科、百度知道等野蛮内容，涉嫌不正当竞争。而360方面则宣称，Robots协议是一个未经标准组织备案的非官方标准，并不是规范，只是约定俗成而已，并无实质约束力，这一说法显然与360签署公约、保证遵守Robots协议相违背。

     Robots协议到底有无必要遵守？冯亮等专家明确表示，Robots协议是互联网安全与隐私的重要保障：“如果不遵守Robots协议，搜索引擎肆意抓取网站的内容，网站拥有者的安全意识淡漠，那么敏感信息毫无疑问将会泄漏，这对互联网的有序和良性发展都会产生巨大的破坏作用。”

     事实也证明，违背Robots协议将带来巨大安全隐忧——曾有这样的真实案例：国内某公司员工郭某给别人发了封求职的电子邮件，该Email存储在某邮件服务公司的服务器上。因为该网站没有设置Robots协议，导致该Email被搜索引擎抓取并被网民搜索到，为郭某的工作生活带来极大困扰。

    北京菲诺科技CEO刘焕宇也肯定了Robots协议的重要性：“每个行业都有参与者应该自觉遵守的规则，Robots协议就是互联网行业的规则之一。不遵守游戏规则，也许能一时得利，但长此以往，损害的将是整个行业的利益。”