近日記者獲悉,百度訴奇虎360違反“Robots協議”抓取、復制其網站內容侵權一案,將于10月16日在北京市第一中級人民法院開庭審理。百度認為,360搜索在未獲得百度公司允許的情況下,違反業內公認的Robots協議,抓取百度旗下百度知道、百度百科、百度貼吧等網站的內容,已經構成了不正當競爭,并向奇虎索賠1億元。
2012年8月,360搜索悄然上線后不久即被爆出公開違反國際通行的行業規則Robots協議,強行抓取百度旗下網站百度知道、百度百科、百度貼吧、百度旅游等內容,引發包括百度在內的互聯網業界同行嚴重抗議。
據了解,360搜索在百度Robots文本中還未將360爬蟲寫入的情況下,違反Robots協議內容,強制對“百度知道”、“百度百科”等百度網站內容進行了抓取。百度公司認為,奇虎360的行為違背了國際通行的行業規則、不顧百度的權利聲明和技術措施,非法抓取、復制百度網站內容,直接以快照形式向網民提供,嚴重侵害了百度的合法權益,構成了不正當競爭。百度公司將奇虎360訴至北京市第一中級人民法院,該案于今年2月23日正式立案。
何為Robots協議?Robots協議,又稱機器人協議或爬蟲協議,該協議就搜索引擎抓取網站內容的范圍作了約定,包括網站是否希望被搜索引擎抓取,哪些內容不允許被抓取,網絡爬蟲據此“自覺地”抓取或者不抓取該網頁內容。自推出以來Robots協議已成為國際慣例,包括百度、谷歌、雅虎在內的所有搜索服務提供商都自覺嚴格遵守。
據了解,Robots協議的目的是為保護網站數據和敏感信息以及用戶個人信息和隱私不被侵犯,網站所有者擁有Robots協議自主的設定權利。早在2008年,淘寶通過Robots協議以保護商業信息為由,不同程度禁止百度、谷歌等搜索爬蟲對其商品信息的抓取,百度等搜索嚴格遵守了Robots協議,立即停止抓取淘寶網內容,成為行業典范。
在2012年11月,中國《互聯網搜索引擎服務自律公約》首次將遵守Robots協議(爬蟲協議)的規定納入實質性條款,確定了Robots協議作為行業規范的地位?!蹲月晒s》第七條明確指出,搜索引擎服務應當“遵循國際通行的行業慣例與商業規則,遵守機器人協議(Robots協議)”,第九條則規定了違反Robots協議抓取內容的企業,應在收到權利人符合法律規定的通知后,及時刪除、斷開侵權鏈接,努力維護健康有序的網絡環境。
據悉,百度、搜狗、360等12家搜索引擎服務商現場簽署了公約,就Robots協議相關規定達成一致。但360搜索在自律公約簽署之后仍然繼續抓取百度相關內容網站內容和快照結果。
360無視Robots協議、實施不正當競爭的行為,也引發業界人士的關注和批評。中國社會科學院信息化研究中心秘書長姜奇平指出,Robots協議作為一項行業普遍接受的規范,它對企業和個人隱私保護都有重要意義。“如果就這起紛爭打個比方,就類似客人在酒店住宿時在門上掛了一塊‘請勿打擾’的牌子,但現在有服務員說要給客人提供貼心的服務,強行摘下牌子進入房間。”他表示,如果各方都不遵守這一規范,則對行業發展不利。搜狗CEO王小川也曾表示,歡迎360做搜索,但同時他也指出,360搜索違反Robots協議,是不正當競爭,需要政府作為。知名IT評論人洪波更是直接指出,“(360無視Robots協議)這樣的行為不及時從法律和政府監管上制止,所有網站都可以像360一樣踐踏行業規則的底線,整個互聯網行業將大亂。”
事實上,關于Robot協議的法律紛爭此前在國內外都曾出現。對于Robots協議,早在12年前,美國加州北部的聯邦地方法院就在著名的eBay VS. Bidder's Edge案中引用Robots協議對案件進行裁定。針對專門提供拍賣信息的聚合網站Bidder's Edge 違反Robots協議強制抓取eBay網站內容的行為,受理此案的美國聯邦法官在經過多方調查取證后做出裁定,認定BE侵權成立,禁止了BE的違規行為。在法官看來:“eBay 的網站內容屬于私有財產,eBay有權通過Robots協議對其進行限制。”違規抓取的行為無異于“對不動產的非法侵入”。同樣在國內,垂直搜索引擎愛幫網也因未經允許抓取大眾點評網的大量內容也被判敗訴。
對此,不少法律界人士也提出,360無視Robots協議強行抓取百度內容已經涉嫌侵權。知名知識產權律師趙占領就認為, 360采用技術手段避開百度設置的版權保護措施,未經許可直接抓取并復制相關產品網頁,涉嫌著作權侵權。同時360通過隱蔽訪問來源等技術繞開了百度設置的保護措施,未經許可加以抓取,則涉及不正當競爭。北京市漢卓律師事務所首席律師趙虎也表示,根據《侵權行為法》和《民法通則》等一系列法律法規的規定,360搜索行為已經違法,由于360搜索的違法行為涉及面廣、涉及人多,已經侵犯了社會公共利益,政府部門不能坐視不管,必須進行調查和處理。
