即日起,盤古搜索獲準加入百度網站Robots協議白名單,獲得抓取百度網頁、百科、知道、文庫、貼吧、音樂等百度旗下產品頁面的權限。
隨著盤古搜索的加入,百度Robots協議白名單已經覆蓋谷歌、必應、有道、搜狗、即刻、搜搜等國內外主流搜索引擎。
Robots協議,業界又稱爬蟲協議或機器人協議,是國際搜索引擎的通用規則。網站通過該協議告訴搜索引擎哪些頁面可以索引,哪些頁面不能索引。作為國際互聯網界通行的道德規范,Robots協議的目的在于保護網站數據或敏感信息,確保用戶個人信息和隱私不被侵犯。
百度表示,歡迎其他搜索引擎在遵守Robots協議的情況下索引百度內容,也希望其他違反市場競爭底線,無視Robots協議的廠商盡快糾正其違規行為。
盤古搜索相關人員表示,Robots協議是搜索產業發展繁榮的基石,盤古搜索呼吁業內共同遵循國際通行的行業慣例與商業規則,遵守Robots協議,并愿與行業內的合作伙伴一起,共同提升搜索服務質量。
去年11月,在工信部協調下,中國互聯網協會召集百度、即刻搜索、盤古搜索、奇虎360、盛大文學、搜狗、騰訊、網易、新浪、宜搜、易查無限、中搜等12家發起單位共同簽署了《互聯網搜索引擎服務自律公約》。簽約企業承諾遵循國際通行的行業慣例與商業規則,遵守機器人協議(robots協議),營造鼓勵創新、公平公正的良性競爭環境,尊重和保護知識產權,尊重權利人的合法權益,保護用戶隱私和個人信息安全,抵制不正當競爭行為等。
據透露,在上述公約精神指導下,百度與盤古搜索只用時兩周就完成了相關協議簽署與技術實現。作為國內最大的搜索引擎,百度同時也是互聯網上最大的中文內容源,百度知道、百科、貼吧等內容廣受網民歡迎。分析人士指出,百度批準盤古搜索加入白名單,將極大豐富盤古搜索的內容源,對正處于上市進程中的盤古搜索是個重大利好。