8月31日消息 继一位百度工程师措辞犀利的指责360搜索引擎不顾非法行业通行Robots规则之后,360搜索引擎官方微博随即发布了腾讯旗下视频站点被百度搜索引擎恶意抓取的微博。
360搜索引擎在其官方微博中称,虽然腾讯视频频道在Robots协议中设置了禁止所有搜索引擎的爬虫抓取,而百度则不顾通行协议对腾讯视频频道进行了网页抓取并索引。
对此,百度公司工程师解释道,“搜搜视频自2010年11月3日设置robots.txt协议,限制搜索引擎spider访问video.soso.com。百度spider从搜搜视频robots设置之日起未再抓取该站内容,完全遵守robots协议。不像360,百度已经明示不许抓取,还换着马甲来强抓。”
腾讯公司旗下搜索引擎腾讯搜搜官方微博也进行了转发,并对百度工程师所言表示了认可,至此,腾讯公司旗下搜索引擎也正式加入了360与百度公司的互掐混战。
业内人士分析称,在国际上,Robots协议是针对搜索引擎的通用国际标准,任何组织和个人都有义务和责任严格执行该协议,这样可以有效避免涉及用户隐私的信息遭到泄漏,该业内人士也表示,目前国内部分搜索引擎不遵守Robots协议的情况也不在少数,中国国内的互联网行业规则还有待完善,同时也需要更完善的法律条文来制约相关的公司。
来源:互联网 转载于临企俄语网站建设新闻频道