10月22日,有媒体报道称,腾讯微信开始使其内容可在谷歌、必应等国外搜索引擎上搜索。对此,腾讯马上回应称,因近期平台技术升级,公众号robots协议出现漏洞,致使外部爬虫技术可爬取部分微信公众号内容,目前漏洞已修复。
消息一出,引发网络大量讨论,其中最为突出的观点为:为什么微信的内容国外搜索引擎都可以搜索,国内如百度等却不行?
其实微信的内容,在部分国内的搜索引擎是可以搜索到的。
腾讯和搜狗本来就关系密切。早年前,腾讯已经是搜狗的第一大股东,2020年第一季度时,腾讯就持有搜狗39.2%的股份。9月24日,搜狗公司发布公告,宣布与腾讯完成合并。 而在微信内部,“搜一搜”整合了大部分微信内容。 搜一搜由之前的“微信搜索”整合而来,聚合了小程序,朋友圈,公众号,文章,视频号等内容。点击微信App右上角的小放大镜,输入关键词,点击搜一搜,即可搜索微信上的海量相关物料。 值得注意的是,“搜一搜”类别的排列顺序,也在一定程度上体现了微信对旗下产品的重视程度,之前搜一搜的前排显示一般是小程序,公众号,文章,朋友圈等,然而微信在更新到8.0.15版本后,搜一搜前排出现了视频号内容。 微信App版本更新到8.0.15后的变化 回到这次微信内容的意外开放,有爆料称,是因为微信公众号官网的 robots.txt 被删了,这个文件是 Robots 协议(也称为爬虫协议、机器人协议等),全称是 " 网络爬虫排除标准 "(Robots Exclusion Protocol),网站通过 Robots 协议告诉搜索引擎哪些页面可以抓取,哪些页面不能抓取。 看来在百度,360搜索等国内搜索引擎搜不到微信内容,不是他们不想,是腾讯不让呀。你觉得呢?