从两年前,谷歌开始对外部App的内部链接和内容进行抓取,目前已经累计抓取了300多亿个。
搜索引擎是内容门户之后的互联网第二次重大技术革命。然而伴随着智能手机的普及,应用软件(APP)取代网页,成为主流的技术。由于APP的内容一度无法被搜索引擎抓取到,人们惊呼,移动互联网将带来一场搜索引擎的生存危机。
不过,通过和应用软件开发商的合作,谷歌已经一定程度上化解了这场危机。日前,谷歌已经宣布,先后抓取了海量APP的300多页的页面内容。手机端搜索的信息量,也将更加丰富。
谷歌搜索团队在4月16日的一篇官方博文中,宣布了这一消息。
谷歌一名工程师帕特尔(RajanPatel)对媒体披露,从两年前,谷歌开始对外部App的内部链接和内容进行抓取,目前已经累计抓取了300多亿个。
在传统的WEB网页中,谷歌可以通过软件“蜘蛛”进行自动访问和抓取,无需获得网站管理员的许可。
而在App内容的抓取中,谷歌需要和应用软件开发商建立合作。谷歌提供了相应的软件开发接口(API),开发者通过这些接口,可以对谷歌搜索开放数据,从而实现搜索引擎的内容抓取。
据悉,已经有大量的手机端软件已经和谷歌合作,其中包括微型博客Twitter、短期租房工具Airbnb、消费者点评工具Yelp、手机订餐工具OpenTable、图片收藏工社交网络Pinterest、房地产搜索工具Trulia等等。
当然还有大量的手机端媒体APP,也已经被谷歌抓取新闻报道。
300多亿个链接的内容,和谷歌抓取的网页数据库相比,还只是小巫见大巫。之前的报道称,谷歌蜘蛛抓取的网页,数量高达数百亿张。
不过在智能手机时代,人们使用搜索的目的性更强、具备更多的场景信息,因此主流的APP以及300多亿个链接,已经足够提供用户所需要的信息。
据报道,在此前的手机端搜索中,谷歌客户端将会观察用户的智能手机中,都已经安装了哪些App,谷歌将只会返回已安装APP的搜索结果内容。
日前,谷歌团队也宣布,对搜索结果中囊括的APP进行了修改,即使用户没有安装某一个APP,其内容只要相关,也会出现在搜索结果中。
举例说,如果用户手机中没有安装订餐工具OpenTable,但是在搜索某一家餐馆时,谷歌仍然可能呈现来自OpenTable的消费者评论信息。
不过对于谷歌而言,能够抓取海量APP的内容,并不意味着已经彻底远离了“搜索危机”。
有观点认为,在智能手机端,手机族希望能够最快速获得最精准的搜索结果,因此各种专业的APP,逐步取代了传统网页搜索的地位。比如人们可能在一个热门的团购APP中搜索本地餐馆和电影,而不是在谷歌输入关键词,然后看到浩如烟海的网页结果。
手机端搜索消费行为的变迁,也给谷歌的发展前景蒙上了一层阴影。谷歌九成的收入来自于搜索结果右侧的搜索广告,如果人们远离了电脑、远离了传统搜索引擎,谷歌将成为一家没有实质性替代收入的很危险的公司。