【导读】 怎么把wps文件保存到手机,下面是小编为你收集整理的,希望对你有帮助!1、一般都是默认保存在云文档页面中,打开手机并在桌面找到wps应用,点击进入主页后,再点击页面中的工具图标。2、点击弹出选项卡中的新建文档按钮,创建一个空白文档。3、点击文档页面上方的保存按钮,然后点......
发布时间0:2023-07-04 23:01:22
AI 科技评论按:搜索技术从一开始的桌面文件搜索、互联网搜索,发展至今日流行的程序内部搜索(In-app search),先后攻克了不同的技术难点,面对如今来势汹汹的 AI 时代,搜索技术又该何去何从呢?
作为 2018TOP100Summit 案例分享嘉宾之一,Dropbox 技术主管叶旭刚将在本文中分享搜索技术的发展的来龙去脉,以及当下该领域所面临的机会与挑战。
叶旭刚,机器学习和数据科学领域资深专业人士。现任美国云服务科技公司 Dropbox 的搜索团队的技术主管, 负责开发新一代的云工作空间的智能搜索推荐引擎。曾在美国最大房地产搜索引擎 Zillow 任主任应用科学家, 从事房地产垂直领域的搜索以及自然语言理解的研发。曾在美国苹果公司任主任数据科学家, 从事客服搜索的研发。并曾在美国微软公司任高级应用科学家, 从事网页搜索、地区搜索、企业搜索的研发。拥有约翰霍普金斯大学应用数学及统计博士, 并曾在美国国立健康研究所从事生物信息统计博士后研究。曾获约翰霍普金斯大学博士全额研究奖, 美国国立健康研究所优秀人才奖, 海军研究部研究专款等。曾在运筹统计、生物信息、大数据及机器学习方面的期刊及会议发表多篇第一作者文章。在顶级会议 (NIPS, INFORMS, SIAM, ICML, ISMB, CIKM) 做过报告。
搜索技术的「前生今世」
搜索领域的发展最早可追溯至微软操作系统的基础检索功能——桌面文件搜索系统(index),后来随着互联网的普及,用户搜索范围不再局限于单机系统,才诞生了互联网搜索系统。
雅虎是最早投入互联网搜索系统开发的公司,然而一直未能从门户网站的商业逻辑中跳脱出来,导致错过了搜索引擎作为新型商业模式的风口,因而被同期的小公司赶超。这种新型商业模式后来被谷歌发扬光大,逐渐发展成今日的体量。
谷歌时代最重要的技术里程碑,是强调了网页的重要性。谷歌为此进行了大量的互联网资源整合工作,只要出现一个站点/网页,谷歌都会统一进行 Index 标注,日积月累下成就了庞大的 Index 系统。Index 系统有效解决了雅虎时代遗留下的问题,使用户的查询输入同时映射至多个结果,并根据重要性对搜索结果进行排序,从而保证呈现在用户面前的都是最优的搜索结果。
为此,谷歌需要付出高昂的基础设施维护代价。据了解,单 2016 年,谷歌系统便已累积多达 10 万亿个网页 index 标注,耗费存储空间高达 100 PB(1 PB = 1024 TB)。
最近这几年,谷歌的搜索模型逐渐从静态封闭向开放动态发展,从单纯的「搜索-返回」变为通过各种途径揣测用户意图的智能化搜索服务。换句话说,谷歌系统时刻关注着用户的搜索反馈,这些信息将被完整记录下来,然后经过整理后更新至模型里头,最后通过对比检验模型的搜索效果。
「小而精」的 In-app search 时代
这一阶段搜索技术在的特点是: Index 体量变得越来越大,Index 种类变得越来越丰富,同一时间模型理解用户意图(语境)的能力也在不断地提高。
与此同时,搜索技术也迎来了新挑战:
- 互联网资源底层结构变得多元化,用户的搜索输入不再局限于文字,当中还包括图像、语音、视频等。
- 一旦资源库的体量超出系统可负荷的临界点,后期可能导致资源管理上的问题。
对应的解决方案,是如雨后春笋般冒出的垂直领域搜索引擎。
跟过去不同的是,这些平台未必在一开始就提供检索服务,而是在商业模式取得巨大成功后,沉淀的用户反哺为平台带来了大量内容,当内容丰富到一定程度时,自然而然形成了特定领域的搜索引擎,业界将之称作In-app search——用户先登陆某个具体 app 再进行特定领域搜索的行为。
当中最具有代表性的 In-app search 平台是 Facebook,Facebook 在社交领域的积淀,使其在做社交搜索方面有着得天独厚的优势。有人曾经断言,In-app search 极有可能在未来取代谷歌、Bing 等一般性搜索成为主流搜索工具。
此外,随着「机器人时代」的来临,搜索趋势也将从单一输入理解变成互动式交流,由文字过渡至语音、图像乃至视频。为了更好地理解用户的搜索意图,这些机器人将拥有强大的自然语言理解能力,可以根据用户的搜索需求将之导引至某个专属领域 app。
目前看来,拥有庞大的开发者生态以及企业基础数据的苹果 app store 和 AWS 云平台,极有可能超越谷歌,成为 In-app search 时代的弄潮儿。
搜索领域现阶段面临的难点——「内容理解」
无论是一般性检索还是垂直领域检索,在「机器人时代」都不可避免地要面临「内容理解」的难题。
为了让搜索引擎很好地理解人类意图,我们必须保证引擎底层的知识结构和人类的知识结构保持一致,自然语言理解在这过程中便扮演了重要的角色。换句话说,自然语言理解是搜索引擎的索引和用户输入之间的桥梁,一旦缺少这个桥梁,我们的检索技术相当于倒退至几十年前,基本没有进步。
然而「内容理解」面对的内容不仅仅是常见的网页,还包括了其他的文本结构如工作文档(可进一步细分为 word 文档、pdf 文档等)、图像、视频等,这就超出了自然语言理解的范畴,必须依赖诸如卷积神经网络、运动监测、物体检测等一系列特定技术才能解决信息提取问题。这也推动了目前深度学习领域较热门的 embedding 工作,试图将字面上的 token 映射至数字空间上。只有将不同文本结构的信息提取出来,我们才能将对象映射至文本空间上,接着通过文本技术来解决搜索的问题。
总的来说,「内容理解」的目的是要让搜索引擎找到一种近似人脑对自然观察理解的方式,然而这块目前还处于比较初级的阶段,目前引擎的信息提取效果大约等同于几岁小孩,有的时候甚至还不如一只动物。
这是搜索技术的发展当下所面临的瓶颈,需要更多的业界人士参与进来一起努力攻克。
附:叶旭刚老师的 TOP100Summit 案例分享详情
由 msup 主办的技术界一年一度的 TOP100Summit 上,叶旭刚老师将与大家分享他在房地产搜索领域关于自动补全与自动建议技术的建模实现(内容链接页:http://www.top100summit.com/think/13504)。作为搜索的辅助手段,智能的自动补全和自动建议可以帮助用户快速表达搜索意图,同时避免查询词重复进入深层 index 造成系统延迟。
为了实现这一目的,需要构建一套该垂直领域的知识图谱、词汇表、字典树数据结构,以及相关性概率的数学模型。叶旭刚老师将在报告中采用基于贝叶斯原则和条件独立及非条件独立的简化假设把相关性概率分解成区域化和个性化两个部分。在具体实现时采用两阶段贪婪排序。也就是先用区域化的相关性概率来找到一个搜索结果列,再对这个列计算个性化打分从新排序。此外,叶旭刚老师还会在报告中介绍评价系统表现的模型,以及对应的评价指标。
通过本次分享,学员可以了解自动补全和自动建议的一个全貌和具体在一个垂直领域是如何建模、设计和实现的。学员可以把该模型和技术移植到他们自己的搜索领域。比如说常见的场景是开发商品搜索或专业知识搜索的移动应用。
如果你对叶旭刚老师的主题分享感兴趣,也想通过活动了解更多其他领域的技术创新/研发管理实践,欢迎大家通过活动页面购买会议门票:http://www.top100summit.com/apply,会议提供各种购票组合,大家可以实际需进行购买。
上一篇:中国的游戏,世界的寒冬?
【导读】 美国为什么公布UFO视频:可能是为了展示自己的实力,下面是小编为你收集整理的,希望对你有帮助!美国为什么会在此时公布UFO视频,其一定是有自己目的的,不过我们作为群众只能通过自己的所见所闻来加以解释,就跟曾经的美国公布登月视频一样,这次公布UFO视频也许是为了展示它自己的实力,从而让全世界的国......
发布时间:2023-07-04 00:01:37
【导读】 苹果手机如何找回收站(苹果手机回收站在哪找),下面是小编为你收集整理的,希望对你有帮助!1.苹果手机是没有回收站的,但是手机相册里是有回收站的;2.可以打开相册,相册里有“最近删除”这个相册;3.点击进入以后就可以看到所删除的照片,视频了。步骤1、在桌面找到【照片】进入步骤2、打开照片后......
发布时间:2023-07-03 23:01:33
【导读】 基围虾蒸多久才熟,下面是小编为你收集整理的,希望对你有帮助!1、清蒸基围虾时,要注意蒸时候的时间,一般大约15分钟左右。2、基围虾,别称为麻虾、虎虾等,对虾科新对虾属动物,分布于日本东海岸,中国东海与南海,菲律宾、马来西亚、印尼及澳大利亚;具有较高的营养价值和......
发布时间:2023-07-03 22:01:23
【导读】 最沉稳的二字昵称(成熟稳重两字微信昵称),下面是小编为你收集整理的,希望对你有帮助!1、展眉。2、筝宁。3、之绿。4、栀蓝。5、左岸。6、十年。7、身影。8、森迷。9、韩上。10、默笙。11、森屿。12、笙然。13、茶靡。14、呆辞。15、辞弥。16、灼光。17、云深。18、九笙。1......
发布时间:2023-07-03 21:01:22
【导读】 揭秘霍金警告中国不要登月真相,竟是无事者的造谣生非,下面是小编为你收集整理的,希望对你有帮助! 霍金作为闻名世界的科学家,自然受到了很多人的爱戴,在霍金功成名就的同时,网络上也出现了许多关于霍金的传言,据说最近流传着霍金警告中国不要登月这么一则消息,引起......
发布时间:2023-07-03 20:01:18
【导读】 九头虫的真实身份是什么 九头虫为什么和孙悟空打起来,下面是小编为你收集整理的,希望对你有帮助!九头虫的真实身份就是一个九头的恶怪,也就是妖怪。在《西游记》里面所讲述的九头虫手里拿着一个月牙铲,并且长了九个脑袋,是龙王的女婿。曾经与孙悟空发生过冲突,后来被二郎神给打败,同时还被哮天犬吃掉了一颗脑......
发布时间:2023-07-03 19:01:11
【导读】 人类是外星人创造的?科学家称人类是外星人的试验品,下面是小编为你收集整理的,希望对你有帮助!达尔文的进化论提出时得到了许多人的认可,但科学越进步,研究越透彻会发现人类从猿类进化而来的理论似乎行不通。而且近几十年来,不少科学家都对进化论表示质疑,并称人类根本不是进化来的,对此,科学家提出了大胆......
发布时间:2023-07-03 18:01:21
【导读】 蜂蜜水用多少度水冲泡好,下面是小编为你收集整理的,希望对你有帮助!40度。纯蜂蜜用40度的温开水冲调最好,自然夏季假如想喝冰冷清新的蜂蜜柠檬水,用凉白开水冲调纯蜂蜜也可行,但需谨记不能用沸水冲调蜂蜜柠檬水,纯蜂蜜中带有180多种多样营养元素,其中一些特异性成分畏惧高......
发布时间:2023-07-03 16:01:06
【导读】 红孩儿是男的还是女的:男孩儿(面目清秀像女孩),下面是小编为你收集整理的,希望对你有帮助!红孩儿是男的。红孩儿是《西游记》中的一个人物,他是铁扇公主和牛魔王的儿子,都说人如其名,牛魔王的模样正如他的名字一样,头上有两个牛犄角,完全一副妖怪模样,而红孩儿是可以看出他是一个人身的,这主要是继承......
发布时间:2023-07-03 15:01:49
【导读】 入赘是什么意思:男子到女方家庭结婚就是入赘,下面是小编为你收集整理的,希望对你有帮助!入赘就是上门女婿,就是男子到女方家庭里面生活,男女颠倒的情况。我国秦汉时期就有这种行为了,因为当时的家庭非常重视传宗接代,如果家里没有男性后代则会通过入赘的方式来传宗接代,直到现代这种婚姻模式依然存在......
发布时间:2023-07-03 14:01:20
【导读】 寿司醋和白醋的区别:不同的醋不同的味道,下面是小编为你收集整理的,希望对你有帮助!寿司醋和白醋的区别有很多,首先就是颜色上的不同,寿司醋通常都是淡黄色的,而白醋的颜色顾名思义都是没有颜色的,也就是白色的。其次了就是制作工艺不同,寿司醋通常都是很多种醋按一定的比例调制而成的,而白醋则......
发布时间:2023-07-03 13:01:27
【导读】 日本443不锈钢是食品级的吗,下面是小编为你收集整理的,希望对你有帮助!日本443不锈钢不一定是食品级。食品级不锈钢指符合《中华人民共和国国家标准-不锈钢食具容器卫生标准》GB9684-88规定的不锈钢材料。虽然食品级不锈钢常用的有430、443、304、316等,但不是......
发布时间:2023-07-03 12:01:11