「秀肌肉」是vivo 2018上半年的关键词。
从1月份在CES发布全球首款屏幕指纹手机X20 Plus UD,到2月份发布集超高屏占比、升降式前置摄像头、半屏屏幕指纹等「黑科技」于一身的概念机APEX,再到两周前发布惊艳程度不输APEX的「量产概念机」NEX以及刚刚展示的vivo ToF 3D超感应技术,vivo用一个个领先行业的技术在过去的几个月持续「刷屏」。
与此同时,在最近热门的手机AI领域,vivo也做出来了不少值得一提的东西。

在今年3月底发布的主力产品X21上,vivo推出了叫做Jovi(Enjoy vivo's AI)的AI助理,包含了智慧引擎、智慧场景、智慧识屏、智慧桌面、智慧驾驶在内的5大功能。
经过两个多月的努力,到了NEX这一代产品上,vivo对Jovi进行了全面的升级,大幅扩充了Jovi的「技能包」,更加充分地利用了手机的AI能力。
这一切要先从一颗按键说起。
一颗按键引发的思考
按键是手机交互的第一层级,它高于触摸操作,可以让用户在不接触手机屏幕的情况即可完成特定的操作。
目前智能手机中最常见的设计是电源键、音量加、音量减三大「金刚」,除此之外,一些手机厂商也尝试增加额外的按键让用户更快捷地完成部分操作,比如iPhone上的静音按键、一加手机上的三段式模式按键、锤子手机的「闪念胶囊」键、索尼手机上的实体拍照键、三星手机的Bixby按键。

在NEX的机身左侧,vivo也增加了一颗实体按键,叫做「Jovi AI独立按键」。
顾名思义,这颗按键是用来启动Jovi的,具体的功能有两个:长按启动Jovi智能语音助手,短按启动Jovi智慧识屏。
Jovi智能语音助手
我们先从Jovi智能语音助手说起。
大家知道,对于智能手机来说,智能语音助手早就算不上什么新鲜功能了,苹果早在2010年发布的iPhone 4S上就搭载智能语音助手Siri。之后,谷歌、亚马逊、微软、三星以及众多国产手机厂商也纷纷推出了自家的语音助手。

作为一位「新人」,Jovi智能语音助手有两个特别的地方:第一个是唤醒方式,第二个是可实现的功能。
Jovi智能语音助手有两种唤醒方式,第一种是按住侧面的Jovi AI独立按键同时来说话,第二种是用唤醒词进行远场语音唤醒。
Jovi提供了两个唤醒热词,分别是拟人的「小V小V」和更加国际范儿的「Hi,Jovi」,用户在录入自己的语音后,即可通过自己的语音来唤醒Jovi。为此,NEX内置了一颗专属的S801 AI语音芯片,日常使用中可以以极低的功耗待机,在听到用户的声音后快速进行响应。
功能方面,除了查天气、设闹钟、设置日程提醒、搜索音乐、听新闻等语音助手的基本功能,Jovi智能语音助手还可以完成包含了app内多个步骤的复杂指令。
以生活中常见的微信发红包功能为例,Jovi智能语音助手已经可以完成「给德赫亚发5元红包并留言恭喜西班牙小组第一晋级」这种操作。
这句话中,包含了打开微信、在联系人中搜索「德赫亚」、点击联系人头像、点击发消息、点击对话框右下角的加号、点击红包、在金额中输入「5」、金额下面的对话框中输入「恭喜西班牙小组第一晋级」、点击「塞钱进红包」等接近10个步骤。
为了实现这个复杂的指令,除了需要强大的深度自然语言理解能力,还需要在应用层和主流app进行打通,目前Jovi已经覆盖了包括导航、社交、音乐、视频、旅行、购物、天气、打车等在内的多个头部app,包括大家熟悉的京东、淘宝、微信、大众点评、QQ音乐、滴滴出行等常用app。
除了这些vivo官方准备好的「技能包」,用户还可以根据自己的需求来为Jovi语音助手定制属于自己的功能。
打开NEX预装的Jovi语音app,在右上角可以看到一个「教」的字样,点开后就可以呼出Jovi的命令教学功能了。

在这里,用户可以添加专属的语音指令,然后为它定制自己所需要的功能,目前Jovi可以支持单个应用内的「点击」以及「文本输入」这两种属性的操作,已经可以覆盖大部分的app内功能,vivo表示之后会让Jovi支持更多属性的操作。
如果你懒得「手把手」教Jovi,还可以直接使用Jovi内建的「命令广场」功能,这里汇集了用户分享的自己教Jovi学会的语音指令。
目前「命令广场」里已经有了不少颇为实用的指令,比如「我要看世界杯」(打开优酷,点击世界杯专题),「支付宝收能量」(打开支付宝,点击更多、财富管理、蚂蚁森林),「招行信用卡还款」(打开招商银行,点击信用卡还款)。
未来,随着Jovi智能语音助手的用户越来越多,「命令广场」的内容会快速得到丰富,vivo也会选择将受用户欢迎的指令直接集成到Jovi的默认功能中,从而让Jovi的功能更快速度地进行迭代和进化。
Jovi智慧识屏
聊完Jovi智能语音助手,我们来看一下NEX侧面AI按键的另外一个功能:短按呼出Jovi智慧识屏。
和智能语音助手类似,识别屏幕内容也不是什么新功能,比较早的尝试可以追溯到谷歌在Android 6.0时发布的Now On Tap功能。到了AI时代,通过使用大量的数据对神经网络模型进行训练,手机在图像和文本识别的速度和准确性上有了巨大的提高。
NEX搭载的是高通最新的旗舰SoC骁龙845,利用配套的AI Engine提供的强大的AI运算能力,NEX可以快速完成对屏幕内容的准确识别。不过能识别出内容只是一个前提,Jovi智慧识屏的不同之处在于它的「智慧」部分。
在按下这颗AI按键后,Jovi智慧识屏能够根据屏幕上的内容,智能地进行识别。

当你在查看一张花的照片的时候,Jovi智慧识屏会识别花的名称并给出相关的信息。当你在看一张产品照片的时候,Jovi智慧识屏又会识别出产品的型号并列出淘宝的购买链接。当你在阅读文章的时候,Jovi智慧识屏会将文字根据语义智能地分开,方便用户精确选择文字。

此外,如果屏幕上包含了多种文字信息,Jovi智慧识屏还可以智能地对人名地名等专有名词、电话号码、日常安排、快递单号等信息进行提取,将不同类型的信息汇总成一个个简洁清晰的小卡片,方便用户查阅。
Jovi智慧识屏还可以和更多的信息和功能进行联动,比如当你和朋友在微信上约看电影,Jovi智慧识屏可以智能地展示出最近的行程,电影的介绍资料、评分,甚至是去电影院的导航信息,所有操作均在一个界面进行展示,大幅提高效率。
有了这些「智慧」的功能加入,Jovi智慧识屏所能做的已经远不是一个简单的「识屏」,而是更加接近一个无声的个人助理,它可以根据屏幕正在显示的信息给你自动「整理」出你需要的东西。
智慧场景、智慧桌面
除了Jovi智能语音助手、Jovi智慧识屏这两个重要新增功能,Jovi智慧场景、智慧桌面等原有的智能功能也得到了进一步的完善。

Jovi智慧场景位于通知栏的右上角,可以根据信息智能地生成卡片并在必要时推送,覆盖的信息有天气、交通、日常、电影、酒店、运动、快递、红包、赛事等等,而智慧桌面则位于桌面负一屏,这里包含了多种由vivo和第三方提供的聚合了多重信息的卡片,其中也包括了Jovi智能场景智能生成的事件。
值得一提的是,在最近的更新中,vivo特别优化了Jovi在世界杯期间的体验。
在Jovi智慧场景中,用户可以实时查看赛事比分,也可以点击进去看实时的文字和视频直播(接入的是优酷)。此外,用户还可以选择自己喜爱的球队,Jovi会根据比赛安排提醒你观看直播,同步赛况。
在NEX上,vivo还进一步提高了AI对拍照相关体验的加成。

在拍照时,NEX可以快速识别场景然后进行针对性的参数调整,在遇到逆光场景时,NEX可以根据场景只能选择多帧合成张片的数量,进一步提升逆光拍照效果,可以实现高达11.3eV的动态范围。
在NEX自带的相册中,vivo也赋予了更多的AI元素,比如使用AI算法自动将照片根据地点、时间、事件、照片亲密度等维度自动聚合,基于AI算法和图像识别技术提出的关键词来通过关键词快速搜索照片。
AI背后的高通AI Engine
要实现以上这些和AI相关的功能,需要有一个强大的硬件平台作为支撑,而这个支撑就是高通AI Engine(AIE)。
今年的2月21号,在MWC 2018开幕前,高通正式推出了自家的人工智能引擎AI Engine(Qualcomm Artificial Intelligence Engine,AI Engine),用于提高设备端(比如采用骁龙SoC的手机)上AI相关的运算能力。

AI Engine包含了3个硬件和3个核心软件,硬件部分为CPU、GPU、DSP三个部分,通过配套的骁龙神经处理引擎(NPE)软件框架,可以帮助开发着根据任务的需要,从DSP、GPU、CPU中智能选择合适的内核。

在此基础上,高通和多家算法提供商联合推出了多个利用AI Engine的应用优化,比如商汤科技和旷视Face++提供的多种预先训练的用于背景虚化、面部解锁、场景识别的神经网络,虹软提供的单摄和双摄算法,创通联达针对人工智能视觉用例和终端提供完整的解决方案,而云服务厂商也在利用AI Engine进行应用优化。
目前支持高通AI Engine的SoC有骁龙845、835、820、660、710,早在三月份发布的X21上,vivo就使用了骁龙600的AI Engine引擎,这也是行业最早使用AI Engine的智能手机之一。而相比起骁龙660,NEX旗舰版上采用的骁龙845在AI性能上又有了数倍的提升,为NEX的AI功能提供了更加充裕的硬件基础。
除了高通,在NEX的AI方案中,还可以看到很多行业头部「玩家」的名字。
在语音方面,vivo NEX搭载了由「娄氏公司」提供的声音采集、话筒、音响等硬件处理芯片,这让NEX成为全球唯一一家配置语音硬件芯片的手机,为Jovi智能语音助手的体验打下了更好的硬件基础。此外,vivo还与国内的讯飞达成合作,来提高NEX的自然语言理解能力,让NEX可以识别复杂的语音指令。
以解决用户需求为出发点的实用派AI
过去一年里,手机行业有两个趋势最为显著,一个是屏占比的不断提高,一个是全面的AI化。
相比起屏占比提高带来的视觉冲击,手机AI带来的体验要「隐性」不少,甚至在一些手机厂商前期对AI的过度宣传下,一度被不少消费者认为是个「噱头」。不过在高通、海思等上游厂商以及vivo等手机厂商的联合推动下,手机AI正在快速发展,AI对用户日常体验的加成正在越来越明显。
在这一波的手机AI大潮中,vivo是行动最早、重视程度最高的厂商之一。在保持技术前瞻性的同时,vivo在AI应用上更加强调解决用户的实际需求。

这次NEX上搭载的Jovi智能语音助手和Jovi智慧识屏就是两个典型的应用,语音助手和识屏都不是开创性的功能,不过通过和AI的结合,vivo把它落地成了更多实用的功能,让用户可以通过方便地按下手机侧面的独立按键,通过语音或识屏的方式更高效地完成很多日常生活中的高频操作。
NEX的Jovi体现了vivo这家乐于和用户沟通的手机厂商,在产品研发时,对用户的「关怀」,而对于现在的手机 AI 来说,这种实用派 AI 可能也是目前最合适的落脚点了。