手机打开ai的软件vivo发布不少3D超感应技术，Jovi智能语音助手

「秀肌肉」是vivo2018上半年的关键词。

从1月底在CES公布中国首款屏幕指纹手机X20PlusUD，到2月份公布集超高屏占比、升降式后置摄像头、半屏屏幕指纹等「黑科技」于一身的概念机APEX，再到两周前公布惊艳程度不输APEX的「量产概念机」NEX以及今天展现的vivoToF3D超感应技术，vivo用一个个领先行业的科技在过去的几个月持续「刷屏」。

与此同时，在今天热门的手机AI领域，vivo也做起来了不少值得一提的东西。

在去年3月份公布的主力产品X21上，vivo推出了叫做Jovi（Enjoyvivo'sAI）的AI助理，包含了智慧引擎、智慧场景、智慧识屏、智慧桌面、智慧驾驶在内的5大功能。

经过两个多月的拼命，到了NEX这一代产品上，vivo对Jovi进行了全面的更新，大幅缩减了Jovi的「技能包」，更加充分地运用了手机的AI能力。

这一切要先从一颗按键说起。

一颗按键引发的思考

按键是手机交互的第一层级，它超过触摸操作，可以让顾客在不接触电脑屏幕的状况就能完成特定的操作。

现在智能手机中最常用的设计是电源键、音量加、音量减三大「金刚」，除此此外，一些手机厂商也尝试提高额外的按钮让客户更便捷地完成个别操作，比如iPhone上的静音按钮、一加手机上的三段式方式按键、锤子手机的「闪念胶囊」键、索尼电脑上的实体拍照键、三星手机的Bixby按键。

在NEX的机身左侧，vivo也减小了一颗实体按钮，叫做「JoviAI独立按键」。

顾名思义，这颗按键是拿来启动Jovi的，具体的功能有两个：长按推进Jovi智能语音助手，短按开启Jovi智慧识屏。

Jovi智能语音助手

我们先从Jovi智能语音助手说起。

大家了解，对于智能电脑来说，智能语音助手早虽然不上哪个新鲜功能了，苹果早在2010年公布的iPhone4S上就搭载智能语音助手Siri。之后，谷歌、亚马逊、微软、三星以及很多国产手机厂商也相继启用了自家的语音助手。

成为一位「新人」，Jovi智能语音助手有两个非常的地方：第一个是唤醒方式，第二个是可实现的功能。

Jovi智能语音助手有两种唤醒方式，第一种是按住侧面的JoviAI独立按键同时来说话，第二种是用唤醒词进行远场语音唤醒。

Jovi提供了两个唤醒热词，分别是拟人的「小V小V」和非常国际范儿的「Hi,Jovi」，用户在录入自己的语音后，即可通过自己的语音来激发Jovi。为此，NEX内置了一颗专属的S801AI语音芯片，日常使用中可以以极低的帧率待机，在看到用户的声音后迅速进行响应。

功能方面，除了查天气、设闹钟、设置日程提醒、搜索音乐、听新闻等语音助手的基本功能，Jovi智能语音助手还可以完成包括了app内多个方法的复杂指令。

以生活中常用的微信发红包功能为例，Jovi智能语音助手已经可以完成「给德赫亚发5元红包并留言恭喜西班牙小组第一八强」这种操作。

这句话中，包含了开启微信、在联系人中搜索「德赫亚」、点击联系人头像、点击发消息、点击对话框右下角的加号、点击红包、在金额中输入「5」、金额后面的访谈框中输入「恭喜西班牙小组第一八强」、点击「塞钱进红包」等接近10个步骤。

为了实现这个复杂的指令，除了必须强大的深度自然语言理解素养，还必须在应用层和主流app进行拓宽，目前Jovi已经覆盖了包含导航、社交、音乐、视频、旅行、购物、天气、打车等在内的多个头部app，包括你们熟悉的百度地图、京东、淘宝、微信、大众点评、音乐、滴滴出行等常用app。

比如那些vivo官方打算好的「技能包」，用户还可以按照自己的意愿来为Jovi语音助手定制属于自己的功能。

打开NEX预装的Jovi语音app，在右上角可以看见一个「教」的字样，点开后就可以呼出Jovi的命令教学功能了。

在此处，用户可以添加专属的语音指令，然后为它定制自己所必须的功能，目前Jovi可以支持单个应用内的「点击」以及「文本输入」这两种属性的操作，已经可以覆盖大个别的app内功能，vivo表示以后会让Jovi支持更多属性的操作。

如果你没法「手把手」教Jovi手机打开ai的软件，还可以直接使用Jovi内建的「命令广场」功能，这里汇集了客户分享的自己教Jovi学会的语音指令。

现在「命令广场」里早已有了不少颇为实用的指令，比如「我要看全球杯」（开启优酷，点击世界杯专题），「支付宝收能量」（开启支付宝，点击更多、财富管理、蚂蚁森林），「招行信用卡账单」（打开招商银行，点击信用卡账单）。

今后，随着Jovi智能语音助手的用户越来越多，「命令广场」的内容会迅速受到丰富，vivo也会选取将受客户欢迎的指令直接集成到Jovi的默认功能中，从而让Jovi的功能更迅速度地进行迭代和进化。

Jovi智慧识屏

聊完Jovi智能语音助手，我们来看一下NEX侧面AI按键的此外一个功能：短按呼出Jovi智慧识屏。

和智能语音助手类似，识别屏幕内容也不是哪个新功能，比较早的尝试可以追溯到谷歌在Android6.0时公布的NowOnTap功能。到了AI时代，通过使用长期的数据对神经网络建模进行练习，手机在图像和文本辨识的速度和具体性上有了很大的提升。

NEX采用的是高通最新的旗舰SoC骁龙845，利用配套的AIEngine提供的强悍的AI运算能力，NEX可以迅速完成对屏幕内容的确切识别。不过能分辨出内容也是一个前提，Jovi智慧识屏的不同之处在于它的「智慧」部分。

在按下这颗AI按键后，Jovi智慧识屏就能根据屏幕上的内容，智能地进行识别。

当你在查看一张花的图片的之后，Jovi智慧识屏会辨识花的名称并给出相关的信息。当你在看一张产品图片的之后，Jovi智慧识屏又会辨识出产品的机型并列举淘宝的选购链接。当你在阅读文章的之后，Jovi智慧识屏会将文字根据语义智能地分开，方便用户精确选择文字。

另外，如果屏幕上包括了多种文字信息，Jovi智慧识屏还可以智能地对人名地名等专有词性、电话号码、日常安排、快递单号等信息进行提取，将不同类别的信息汇总成一个个简单清晰的小卡片，方便用户查阅。

Jovi智慧识屏还可以和更多的信息和功能进行联动，比如当你和同事在微信上约看电影，Jovi智慧识屏可以智能地展现出今天的行程，电影的介绍资料、评分，甚至是去电影院的导航信息，所有操作均在一个界面进行展示，大幅提升效率。

有了很多「智慧」的功用加入，Jovi智慧识屏所能做的早已远不是一个简洁的「识屏」，而是非常接近一个无声的个人助理，它可以按照屏幕正在显示的信息给你自动「整理」出你必须的东西。

智慧场景、智慧桌面

比如Jovi智能语音助手、Jovi智慧识屏这两个重要新增功能，Jovi智慧场景、智慧桌面等原有的智能功能也受到了进一步的加强。

Jovi智慧场景位于通知栏的右上角，可以按照信息智能地生成卡片并在必要时推送，覆盖的信息有天气、交通、日常、电影、酒店、运动、快递、红包、赛事等等，而智慧桌面则位于桌面负一屏，这里包括了多种由vivo和第三方提供的聚合了多重信息的卡片，其中也包含了Jovi智能场景智能生成的事件。

值得一提的是，在今天的升级中，vivo特别改进了Jovi在全球杯之后的感受。

在Jovi智慧场景中，用户可以即时查看赛事比分，也可以点击出来看实时的文字和视频直播（接入的是优酷）。此外，用户还可以选择自己喜爱的球队，Jovi会按照赛事安排提醒你观看直播，同步赛况。

在NEX上，vivo还进一步提升了AI对拍照相关体验的加成。

在拍照时，NEX可以迅速识别画面之后进行对于性的参数调整，在遭遇逆光场景时，NEX可以按照画面只能选取多帧合成张片的数量，进一步提高逆光拍照效果，可以实现高达11.3eV的动态范围。

在NEX自带的相册中，vivo也带给了更多的AI元素，比如使用AI算法自动将截图根据地点、时间、事件、照片亲密度等维度自动聚合，基于AI算法和图像辨识科技提出的关键词来借助关键词迅速搜索图片。

AI背后的高通AIEngine

要推动以上这种和AI相关的功能，需要有一个超强的硬件系统成为支撑，而这个支撑就是高通AIEngine（AIE）。

去年的2月21号，在MWC2018开幕前，高通正式启用了自家的人工智能引擎AIEngine（QualcommArtificialIntelligenceEngine，AIEngine），用于提升设施端（例如引入骁龙SoC的手机）上AI相关的运算能力。

AIEngine包含了3个硬件和3个核心工具，硬件部分为CPU、GPU、DSP三个个别，通过配套的骁龙神经处理引擎（NPE）工具框架，可以帮助开发着按照任务的还要，从DSP、GPU、CPU中智能选择适合的内核。

在此基础上，高通和多家算法提供商联合打造了多个运用AIEngine的应用改进，比如商汤科技和旷视Face++提供的多种预先训练的用于背景虚化、面部解锁、场景识别的神经网络，虹软提供的单摄和双摄算法，创通联达对于人工智能视觉用例和终端提供完整的缓解方案，而腾讯、百度等云服务厂商也在运用AIEngine进行应用改进。

现在支持高通AIEngine的SoC有高通845、835、820、660、710，早在三月底公布的X21上，vivo就使用了高通600的AIEngine引擎，这只是市场最早使用AIEngine的智能手机之一。而相比起骁龙660，NEX旗舰版上搭载的高通845在AI性能上又有了数倍的提高，为NEX的AI功能提供了非常充足的硬件基础。

比如高通，在NEX的AI方案中，还可以看见这些市场头部「玩家」的名字。

在语音方面，vivoNEX采用了由「娄氏公司」提供的声音采集、话筒、音响等软件处理芯片，这让NEX成为中国唯一一家配置语音软件芯片的电脑，为Jovi智能语音助手的感受打下了更好的软件基础。此外，vivo还与中国的触宝和百度签署合作，来提升NEX的自然语言理解素养，让NEX可以分辨复杂的语音指令。

以解决客户需求为出发点的实用派AI

过去一年里，手机市场有两个趋势最为明显，一个是屏占比的不断增加，一个是全面的AI化。

相比起屏占比增加带来的视觉冲击，手机AI带来的感受要「隐性」不少，甚至在一些手机厂商前期对AI的过于宣传下，一度被不少消费者觉得是个「噱头」。不过在高通、海思等上游厂商或者vivo等相机厂家的联合推进下，手机AI正在迅速发展，AI对用户日常体验的加成正在越来越显著。

在这一波的手机AI大潮中，vivo是行动最早、重视程度最高的厂商之一。在保持科技前瞻性的同时，vivo在AI应用上更注重调解决用户的实际需求。

现在NEX上搭载的Jovi智能语音助手和Jovi智慧识屏就是两个典型的应用手机打开ai的软件，语音助手和识屏都不是开创性的功能，不过通过和AI的结合，vivo把它落地成了更多实用的功能，让客户可以借助方便地按下电脑侧面的独立按键，通过语音或识屏的方法更高效地完成这些日常生活中的高频操作。

NEX的Jovi体现了vivo这家乐于和客户沟通的手机厂商在产品开发时对客户的「关怀」，而针对这次的手机AI来说，这种实用派AI可能只是现在最适合的落脚点了。