Siri Kit

概览

  • 最新的WWDC2016大会上,苹果提出iOS10并推出了十个新特性,homekit、messageapp等等,大部分是基于iPhone原生应用的更新。其中最大的亮点之一是Siri的接口开放,在iOS10中提供了SiriKit框架在用户使用Siri的时候生成INExtension对象来告知我们的应用,我们可以通过SiriKit提供的API展示给用户更多的内容,提供更好的体验。
  • Siri通过语言处理系统对用户发出的对话请求进行解析之后生成一个用来描述对话内容的Intent事件,然后通过SiriKit框架分发给集成框架的应用程序以此来获取应用的内容,比如通过文字匹配查找应用聊天记录、聊天对象,苹果demo演示的通过Siri向指定对象发送信息等功能,此外还支持为用户使用苹果地图时提供应用内置服务等功能。

SiriKit提供以下六类服务

  1. 语音和视频通话 VoIP calling
  2. 发送消息 Messaging
  3. 收款或者付款 Payments
  4. 图片搜索 Photo search
  5. 管理锻炼 Workouts
  6. 行程预约 Ride booking
    下面来看一下一个典型的Siri进行交互的语句:


    词汇逻辑

    其中有三类关键部分:Intent、App以及其他信息。Intent就是我要想要通过Siri去做的事的意图,App是通过手机安装的什么App来做,至于其他的Payee、Amount等信息则是通过App去完成Intent的必须信息。而整个Siri的交互过程可以参照下图:


    执行流程

    通过Siri来获取用户语言中的关键词汇,这些词汇在Extension中经过一些逻辑处理,最终反馈到用户界面,与用户进行交互。

Siri通过Intents extension的扩展方式和我们的应用进行交互,其中Intents Extension扮演协同Siri共同响应用户的角色,Intents UI Extension可以提供自定义的用户响应界面,用以增强体验。
当我们实现了Intents extension扩展并产生了一个Siri请求事件时,Intent(意图)事件的处理过程分Resolve、Confirm和Handle三个步骤。

Intent处理的三个阶段

生命周期
  • Resolve阶段:
    帮助Siri明白用户的含义
    影响Siri的行为
    提供resolution response
    在Siri获取用户的语音输入之后,生成一个INIntent对象,将语音中的关键信息提取出来并且填充对应的属性,该对象会传递给我们设置好的INExtension子类对象进行处理,根据子类遵循的不同protocol来选择不同的解决方案。通过handler(for intent:)返回处理intent的对象,此对象会调用resolve打头的实例方法来对Siri的响应进行一系列的信息处理,比如是否需要进一步的信息提示等。在resolve阶段提供了以下方法:
    successWithResolvedPerson:成功找到匹配的人
    disambiguationWithPeopleToDisambiguate:还需要挑选
    confirmationRequiredWithPersonToConfirm:还需要确认下
    needMoreDetailsForPerson:还需要更具体的信息,需要Siri进行询问
    unsupportedWithReason:无法使用指定值
    needsValue:需要某些必需值
    notRequired:应用并没有要求某些值
  • Confirm阶段。
    告诉Siri预期结果
    检查必要的状态
    提供Intent response
    Siri提供必要的确认提示
    Siri进行最后的处理阶段,生成答复对象,并且向此intent对象确认处理结果。大概长这样:


    效果图

    当然,这个界面是经过自定义的。

  • Handle阶段:
    执行请求操作
    提供有关结果足够精确的信息
    如果结果耗时的话还可提供loading
    在Confirm方法执行完成之后,然后显示结果给用户看。该阶段完成后Intent的生命周期结束。

实现一个Siri Kit应用

  1. 升级到Xcode8,一台升级到iOS10的测试设备
  2. Intents extension : resolve、confirm、handle流程
  3. Intents UI extension 提供界面自定义等内容
  4. 新建一个空应用并新增一个target
  5. 新增Intents Extension,创建时会询问是否激活该扩展且是否将Intents UI Extension一并创建,都选择是。
  6. 了解Embedded frameworks


    extension

Embedded frameworks

Embedded frameworks是苹果着重提出来的,主要用于以下几个方面:

  1. 网络服务
  2. 数据model
  3. Decision-making logic
  4. 用户界面
    可以在应用主target以及extension分别引用。

在创建extension之后,我们查看extension的plist文件,默认的plist结构如图所示:


plist

IntentsSupported表示的是应用支持的Intent事件,IntentsRestrictedWhileLocked表示的是锁屏下支持的Intent事件。在demo中分别赋值:INSendMessageIntent。还要注意一下NSExtensionPrincipalClass,该项内容表示的是extension响应的入口类。其为INExtension的子类,需要实现handler(for intent: INIntent)方法如下:


INExtension

用以根据不同的Intent分发各个自定义Handler进行处理。
另外还就是主项目plist 增加NSSiriUsageDescription 这个是请求Siri权限时提示的文案,同时使用Siri时,用户必须说出App的名字,也就是Bundle display name,都需要进行设置。其中UCSendMessageIntentHandler需要实现INSendMessageIntentHandling中的方法用以与Siri进行交互,也就是Resolve、Confirm和Handler三阶段的交互。

示例代码如下:

  1. 获取收件人信息,可以根据自身匹配的信息返回不同状态与Siri进行进一步的交互。


    收件人
  2. 获取信息内容,也就是要给收件人发送的信息的具体内容。


    信息内容
  3. 收件人、信息内容确定后,通过Siri向用户进行信息确认。


    confirm
  4. 信息确认后,进行最终信息的发送并向用户展示结果。


    handle

    具体展示到界面上的效果图如下


    效果图

    至此,一个完整的通过Siri进行发送信息的完整流程结束。简要概括整个流程,可以参照苹果Keynote中的图示:
    protocol三阶段

    当然,在上面图例中,有开发者自定义的Siri反馈界面,这个界面的实现主要是通过Intents UI Extension来实现的。有兴趣的话,可以自行研究,实现方式也很简单。UI Extension的plist结构可以参照下图,只需要设置一下IntentsSupported即可。


    plist

总结

虽然苹果开放了SiriKit的入口,但是总体而言还是限制颇多,具体如何使用还是需要继续深入挖掘。类似可以自定义应用词汇、使用UI Extension过程中的内存管理等等。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,185评论 6 493
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,445评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,684评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,564评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,681评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,874评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,025评论 3 408
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,761评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,217评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,545评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,694评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,351评论 4 332
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,988评论 3 315
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,778评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,007评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,427评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,580评论 2 349

推荐阅读更多精彩内容

  • 引言 在6月14日凌晨的WWDC2016大会上,苹果提出iOS10是一次里程碑并且推出了十个新特性,homekit...
    青花瓷的平方阅读 3,279评论 0 2
  • 在这里放出原文链接地址 Part 3.1: 分析与操作 Intents Intents Extension 的的入...
    李国安阅读 1,321评论 0 4
  • 介绍SiriKit SiriKit是让你的内容通过Siri展示的一个框架库。当用户向Siri请求特别类型的服务时,...
    孢子菌阅读 4,264评论 1 6
  • 一、SiriKit介绍 Siri是一款苹果 iOS 系统提供的智能语音助手软件,它的全名是 Speech Inte...
    火星抄手阅读 5,529评论 15 19
  • 在这大天世界里,每个人都有一份最真的心,可是往往很多时间人们都藏起他。
    红酒佳坊阅读 193评论 0 0