Allion Labs / Jason Wu
近几年来,内建语音助理的智能音箱,不仅在北美及欧洲都爆发性的热卖,在中国也是掀起了一波热潮。消费者对于此类的智能型产品具有高度的兴趣,因此每年的销售量仍节节上升。而除了在手机及智能音箱内导入语音助理外,这波语音助理风潮,也逐渐地蔓延至其它装置,例如穿戴装置、家电、车载导航系统以及PC。而本篇文章主要向大家说明的,就是Alexa在PC上的运用及认证测试。
图1:Alexa for PC is ready!
什么是 A4PC(Alexa for PC) ?
相信有使用过亚马逊的Alexa语音助理的消费者,对于Alexa能提供的帮助印象深刻。除了问时间、天气以及播放音乐外,她还可以陪你聊天、说笑话、说故事给你听;也可以帮你购买生活日常用品,并送到家门口,而不用出门。那么这些功能,可以在PC上使用吗?毫无疑问地,她完全可以在PC上让你有同样的体验。只要PC经过了亚马逊的 Alexa认证测试,并拿到了A4PC的认证,使用者即可在PC上,同样愉快地享受语音助理体验。
如何得到A4PC 认证?
厂商若计划支持A4PC,需经过两个阶段的测试,才能完整走完认证流程。
- 自我测试
首先是厂商需先进行Self-Test,验证A4PC的语音功能,在待测的PC上,是否能符合规范?在这个阶段,厂商要尽可能地找出会影响语音收音的因素,并完全地改善它,然后先进行长时间语音功能的可靠性验证,再做Acoustic Quick Test,并检视测试结果是否已经合乎标准?若已经符合标准,便完成了进行认证测试的准备。
不过,除了语音功能的验证外,同时建议厂商要确保系统的稳定性,长时间系统不可死机、网络不可失去联机,长时间麦克风都能有效的收音等等。
- 认证测试
完成了以上的准备,则可以进到了第二阶段的认证测试。厂商需联络亚马逊或具有亚马逊授权的认证实验室,安排A4PC的认证测试。当实验室收到了待测的PC后,即可开始进行测试。一旦测试完成并取得通过的报告,厂商即初步具备取得认证的资格了,此时厂商把收到的测试报告,递交给亚马逊负责窗口,待检视无误后,即正式取得了认证资格了。
图2:PC 支持 A4PC
A4PC 认证测什么?
A4PC的测试验证,现在都需要通过亚马逊提供的测试工具来进行测试,一共分为几个方向的验证:
- STT(Stability Test Tool)
一般语音助理的使用情境,都是24小时待命,而此项目就是要验证PC本身的稳定度,会不会在长时间使用语音助理之后,导致系统崩溃,或是语音助理停止响应。
- FRR(Wake-Word False Rejection Rate)
这项是在验证唤醒的正确率,透过播放预录的测试语音,来记录受测产品是否能每次被正确唤醒。
- RAR(Response Accuracy Rate)
这项是在验证回复的正确率,透过播放预录的测试语音,来记录受测产品是否能每次正确的回复问题,或是进行被要求的动作。
- WWDD(Wake Word Detection Delay)
为了能达到更实时的反应,避免使用者等待的不良体验,这项验证受测产品,在收到唤醒语音跟后续的指示之间,所需要的时间长短。
- FAR(Wake-Word False Alarm Rate)
一般使用者在对话时,不会特意去避开使用唤醒词,或是难免会说了与唤醒词发音相近的词语。这项是验证在长时间的测试语音进行中,受测产品不会被错误地唤醒。
图3: 百佳泰提供 A4PC 测试报告
亚马逊A4PC认证的测试环境是怎么样的?
认证测试需在亚马逊 Alexa测试规范所定义的聆听室中进行,此聆听室除尺寸外,还需完全符合测试规范中,针对RT-60的各项指标要求。另外,测试设备的使用,也是要遵照规范来准备,不能任意更动。测试环境的架设,则需进行严格的测试前校正,不论是角度、高度、距离以及音量的大小,才能达到与亚马逊的同样的测试水平。
图4: 语音识别测试环境
用户体验验证测试(额外)
虽然在完成并通过了前面说明的认证测试后,产品即可取得认证资格,不过,仍然有使用者在实际使用时,还是会遇上了无法唤醒,或是识别不正确的状况。这又是怎么一回事呢?
通常用户买了支持A4PC的产品回家,接上电源开机、连上网络及登入账号,以为可以顺利享受虚拟助理,帮忙解决生活中的大小事,帮忙提供问题的解答时,却发现怎么也叫不起来这个语音助理?问了几个问题,有时却答非所问!根据百佳泰的测试经验,通常产品会有底下几种用户体验上的风险:
- 叫不醒
- 回应不正确
- 没叫它时,自己却醒来了
- 回应缓慢
- 网络联机不稳定
- 声音质量不佳
产品取得了认证资格,不代表使用者能得到绝佳的体验,因此百佳泰提出了更多测试项目,协助厂商来验证产品性能,找出更多消费者使用上面临的风险,完善产品的使用经验:
- 不同的语音种类及更多的数量
- 各种语音的口音及腔调
- 更多的距离、高度变换
- 更多的环境噪音
- 不同家居装潢材料旁的表现(玻璃、布窗帘、百页窗、书本、电视…)
- 不同受测产品摆设的位置(靠墙、靠窗、电视柜、茶几、书桌、床头柜…)
图5: 语音识别测试环境
百佳泰是亚马逊授权的A4PC认证测试实验室,同时间也正在进行AVS授权认证实验室审核,现阶段不只可以提供A4PC认证测试,协助厂商取得A4PC的认证。若客户无合适的测试环境,百佳泰也可以提供厂商自我测试的服务。若是想在产品开发阶段,得到部份项目的测试结果,以进行后续debug,这里百佳泰同样可以提供服务。而除了标准认证测试外,在产品性能验证中,可以协助厂商为产品量身订做出客制化的测试项目,进一步确保使用者买回家后,不会因家居装修的条件不同、家具摆放的位置不同,大大的影响了产品的表现。提前解决可能会面临到的潜在问题,以期能更早期地解决这些会造成使者体验不佳的问题。
请让百佳泰为您Amazon Alexa for PC的产品计划,得到更全面的质量进化,若需贵司有任何产品咨询或服务需求,敬请来信至cn_service@allion.com.cn。