Allion Labs/Franck Chen
随着近年串流影片服务的崛起，根据研究机构Parks Associates报告指出，拥有智能电视的家庭中有超过一半的家庭使用智能电视作为播放串流媒体的主要装置。电视不再仅只是单纯的”看”电视，现阶段所生产的电视几乎都已搭载新功能，社群、游戏、网络、随选影片、TV APP…等皆可在电视上实现，成为数字家庭娱乐生活不可或缺的一块。
因此相较过往现在电视厂商在产品开发上更需考虑各种新机能、使用者观看习惯及多种使用情境，然而随着终端用户接触产品时间变长，混杂的有线/无线环境，再加上复杂又频繁的使用习惯及方式，不曾出现过的问题逐一浮现。
电视制造厂商面临的现实与窘境
依据百佳泰在电视测试多年的经验，一般智能电视中大概有5~10%的严重问题是在反复操作或长时间使用后机率性发生的。由于该类型的问题不容易透过一般方式检测出来，所以实际上潜在的风险会再高于所统计出来的数据!
图：随机采样10个规模不同大小项目之数据分析
然而即便是机率性发生的问题，若是将市场销售数量及用户使用频率加以计算后，可预期实际发生的案例会远比机率上的数字高出许多! 现今多数消费者在购买产品前会先搜寻产品相关信息及评价再加以评估是否购买，因此若无法在产品上市前有效降低这些机率性问题，将会有极大的客诉风险与退货压力。基于上述原因，必须体认到即使是机率是低到百分之几的严重问题，仍然不可轻易忽视!
只不过如果透过一般人工方式针对机率性问题进行长时间或反复操作检测的话，一来容易因专注力下降而造成人为疏失，二来会因为人力工作时间无法持续而需要拉长测试时程，面对上述的窘境经常造成厂商进退两难。
以下将介绍百佳泰如何能在同时满足『降低时间成本』以及『克服一般人力所不能及』的双重条件下，有效率的协助客户检出潜在的严重问题以提升产品竞争力。
「自动化套件」与「客制化测试脚本」缺一不可，相辅相成才能有效检出
为了协助客户解决痛点，百佳泰团队整合了硬件测试、软件测试、兼容性与VFT（虚拟现场测试）的测试概念，设计开发出 『智能家庭关键场景测试』 (ACSTS , Allion Critical Scenario Test Solution)，弥补在人工测试上所无法达到的缺陷。
首先，透过百佳泰自行开发的ACSTS自动化测试套件，可执行一系列压力相关测试项目，除了可延伸检测时间提升时间利用率外，也能减少人为疏失、提升检测正确率，克服一般人工测试的种种局限。
第二，运用我们多年的测试与市场调查经验，分析使用者情境及关键的操作与条件，客制化测试脚本，搭配Log结果，自动产出报告，有效提升问题检出率!!
综合以上优势，百佳泰关键情境解决方案无论是在时间利用率、检测正确率或是问题检出率上，均远远优于一般人工测试。
潜藏在智能电视中严重却又不易发现的问题有哪些?
以3种不同module(DUT1, DUT2, DUT3)为测试对象：
- 案例背景:
客户的电视产品不时产生机率性的严重问题，以往都是以人工方式做反复性或长时间性的检测与验证，但是除了花费超量的人力与时间成本以外成效也不彰，无法全面检验出产品问题，于是开发新产品时寻求百佳泰协助检测，希望能有效率减少机率性问题产生，提升产品质量。
- 了解客户痛点并拟定验证策略:
- 问题检出:
执行完测试后，我们统整出以下问题：
- 在播完多种影音串流影片后，切换到数字电视讯号(4K)会发生当机的问题，机率为2/100。
- 播放Netflix(Dolby Atmos)时切换音源输出至AVR时，会出现错误讯息而无法播放影片，机率为3/100。
- 在HDMI(4K 120Hz)底下，对TV进行断电重开会发生侦测不到HDMI讯号的问题，机率为2/100。
- 在切换不同APP并播放影片后，遥控器按键没有作用，机率为1/100。
- 连接蓝牙喇叭并且播放Netflix和YouTube影片后，发生无线网络断线问题，机率为3/100。
- 连接次世代游戏主机并切换为游戏模式后，电视产生黑屏，机率为4/100。
透过以上实测结果便可明白，有些问题必须在特定情境搭配特定测试手法下才有办法重现，若仅依照一般检测程序根本无法有效做到。
Bug层出不穷解不完怎么办? 百佳泰关键情境测试助您有效提升检测效率
从以下三大面向来看，带来的效益不容小觑!
- 可以节省多少人力时间?
百佳泰解决方案比一般人工测试节省了约90%以上的时间，大幅缩短整体检测时程，也减少了任何有可能的人为疏失。
- 可以检出多少潜在风险?
以问题『在播完多种影音串流影片后，切换到数字电视讯号(4K)会发生当机的问题，机率2/100』为例，使用者利用APP观看影片后切换到数字电视这样的操作行为，一天当中至少会执行3~5次，若以1万台的市场销售数量来推算：
2%机率 * 3次/天 *10,000台 = 600次/天，相当于该问题每天会有600次的机会在市场上发生，潜在的客诉风险着实不可轻视!
- 不只测试结果，还能取得问题log?!
除了可协助找出root cause修复问题外，百佳泰也会提供log报告，让厂商可依据log信息进行建文件与追踪，做为日后新产品设计与开发上的参考与借镜，进而降低同样问题发生的机会或是修复成本。
如何有效减少机率性的严重问题，绝对是厂商想要提升产品竞争力不可或缺的一环，长远来看更是维护品牌价值的重要关键!若您对于智能家庭关键场景测试方案有兴趣的话，可参考智能家庭关键场景测试或是直接填写咨询窗体，将会有专人与您联系。
