內部比賽的優(yōu)缺點
多虧了內部測試比賽的概念,可用性測試得到了改善,因為產品是在開發(fā)早期而不是發(fā)布后測試的。我們設法從不直接參與該功能的開發(fā)過程的員工那收集反饋。一些反饋在開發(fā)過程中直接實現(xiàn),這提高了產品的第一印象。它也可以解決一些測試版的限制。測試環(huán)節(jié)在內部組織,其參與者,QA經理,以及相應的開發(fā)團隊聚在一起兩個小時測試該功能。這能夠直接和測試人員直接說說這些他們發(fā)現(xiàn)的問題并進一步探討某些功能。除了這些,引入內部測試比賽還有一些積極的副作用。我們看到了QA部門認識的提高及一般產品質量的提高。也給不同部門的員工提供了解對方的機會。這往往是員工眾多的企業(yè)所缺少的!
但是這個概念確實有局限性。這次活動給了我們機會讓對產品看法不一的多個部門都參與其中,但是這并不代表一般用戶。然而,由于我們的測試比賽不打算替代而只是作為測試工具箱的一種補充,公司員工測試的優(yōu)點超過了其限制。
圖2. XING 配置文件中一個的文件夾
圖3.第一次測試會話的情況
圖4.系統(tǒng)可用性級別的十個問題
為以后的測試比賽做出的改進及學到的經驗教訓
XING前兩次比賽談論了一些下次比賽將要做出的改進。首先,測試實驗室改進了,因為它好有一個與人們通常使用軟件的地方盡可能相似的位置。這對移動測試尤為重要,因為人們在使用一個應用程序時不會完全注意它,往往他們同時還有其他事情要忙。手機變得越來越重要,這意味著手機測試每次迭代中都要加入測試比賽。
這也可能成為新參與者的一個動力,因為它有助于提高測試的多樣性。提高參與者的動機水平的方法之一是讓他們在尋找更多更復雜的問題時相互競爭。這可以用一個現(xiàn)場儀表顯示被發(fā)現(xiàn)時的bug來闡明。上兩次比賽中,發(fā)現(xiàn)的bug數(shù)只在兩次比賽間被提到,這被視為鼓勵人們繼續(xù)去找到更多的bugs。后,該計劃是也開始使用SUS (系統(tǒng)可用性測量)收集定量反饋。SUS是一種通過提問某些問題從測試人員收集關于該功能的重要信息的簡單測量。
總結
內部測試比賽基于crowd測試方法。它是通過結合crowd測試,基于會話的測試,探索性測試和比賽的概念發(fā)展而來的。該測試比賽有助于提高全公司對產品質量和可用性的重要性的認識。這有利于通過讓已經熟悉產品的員工參與,對產品(即使是在測試階段的產品)形成更好的第一印象。
參考文獻:
[1] Rubin, Jeffrey; Chisnell, Dana: Handbook of usability testing: how to plan, design, and conduct effective tests, Wiley, 2008, page 4
[2] Bach, James: Exploratory Testing Explained, 2003, Page 1. Available online: http://www.satisfice.com/articles/et-article.pdf (Access 10th January 2014), 2013
[3] Heusser, Matthew; NRG Global Test Competition. Available online: http://www.meetup.com/agiletesting/events/108730832 (Access 12th January 2014), 2013
[4] Brooke, John: SUS-A quick and dirty usability scale, In Jordan, Patrick W.; Thomas, Bruce; Weerdmeester Bernard A.; McClelland Ian L.: Usability Evaluation in Industry, Taylor and Francis, 1996, pages 189-194
版權聲明:本文出自 SPASVO澤眾軟件測試網:http://hgh666.cn/news/html/2014515140358.html
原創(chuàng)作品,轉載時請務必以超鏈接形式標明本文原始出處、作者信息和本聲明,否則將追究法律責任。