軟件系統(tǒng)測試大綱.docVIP

軟件系統(tǒng)測試大綱1范圍本標準規(guī)定了軟件系統(tǒng)的整體測試方案，圍繞APP、云服務平臺及嵌入式系統(tǒng)而展開的一些列測試與驗證活動，使用產(chǎn)品不局限于智能家居部所研發(fā)的智能單品。2 測試目的通過測試驗證該軟件系統(tǒng)是否達到設計指標，判斷軟件產(chǎn)品質(zhì)量是否符合產(chǎn)品需求、功能實現(xiàn)是否正確、性能和安全性方面是否符合發(fā)布標準、用戶體驗方式是否符合用戶習慣。3測試環(huán)境3.1軟件環(huán)境云平臺：搭建在阿里云端的平臺支撐系統(tǒng)(含數(shù)據(jù)庫、應用程序及算法等，依服務器配置要求為準)移動端應用軟件：APP軟件(含IOS版與安卓版)3.2硬件產(chǎn)品產(chǎn)品1、產(chǎn)品2、產(chǎn)品33.3用戶環(huán)境模擬用戶環(huán)境:智能家居辦公區(qū)(覆蓋用研室、軟測實驗室、硬件試驗室及辦公區(qū)區(qū)域)實際用戶環(huán)境:一居室(面積小于70m)、二居室(70m100m)、三居室(100m130m)及復式房(面積不定)等4測試方法使用依產(chǎn)品需求文檔、軟件規(guī)格文檔及用戶環(huán)境為基礎構造的測試用例來驗證測試和數(shù)據(jù)。5測試項目5.1功能測試所有需求文檔、軟件技術規(guī)格書描述與硬件產(chǎn)品功能規(guī)格書描述的功能均實現(xiàn)正確。此部分依據(jù)對應公牛智家APP及產(chǎn)品的測試用例執(zhí)行。功能點不限于:基本功能模塊、通信模塊、計量模塊、應用程序的界面模塊、易用性模塊、兼容性、安裝與卸載程序、接口測試模塊等，具體測試功能點視產(chǎn)品需求、軟件功能或硬件功能而定。5.2性能測試重點業(yè)務功能、性能能滿足上線運營要求。具體測試方法與測試功能點視產(chǎn)品而定。5.3安全性測試接口和數(shù)據(jù)調(diào)用等方面符合國家性、行業(yè)性規(guī)范；沒有安全性漏洞。具體測試方法與測試功能視產(chǎn)品而定。5.4用戶體驗測試(可選)該部分測試內(nèi)容包含功能測試模塊中的易用性測試及用戶研究部門提供的體驗性測試。5.5穩(wěn)定性測試模擬環(huán)境下完整系統(tǒng)的穩(wěn)定性測試及實際用戶環(huán)境下的系統(tǒng)完整性測試。測試內(nèi)容不局限于網(wǎng)關配網(wǎng)、設備入網(wǎng)、設備開啟與關閉、多設備聯(lián)動控制、設備響應等。66.1需求分析與評審熟悉產(chǎn)品需求，主要包含如下幾點：1.理解產(chǎn)品需求，并做好確認和記錄(不限于產(chǎn)品文檔、設計文檔、開發(fā)文檔、評審記錄、UI原型圖等)2.明確測試需求，評估工作量3.關注產(chǎn)品并了解開發(fā)團隊的開發(fā)難點4.關注需求變更，及時更新測試用例6.2測試計劃與策略測試計劃：根據(jù)測試需求和排期，制定測試計劃，劃分測試時間點等。測試策略：明確測試范圍、測試類型、測試優(yōu)先級。并根據(jù)項目研發(fā)實際情況，及時調(diào)整修改測試計劃或策略，保證測試節(jié)奏與進度。6.3測試用例設計與評審測試用例設計是每個測試人員必備的技能，也驗證產(chǎn)品質(zhì)量的關鍵所在。要確保測試用例邏輯清晰、覆蓋全面與簡潔；除確保覆蓋產(chǎn)品功能外，盡可能從用戶需求角度來設計測試用例。測試用例評審是測試人員不斷完善學習的過程，積極聽取評審人給出的合理建議，提取有用信息添加到測試用例中，來提高測試用例對產(chǎn)品功能的測試覆蓋率。6.4執(zhí)行測試用例嚴格且認真執(zhí)行測試用例，并如實記錄測試結果。測試過程步驟：1冒煙測試，主要驗證發(fā)布的版本是否可以正常執(zhí)行。對于可以正常執(zhí)行的軟件產(chǎn)品，直接進入功能性測試環(huán)節(jié)；對于無法正常執(zhí)行的軟件產(chǎn)品，及時通知測試負責人、開發(fā)負責人和項目負責人等，保存已完成的測試內(nèi)容并終止該軟件產(chǎn)品的測試。2功能性測試，依據(jù)產(chǎn)品的測試用例執(zhí)行并記錄測試結果；在測試過程中及時完善或修正測試用例。3性能性測試，依據(jù)產(chǎn)品的測試用例執(zhí)行并記錄測試結果；在測試過程中及時完善或修正測試用例。4易用性測試，采用用戶思維模擬用戶環(huán)境或用戶習慣來驗證產(chǎn)品的友好界面、易操作性等行為。依據(jù)產(chǎn)品的測試用例執(zhí)行，在測試過程中及時完善或修正測試；可與功能性測試合并進行。5安全性測試(可選)，該項測試內(nèi)容依據(jù)產(chǎn)品需求而定，必要時可委托第三方執(zhí)行。注意:對于測試過程中發(fā)現(xiàn)的bug依據(jù)Bug提報規(guī)范將其提報至Bug管理系統(tǒng)以便追蹤狀態(tài)。6.5Bug提報提報原則：1.詳細了解產(chǎn)品或被測系統(tǒng)的功能，避免提交無效bug和重復bug。2.Bug描述要清晰，復現(xiàn)步驟要準確，需要在Bug提報中上傳異常圖片或日志文件，必要時提供視頻文件。3.對于一些未考慮到或需要優(yōu)化的地方，需要多提建議。Bug提報注意事項:1.必現(xiàn)性Bug：直接提報至bug管理系統(tǒng)，并提交異常圖片或日志文件，注明詳細測試環(huán)境與對比環(huán)境。2.概率性Bug：及時與開發(fā)人員確認，并提交錯誤圖片或日志文件；盡可能找出復現(xiàn)規(guī)律，并與前一版本或變更測試環(huán)境做對比驗證，并詳細記錄測試環(huán)境、對比環(huán)境與對比結果；并及時提交至bug管理系統(tǒng)上進行追蹤。6.6撰寫測試報告輸出一個完整且清晰的測試報告是測試人員必備的技能，也是項目組評估版本質(zhì)量的一個重要依據(jù)，可參考測試報告模板。一般測試報告包含且不局限如下內(nèi)容:1測試環(huán)境與測試主題內(nèi)容2測試結果概述3測試用例執(zhí)行情況4Bug統(tǒng)計及修復情況5測試結論6風險評估6.7測試報告評審對于非轉(zhuǎn)階段軟件產(chǎn)品測試版本，由測試團隊整理完成測試報告后與開發(fā)人員確認Bug后，可直接發(fā)布測試報告給項目組成員。對于轉(zhuǎn)階段版本由測試團隊提前提交預審核的測試報告，由項目經(jīng)理召集項目組成員對預審核測試報告進行評審。評審流程如下:1.項目組成員共同討論bug的處置意見并達成共識；無法達成共識的內(nèi)容，由項目經(jīng)理與產(chǎn)品經(jīng)理協(xié)商處理并提供最終的處理建議。2.評審結束后，bug對應負責人及時在bug管理系統(tǒng)上修正bug狀態(tài)和備注處理意見。3.測試團隊發(fā)布評審后的測試報告和評審記錄表，并將評審記錄表提交至品管人員處存檔。6.8注意事項6.8.1文檔資料審核1.提測郵件中的發(fā)布說明文檔必須完整，含固件或軟件資料的校驗內(nèi)容、注意事項、變更內(nèi)容、影響范圍等。注意事項中需特別備注哪些版本不能直接更新至該版本，或該版本測試不能搭配哪些軟硬件版本等。2.提測郵件中的資料下載路徑或存放位置必須正確。3.提測郵件中提供的WEB類環(huán)境搭建說明文檔描述需清晰和操作步驟需準確,還需要明確硬件環(huán)境和軟件環(huán)境的配置要求。硬件環(huán)境要求不限于處理器信息、內(nèi)存容量、磁盤容量、數(shù)據(jù)庫服務器要求、網(wǎng)絡帶寬等內(nèi)容；軟件環(huán)境要求不限于操作類型、操作系統(tǒng)版本、安裝此軟件前必須安裝的軟件程序等。6.8.2 環(huán)境搭建1.固件類產(chǎn)品：依據(jù)提測郵件中的注意事項搭配正確的產(chǎn)品硬件，未在提測郵件中提及的部分采用當前最新版本硬件；搭配APP軟件時，測試場景需要涵蓋IOS操作系統(tǒng)與安卓操作系統(tǒng)，請明確對應的應用程序版本；2.APP類產(chǎn)品:依據(jù)提測郵件中的注意事項搭配正確的操作系統(tǒng)，未提及部分需要在通用的系統(tǒng)環(huán)境下驗證(含安卓系統(tǒng)與IOS系