手自一體化的移動雲測試平臺建設方案

案例簡述

 

關於 移動自動化測試（ ），業界有一些開源的工具，但由於對人員技能要求和用例維護成本都比較高，所以推廣起來難度非常大。業界也有不少公有移動雲測試平臺，上手雖然比較簡單，但在使用一段時間之後，通常實際效果遠遠達不到預期。

此外，畢竟自動化測試不能完全替代手工測試，對於處於開發初期的新功能、UI發生明顯變更的功能，以及使用者體驗測試、探索式測試等測試活動還是要依賴人的主觀能動性。這些必須依賴人工的測試任務又該怎麼提升效率？

本案例結合多個大型 企業移動測試平臺（ ）建設經驗，剖析上述問題的根源。從移動裝置管理、移動應用管理、測試用例設計、手工測試執行、自動化測試支援、測試報告生成及結果分析等維度分享手自一體化的移動雲測試平臺建設方案。

 

案例目標

 

在最近幾年的專案中，移動App類專案佔比逐年增加。對機型適配、產品質量、發版頻率等要求越來越高，傳統的人工測試已經無力應對。我們以前在很多專案中曾推行過開源測試工具、採購過公有云測試服務，但是推廣難度很大、效果遠遠達不到預期。現有測試人員不懂技術，也是一個既成事實。因此我們需要在解決移動測試諸多問題的過程中，逐漸沉澱出一套行之有效的、適合手工測試人員使用的移動測試平臺。滿足我們在測試裝置管理、手工測試、功能自動化測試、相容性適配測試方面的需求。

 

成功要點

 

移動App測試平臺需要提供測試用例、自動化測試指令碼、測試資料維護，檢查點設定、報告生成等功能，並且支援主流的Android、IOS版本及裝置。 由於移動裝置的種類繁多、網路條件差異很大，所以為了提高自動化測試指令碼的適用性和穩定性，同一套測試指令碼需要支援在同一作業系統型別的多種手機上執行，並且能夠自適應網路速度，不需要反覆調整指令碼中的等待時間。 為了便於在手工功能測試團隊內部推廣，自動化測試平臺需要能夠支援無編碼技能的測試人員使用，並且提供基於瀏覽器訪問的B/S操作介面，避免測試人員複雜的安裝過程。最終使移動測試工具能夠以雲測試平臺的形式在測試團隊推廣。 提升測試效率的手段不僅僅是自動化測試，手工測試依然是保證軟體質量的最關鍵手段，如何提高手工測試本身的效率，也是測試工具需要重點關注的。

 

案例ROI分析

 

在測試團隊編制沒有明顯變化的情況下，每次發版的迴歸測試用例覆蓋度及機型覆蓋度提高3倍以上、測試裝置利用率翻倍，為持續整合、DevOps提供關鍵技術支撐。

 

案例啟示

 

大部分型別軟體的測試改善點都包括“提升測試工作效率”和“提高測試裝置利用率”兩大類，在移動App測試時也不例外。 由於移動應用本身的特殊性，主要改善策略包括： 重複性的工作自動化 對於移動App測試過程中重複性的工作進行自動化，如：在App版本升級後，基於大量裝置進行迴歸測試，以便覆蓋多作業系統、多解析度、多網路環境。 機械性的工作自動化 對於移動App測試過程中機械性的（不需要人主觀思考），但不是按照嚴格流程重複的工作，也需要透過工具進行自動化效率提升。如，手工測試時，提交缺陷過程中不方便獲取截圖、日誌、效能資料；測試過程中編寫詳細測試報告的時間，比單純測試執行的時間還要多。 提高測試裝置利用率 面對分散的測試裝置、分散的測試團隊，測試裝置的利用率，測 試團隊管理的有效性都是挑戰，也都是移動測試平臺需要覆蓋範圍。

 

案例在團隊中的意義

 

移動App無處不在。 頻繁的釋出版本、海量的機型、挑剔的客戶、不穩定的網速、碎片化的Android裝置、封閉的iOS裝置…都給移動App測試帶來巨大的挑戰。 手工測試力不從心、自動化測試困難重重，究竟應該怎樣提升移動App測試工作的效率呢？ 本案例結合多個大型企業移動測試平臺建設經驗，從移動裝置管理、移動應用管理、測試用例設計、手工測試執行、自動化測試支援、測試報告生成及結果分析等維度分享手自一體化的移動雲測試平臺建設方案。

 

作者介紹

殷坤

東軟集團 產品總監

 

東軟集團產品總監、資深測試經理、高階技術講師，16 年軟體產品研發、測試、諮詢及管理工作經驗，目前專注於自動化測試、敏捷研發管理及質量控制、過程改善等方面。主要負責公司級軟體產品的測試、持續整合、過程改善等相關工作，同時還負責東軟集團自動化測試產品 UniEAP UTF ( ) 的設計研發及推廣應用，致力於公司整體測試能力的提升。帶領東軟自動化測試產品 UniEAP UTF 團隊協助公司十餘個事業部、幾十個重點研發專案實施自動化測試，並將自動化測試解決方案成功複製到金融、通訊、能源、政府等國內外眾多行業客戶。

 

曾為多個大型企業的IT部門提供過自動化測試、敏捷研發方面的諮詢服務，同時也是TiD中國質量競爭力大會、CSTQB國際軟體測試高峰論壇、DevOps國際峰會、QCon全球軟體開發大會、中國軟體技術大會、中國軟體測試大會、Top100軟體案例研究峰會等國內頂級技術會議嘉賓講師。

 

來源：東軟平臺產品官網

東軟 移動自動化測試平臺介紹：