qileilove

          blog已經轉移至github,大家請訪問 http://qaseven.github.io/

          各種測試方法的問題

          在 Exploratory Software Testig 一書中, James Whittaker在第二章中, 提到各種測試方法的不足:
            Defect Preventation
            從開發(fā)人員的角度來說, 他們希望藉由 design review, code review, static analysis tool, 和 unit test, 來增加軟件的質量.
            但是作者覺得這些方法都有些根本的問題:
            (1) 開發(fā)人員通常不是個好的測試人員
            - 開發(fā)人員想的是"如何才能實現(xiàn)這個功能", 而測試人員則是從"如何才能攻破這個功能" 來思考.
            - 因此開發(fā)人員會有盲點, 需要有另一組人從不同觀點來思考
            - 但是不代表開發(fā)人員不用作測試, 像是 formatting, data validation 和 error handling 等等都需要及時處理和驗證. 等到測試人員發(fā)現(xiàn), 時間會花得很長, 也修正的代價也很高
            (2) 靜止狀態(tài)的程序不能完全代表真的測試目標
            - 有很多錯誤是和執(zhí)行環(huán)境有關系, 通常在開發(fā)環(huán)境這些錯誤不會發(fā)生的
            (3) 缺乏客戶真正數(shù)據(jù)
            - 有些錯誤是和客戶真實的數(shù)據(jù)有關, 或者需要實行一段時間后, 累積效果出現(xiàn)后才會有問題
            - 可是開發(fā)人員通常沒有這些數(shù)據(jù), 并且也沒有這么長的測試時間, 所以無法找出這類型的錯誤
            Defect Detection
            通常分成手動測試和自動化測試兩種:
            自動化測試
            - 測試人員不一定會是好的開發(fā)人員, 有些人可以, 有些人可能不行.
            - 測試程序也是會有 bug, 一旦出現(xiàn)后, 測試人員需要更多時間來除錯, 維護它的正確性和強固性. 所以你要花在測試的時間多, 還是應該花在維護測試程序的時間多?
            - 此外測試程序所在的執(zhí)行環(huán)境, 以及所用的測試數(shù)據(jù), 不是客戶的數(shù)據(jù), 所以效果還是有限. 并且客戶可能也沒有勇氣, 讓你在他的 production 執(zhí)行.
            - Oracle Problem 的問題是最難處理的, 也就是當你執(zhí)行完測試時, 你無法確認是否真的實行正確. 像是 install 完畢, 甚么叫做 install 成功, 是所有 service 都啟動, 是所有檔案都復制完畢, 還是所有 registry 寫正確. 你可能無法列的出來, spec 也不會寫甚么叫做功能運作正確.
            手動測試
            - 也是由人來進行測試, 需要充分發(fā)聰明才智, 設計出真實客戶環(huán)境的數(shù)據(jù)和使用狀況. 尤其是有關 business logic 更是需要人腦介入.
            - 手動測試比自動化測試強的地方, 是因為現(xiàn)實狀況有太多不確定的因素, 有太多 scenario, 會導致測試程序員小的情況太多, 錯誤時都需要人腦介入, 一一來跟蹤.
            - 可是手動測試很慢, 無法反復使用, 測試步驟可能不一定有規(guī)律, 也不一定都能重復.

          posted on 2014-09-18 09:26 順其自然EVO 閱讀(162) 評論(0)  編輯  收藏 所屬分類: 測試學習專欄

          <2014年9月>
          31123456
          78910111213
          14151617181920
          21222324252627
          2829301234
          567891011

          導航

          統(tǒng)計

          常用鏈接

          留言簿(55)

          隨筆分類

          隨筆檔案

          文章分類

          文章檔案

          搜索

          最新評論

          閱讀排行榜

          評論排行榜

          主站蜘蛛池模板: 呼和浩特市| 同江市| 武宁县| 酉阳| 桃园县| 上杭县| 阿勒泰市| 纳雍县| 长治市| 新建县| 札达县| 革吉县| 新河县| 历史| 和龙市| 肥西县| 东乌珠穆沁旗| 淮阳县| 汕头市| 永顺县| 海阳市| 阿鲁科尔沁旗| 莆田市| 称多县| 萍乡市| 北票市| 绵阳市| 五寨县| 仁化县| 保亭| 新乡县| 奇台县| 南充市| 平定县| 睢宁县| 宁陕县| 子洲县| 永年县| 惠州市| 沐川县| 桂平市|