- •Глава 8. Тестирование принтеров и других устройств 208
- •Глава 9. Адаптационное тестирование 237
- •Глава 14. Управление группой тестирования 428
- •10 Тестирование программного обеспечения
- •Часть 1. Основы
- •Часть 2. Приемы и технологии тестирования
- •16 Тестирование программного обеспечения
- •Часть 3. Управление проектами и группами
- •22 Часть I: Основы
- •Глава I: Пример серии тестов
- •Глава 1: Пример серии тестов 23
- •24 Часть I: Основы
- •Глава 1: Пример серии тестов • 25
- •Глава I: Пример серии тестов 27
- •Глава 1: Пример серии тестов 29
- •Глава I: Пример серии тестов 31
- •36 Часть I: Основы
- •Глава 1: Пример серии тестов 37
- •Глава 2: Желаемое и действительное в жизни тестировщика 39
- •40 Часть I: Основы
- •Глава 2: Желаемое и действительное в жизни тестировщика 41
- •42 Часть I: Основы
- •Глава 2: Желаемое и действительное в жизни тестировщика
- •Глава 2: Желаемое и действительное в жизни тестировщика
- •Глава 2: Желаемое и действительное в жизни тестировщика 47
- •Глава 2: Желаемое и действительное в жизни тестировщика 49
- •Глава 3: Типы тестов ... 51
- •Глава 3: Типы тестов ... 53
- •Глава 3: Типы тестов ... 55
- •Глава 3: Типы тестов ... 57
- •Глава 3: Типы тестов ... 59
- •Глава 3: Типы тестов ... 61
- •62 Часть I: Основы
- •Глава 3: Типы тестов ... 63
- •64 Часть I: Основы
- •Глава 3: Типы тестов ... 65
- •66 Часть I: Основы
- •Глава 3: Типы тестов ... 67
- •68 Часть I: Основы
- •Глава 3: Типы тестов ... 69
- •If asc11_код__введенного_символа меньше 48
- •70 Часть I: Основы
- •Глава 3: Типы тестов ... 71
- •72 Часть I: Основы
- •Глава 3: Типы тестов ... 73
- •74 Часть I: Основы
- •Глава 3: Типы тестов ... 75
- •76 Часть I: Основы
- •Глава 3: Типы тестов ... 77
- •78 Часть I: Основы
- •Глава 3: Типы тестов ... 79
- •80 Часть I: Основы
- •Глава 3: Типы тестов ... 81
- •82 Часть I: Основы
- •Глава 3: Типы тестов ... 83
- •84 Часть I: Основы
- •Глава 3: Типы тестов ... 85
- •86 Часть I: Основы
- •Глава 3: Типы тестов ... 87
- •88 Часть I: Основы
- •Глава 3: Типы тестов ... 89
- •90 Часть I: Основы
- •Глава 3: Типы тестов ... 91
- •92 Часть I: Основы
- •Глава 4
- •94 Часть I: Основы
- •Глава 4: Программные ошибки 95
- •96 Часть I: Основы
- •Глава 4: Программные ошибки 97
- •98 Часть I: Основы
- •Глава 4: Программные ошибки 99
- •100 Часть I: Основы
- •102 Часть /: Основы
- •Глава 5: Документирование и анализ ошибок 103
- •104 Часть I: Основы
- •Глава 5: Документирование и анализ ошибок 105
- •106 Часть I: Основы
- •Глава 5: Документирование и аналт ошибок 107
- •108 Часть I: Основы
- •Глава 5: Документирование и анализ ошибок 109
- •110 Часть 1: Основы
- •Глава 5: Документирование и анализ ошибок 111
- •112 Часть I: Основы
- •Глава 5: Документирование и анализ ошибок 113
- •114 Часть I: Основы
- •Глава 5: Документирование и анализ ошибок 115
- •116 Часть I: Основы
- •Глава 5: Документирование и анализ ошибок 117
- •118 Часть I: Основы
- •Глава 5: Документирование и анализ ошибок 119
- •120 Часть I: Основы
- •Глава 5: Документирование и анализ ошибок 121
- •122 Часть I: Основы
- •Глава 5: Документирование и анализ ошибок 123
- •124 Часть I: Основы
- •Глава 5: Документирование и анализ ошибок 125
- •126 Часть I: Основы
- •Глава 5: Документирование и анализ ошибок 127
- •132 Часть II: Приемы и технологии тестирования
- •Глава 6: Система отслеживания проблем 131
- •Глава 6: Система отслеживания проблем 133
- •134 Часть II: Приемы и технологии тестирования
- •Глава 6: Система отслеживания проблем 135
- •136 Часть II: Приемы и технологии тестирования
- •Глава 6: Система отслеживания проблем 137
- •138 Часть II: Приемы и технологии тестирования
- •Глава 6: Система отслеживания проблем 139
- •140 Часть II: Приемы и технологии тестирования
- •Глава 6: Система отслеживания проблем 141
- •142 Часть II: Приемы и технологии тестирования
- •Глава 6: Система отслеживания проблем 143
- •144 Часть II: Приемы и технологии тестирования
- •Глава 6: Система отслеживания проблем 145
- •146 Часть II: Приемы и технологии тестирования
- •Глава 6: Система отслеживания проблем 147
- •148 Часть II: Приемы и технологии тестирования
- •Глава 6: Система отслеживания проблем 149
- •150 Часть II: Приемы и технологии тестирования
- •Глава 6: Система отслеживания проблем 151
- •152 Часть II: Приемы и технологии тестирования
- •Глава 6: Система отслеживания проблем 153
- •154 Часть II: Приемы и технологии тестирования
- •Глава 6: Система отслеживания проблем 155
- •156 Часть II: Приемы и технологии тестирования
- •Глава 6: Система отслеживания проблем 157
- •158 Часть II: Приемы и технологии тестирования
- •Глава 6: Система отслеживания проблем 159
- •160 Часть II: Приемы и технологии тестирования
- •Глава 6: Система отслеживании п/шч іс и | (} I
- •162 Часть II: Приемы и технологии тестирования
- •Глава 6: Система отслеживания проблем 163
- •164 Часть II: Приемы и технологии тестирования
- •Глава 6: Система отслеживания проблем 165
- •166 Часть II: Приемы и технологии тестирования
- •Глава 6: Система отслеживания проблем 167
- •168 Часть II: Приемы и технологии тестирования
- •Глава 6: Система отслеживания проблем 169
- •170 Часть II: Приемы и технологии тестирования
- •Глава 6: Система отслеживания проблем 171
- •172 Часть II: Приемы и технологии тестирования
- •Глава 6: Система отслеживания проблем 173
- •174 Часть II: Приемы и технологии тестирования
- •Глава 6: Система отслеживания проблем 175
- •176 Часть II: Приемы и технологии тестирования
- •Глава 6: Система отслеживания проблем 177
- •178 Часть II: Приемы и технологии тестирования
- •Глава 6: Система отслеживания проблем 179
- •Глава 7: Разработка тестов 181
- •Глава 7: Разработка тестов 183
- •184 Часть II: Приемы и технологии тестирования
- •Глава 7: Разработка тестов 185
- •Глава 7: Разработка тестов 187
- •188 Часть II: Приемы и технологии тестирования
- •Глава 1: Разработка тестов 189
- •190 Часть II: Приемы и технологии тестирования
- •Глава 7: Разработка тестов 191
- •192 Часть II: Приемы и технологии тестирования
- •Глава 1: Разработка тестов 193
- •194 Часть II: Приемы и технологии тестирования
- •Глава 7: Разработка тестов 195
- •196 Часть II: Приемы и технологии тестирования
- •Глава 7; Разработка тестов 197
- •198 Часть II: Приемы и технологии тестирования
- •Глава 7: Разработка тестов 199
- •Глава 7: Разработка тестов 201
- •Глава 7: Разработка тестов 203
- •204 Часть II: Приемы и технологии тестирования
- •Глава 7: Разработка тестов 205
- •206 Часть II: Приемы и технологии тестирования
- •Глава 7: Разработка тестов 207
- •Глава 8: Тестирование принтеров и других устройств 209
- •2. Затем осуществляется поиск ошибок, специфических для тестируемого класса устройств.
- •210 Часть II: Приемы и технологии тестирования
- •Глава 8: Тестирование принтеров и других устройств 211
- •212 Часть II: Приемы и технологии тестирования
- •1. Анализ рынка
- •Глава 8: Тестирование принтеров и других устройств 213
- •Глава 8: Тестирование принтеров и других устройств 215
- •Глава 8: Тестирование принтеров и других устройств 217
- •218 Часть II: Приемы и технологии тестирования
- •Глава 8: Тестирование принтеров и других устройств 219
- •220 Часть II: Приемы и технологии тестирования
- •Глава 8: Тестирование принтеров и других устройств 221
- •Глава 8: Тестирование принтеров и других устройств 223
- •Глава 8: Тестирование принтеров и других устройств 225
- •226 Часть п: Приемы и технологии тестирования
- •Глава 8: Тестирование принтеров и других устройств 227
- •228 Часть II: Приемы и технологии тестирования
- •Глава 8: Тестирование принтеров и других устройств 229
- •Глава 8: Тестирование принтеров и других устройств 231
- •232 Часть II: Приемы и технологии тестирования
- •Глава 8: Тестирование принтеров и других устройств 233
- •Глава 8: Тестирование принтеров и других устройств 235
- •236 Часть II: Приемы и технологии тестирования
- •Глава 9: Адаптационное тестирование 239
- •Глава 9: Адаптационное тестирование 241
- •242 Часть II: Приемы и технологии тестирования
- •Глава 9: Адаптационное тестирование 243
- •244 Часть II: Приемы и технологии тестирования
- •Глава 9: Адаптационное тестирование 245
- •246 Часть II: Приемы и технологии тестирования
- •Глава 9: Адаптационное тестирование 247
- •Глава 10: Тестирование документации 249
- •250 Часть II: Приемы и технологии тестирования
- •Глава 10: Тестирование документации 251
- •252 Часть II: Приемы и технологии тестирования
- •Глава 10: Тестирование документации 253
- •Глава 10: Тестирование документации 255
- •256 Часть II: Приемы и технологии тестирования
- •Глава 10: Тестирование документации 257
- •258 Часть II: Приемы и технологии тестирования
- •Глава 10: Тестирование документации 259
- •260 Часть II: Приемы и технологии тестирования
- •Глава 10: Тестирование документации 261
- •262 Часть II: Приемы и технологии тестирования
- •Глава 10: Тестирование документации 263
- •Глава 11: Инструментальные средства тестировщика 265
- •266 Часть II: Приемы и технологии тестирования
- •Глава 11: Инструментальные средства тестировщика 267
- •268 Часть п: Приемы и технологии тестирования
- •Глава 11: Инструментальные средства тестировщика 269
- •270 Часть II: Приемы и технологии тестирования
- •Глава 11: Инструментальные средства тестировщики 271
- •272 Часть II: Приемы и технологии тестирования
- •Глава 11: Инструментальные средства тестировщика 273
- •274 Часть II: Приемы и технологии тестирования
- •Глава 11: Инструментальные средства тестировщика 275
- •Глава 11: Инструментальные средства тестировщика 277
- •278 Часть II: Приемы и технологии тестирования
- •Глава 11: Инструментальные средства тестировщика 279
- •280 Часть II: Приемы и технологии тестирования
- •Глава 11: Инструментальные средства тестировщика 281
- •282 Часть II: Приемы и технологии тестирования I
- •Глава 11: Инструментальные средства тестировщика 283
- •Глава 12: Планирование и документация 285
- •286 Часть II: Приемы и технологии тестирования
- •Глава 12: Планирование и документации 287
- •288 Часть II: Приемы и технологии тестирования
- •Глава 12: Планирование и документация 289
- •290 Часть II: Приемы и технологии тестирования
- •Глава 12: Планирование и документация 291
- •292 Часть II: Приемы и технологии тестирования
- •Глава 12: Планирование и документация 293
- •294 Часть II: Приемы и технологии тестирования
- •Глава 12: Планирование и документация 295
- •296 Часть II: Приемы и технологии тестирования
- •Глава 12: Планирование и документация 297
- •298 Часть II: Приемы и технологии тестирования
- •Глава 12: Планирование и документации 299
- •300 Часть II: Приемы и технологии тестирования
- •Глава 12: Планирование и документация 301
- •302 Часть II: Приемы и технологии тестирования
- •Глава 12: Планирование и документация 303
- •304 Часть II: Приемы и технологии тестирования
- •Глава 12: Планирование и документация 305
- •306 Часть II: Приемы и технологии тестирования
- •Глава 12: Планирование и документация 307
- •308 Часть II: Приемы и технологии тестирования
- •Глава 12: Планирование и документация 309
- •310 Часть II: Приемы и технологии тестирования
- •Глава 12: Планирование и документация 311
- •312 Часть II: Приемы и технологии тестирования
- •Глава 12: Планирование и документация 313
- •314 Часть II: Приемы и технологии тестирования
- •Глава 12: Планирование и документация 315
- •316 Часть II: Приемы и технологии тестирования
- •Глава 12: Планирование и документация 319
- •Глава 12: Планирование и документация 321
- •322 Часть II: Приемы и технологии тестирования
- •Глава 12: Планирование и документация 323
- •324 Часть II: Приемы и технологии тестирования
- •Глава 12: Планирование и документация 325
- •326 Часть II: Приемы и технологии тестирования
- •Глава 12: Планирование и документация 327
- •330 Часть II: Приемы и технологии тестирования
- •332 Часть II: Приемы и технологии тестирования
- •Глава 12: Планирование и документация 333
- •334 Часть II: Приемы и технологии тестирования
- •Глава 12: Планирование и документация 335
- •336 Часть II: Приемы и технологии тестирования
- •338 Часть II: Приемы и технологии тестирования
- •Глава 12: Планирование и документация 339
- •340 Часть II: Приемы и технологии тестировании
- •Глава 12: Планирование и документация 341
- •342 Часть II: Приемы и технологии тестирования
- •Глава 12: Планирование и документация 343
- •344 Часть II: Приемы и технологии тестирования
- •Глава 12: Планирование и документация 345
- •346 Часть II: Приемы и технологии тестирования
- •Глава 12: Планирование и документация 347
- •348 Часть и: Приемы и технологии тестирования
- •Глава 12: Планирование и документация 349
- •350 Часть II: Приемы и технологии тестирования
- •Глава 12: Планирование и документация 351
- •352 Часть II: Приемы и технологии тестировании
- •Глава 12; Планирование и документация 353
- •Глава 13. Объединяющая
- •Глава 14. Управление группой тестирования
- •Глава 13: Объединяющая 359
- •360 Часть III: Управление проектами и группами
- •Глава 13: Объединяющая 361
- •362 Часть III: Управление проектами и группами
- •Глава 13: Объединяющая 363
- •364 Часть III: Управление проектами и группами
- •Глава 13: Объединяющая 365
- •366 Часть III: Управление проектами и группами
- •Глава 13: Объединяющая 367
- •368 Часть III: Управление проектами и группами
- •Глава 13: Объединяющая 369
- •Глава 13: Объединяющая 371
- •372 Часть III: Управление проектами и группами
- •Глава 13: Объединяющая 373
- •Глава 13: Объединяющая 381
- •382 Часть III: Управление проектами и группами
- •Глава 13: Объединяющая 383
- •384 Часть III: Управление проектами и группами
- •Глава 13: Объединяющая 385
- •386 Часть III: Управление проектами и группами
- •Глава 13: Объединяющая 387
- •388 Часть III: Управление проектами и группами
- •Глава 13: Объединяющая 389
- •390 Часть III: Управление проектами и группами
- •Глава 13: Объединяющая 391
- •392 Часть III: Управление проектами и группами
- •Глава 13: Объединяющая 393
- •394 Часть III: Управление проектами и группами
- •Глава 13: Объединяющая 395
- •396 Часть III: Управление проектами и группами
- •Глава 13: Объединяющая 397
- •398 Часть III: Управление проектами и группами
- •Глава 13: Объединяющая 399
- •402 Часть III: Управление проектами и группами
- •Глава 13: Объединяющая 403
- •404 Часть III: Управление проектами и группами
- •Глава 13: Объединяющая 405
- •406 Часть III: Управление проектами и группами
- •Глава 13: Объединяющая 407
- •408 Часть III: Управление проектами и группами
- •Глава 13: Объединяющая 409
- •410 Часть III: Управление проектами и группами
- •Глава 13: Объединяющая 411
- •412 Часть III: Управление проектами и группами
- •Глава 13: Объединяющая 413
- •414 Часть III: Управление проектами и группами
- •Глава 13: Объединяющая 415
- •416 Часть III: Управление проектами и группами
- •Глава 13: Объединяющая 417
- •418 Часть III: Управление проектами и группами
- •Глава 13: Объединяющая 419
- •420 Часть III: Управление проектами и группами
- •Глава 13: Объединяющая 421
- •422 Часть III: Управление проектами и группами
- •Глава 13: Объединяющая 423
- •Глава 13: Объединяющая 425
- •Глава 13: Объединяющая 427
- •Глава 14: Управление группой тестирования 429
- •Глава 14: Управление группой тестирования 431
- •Глава 14: Управление группой тестирования 433
- •Глава 14: Управление группой тестирования 435
- •Глава 14: Управление группой тестирования 437
- •Глава 14: Управление группой тестирования 439
- •Глава 14: Управление группой тестирования 441
- •Глава 14: Управление группой тестирования 443
- •Глава 14: Управление группой тестирования 445
- •Глава 14: Управление группой тестирования 447
- •Глава 14: Управление группой тестирования 449
- •Глава 14: Управление группой тестирования 451
- •484 Часть III: Управление проектами и группами
- •486 Часть III: Управление проектами и группами
- •488 Часть III: Управление проектами и группами
- •490 Часть III: Управление проектами и группами
- •492 Часть III: Управление проектами и группами
- •494 Часть III: Управление проектами и группами
- •496 Часть III: Управление проектами и группами
- •498 Часть III: Управление проектами и группами
- •500 Часть III: Управление проектами и группами
- •502 Часть III: Управление проектами и группами
- •504 Часть III: Управление проектами и группами
- •506 Часть III: Управление проектами и группами
- •508 Часть III: Управление проектами и группами
- •510 Часть III: Управление проектами и группами
- •512 Часть III: Управление проектами и группами
- •514 Часть III: Управление проектами и группами
- •516 Часть III: Управление проектами и группами
- •518 Часть III: Управление проектами и группами
- •520 Часть III: Управление проектами и группами
- •522 Часть III: Управление проектами и группами
- •524 Часть III: Управление проектами и группами
- •526 Часть III: Управление проектами и группами
- •528 Часть III: Управление проектами и группами
- •530 Часть III: Управление проектами и группами
- •532 Часть III: Управление проектами и группами
- •534 Часть III: Управление проектами и группами
- •536 Часть III: Управление проектами и группами
- •538 Часть III: Управление проектами и группами
- •542 Часть III: Управление проектами и группами
Глава 14: Управление группой тестирования 441
Вот несколько примеров того, что можно определить.
• Среднее количество циклов тестирования. Наш опыт показывает, что типичная программа достигает коммерчески приемлемого качества после восьми полных циклов тестирования. Однако эта оценка не универсальна — для некоторых продуктов могут потребоваться десятки циклов, а есть и такие простые программы, которые отлаживаются за несколько циклов.
• Длительность типичного цикла тестирования. Этот показатель имеет смысл только тогда, когда каждая версия программы или определенной ее части всегда проходит полный цикл тестирования. Если же новая версия программы поступает каждую неделю независимо от того, насколько протестирована предыдущая, данная оценка теряет смысл.
• Количество ошибок, документируемых за день одним тестировщиком. Если один тестировщик находит за день в среднем 5 ошибок и вы предполагаете, что всего в программе их будет найдено около 1000, значит, на ее тестирование потребуется 200 человеко-дней.
• Время тестирования одного устройства. При этом время настройки устройства следует учитывать отдельно.
• Количество страниц документации, проверяемых за один час.
Конечно, это время зависит от типа документации и целей ее проверки.
• Количество сообщений об ошибках, тестируемых за один час.
Сколько времени займет тестирование всего блока обработки ошибок?
• Часть (количество страниц) плана тестирования, выполняемая за один час. Сколько времени уйдет на выполнение всего плана?
Можно придумать и множество других примеров. Целый ряд показателей продуктивности программного обеспечения приводит в своей книге Джонс (Jones, 1991).
Собранные данные послужат убедительной аргументацией в переговорах с руководителем проекта. Оперируя конкретными цифрами, гораздо легче объяснить, почему для тестирования программного продукта потребуется не два цикла, как хотелось бы руководителю проекта, а восемь. Покажите, сколько времени занимает в среднем каждый цикл тестирования, и объясните почему. Благодаря такой обстоятельности вы сможете получить больше времени и персонала, а значит, обеспечить более спокойную работу с гораздо лучшими результатами.
Статистические данные о производительности персонала полезны, но только при правильном употреблении. Если вы попытаетесь использовать
442 Часть III: Управление проектами и группами
их для давления на подчиненных, утверждая, что они работают недостаточно быстро, ничего хорошего от этого не ждите. В частности, такой известный автор, как Деминг (Бегш^, 1982), решительно выступает против подобного использования собранной информации.
Если вы работаете в компании, где статистические данные о производительности труда могут быть использованы против отдельных тестировщиков, не собирайте эту информацию.
Определение и оценка каждой задачи
Прежде чем пытаться оценить общий объем необходимого тестирования, составьте полный список его задач. В этом списке ничто не должно быть упущено. Понятно, что составить такой список и оценить сроки выполнения каждой из задач не так-то просто, и одному человеку с этим не справиться. Вот хороший способ, как это сделать.
Попросите руководство выделить вам на день или два конференц-зал или большую комнату. Соберите вместе всех тестировщиков, которым предстоит работать над продуктом. Если проект невелик и программу будет тестировать один-единственный сотрудник, пригласите еще кого-нибудь, имеющего опыт тестирования и знающего продукт (возможно, того, кто тестировал его предыдущий выпуск). Принесите на собрание спецификацию, план тестирования, план тестирования предыдущего выпуска, руководства пользователя, заметки и любые другие материалы, которые помогут в определении задач.
Возьмите лист бумаги, запишите на нем все основные задачи тестирования и прикрепите его к стене. У вас может получиться 5, 10 или 20 крупных задач — едва ли больше. Затем для каждой из основных задач перечислите на отдельном листе бумаги все ее составляющие. Эти листы также развесьте по стенам. Некоторые из подзадач могут оказаться настолько сложны, что потребуют дальнейшего разбиения. Их составляющие тоже перечислите на отдельных листах. Придумав еще одну базовую задачу, вы будете дописывать ее в главный список, а затем брать новый лист бумаги и перечислять на нем все ее составляющие.
Когда все будет готово, можно начинать собрание. Вначале каждый сотрудник несколько раз обойдет комнату, переходя от списка к списку и дописывая в него новые элементы. Каждый должен увидеть, что дописали другие, и убедиться, что больше добавить нечего.
Собрание должно проводиться по принципу мозгового штурма. Его первая цель — собрать максимум идей. Поэтому пока не критикуйте ни одну из них. Пусть все, что приходит людям в голову, попадет на бумагу. Отобрать правильные идеи вы сможете позднее.
