Лекция по оценке времени в QA для инженеров Wargaming.

1. Оценка задач для
котиков
!
!
!
!
!
Слава Лукьяненко

2. Про что поговорим?
Зачем нужны оценки?
Как не надо и как лучше?
Методики?
Что если оценка неверна?

3. Немного о Хаосе

4. Но почему?
Если вы провалили планирование - вы
запланировали провал.

5. Но почему?
Оценка важна для бизнеса:
Время = деньги
Оценка важна для синхронизации работ
в команде
Оценка важна для будущих проектов
Оценка важна для самоорганизации

6. Как не надо и как лучше

7. Как не надо 1

8. Как не надо 1
Группа A
Оригинальная спецификация
456 часов
Группа Б
Оригинальная спецификация,
с
указанием ,
что
оценка
постановщика – 500 часов
555 часов
Группа С
Оригинальная спецификация,
с
указанием ,
что
оценка
постановщика – 50 часов
99 часов

9. Как не надо 2

10. Как не надо 2
Группа A
Оригинальная спецификация объем
в 20 страниц
117 часов
Группа Б
Та
же
спецификация
но
с
увеличенным
форматированием
(~30 cтраниц)
173 часа

11. Как не надо 3

12. Как не надо 3
“В этот раз (версию/спринт) мы будем
работать более эффективно”
“Если проектом грамотно управлять, то
можно сделать быстрее”
“Вот внедрим эту технологию и можно
будет протестировать в 2 раза
быстрее”

13. Как не надо 4

14. Как лучше 1

15. Как лучше 2

16. Как лучше 3
Помните про риски
!
!

17. Как лучше 4
Помните про риски, о которых вы
ничего не знаете
!
!

18. Как лучше 5
Договоритесь со всеми
заинтересованными людьми
!
!

19. Простые методики

20. Интуитивная оценка

21. Интуитивная оценка
Сколько станций метро в Лондоне?
Какой средний срок беременности у осла
(в днях)?
Какова температура плавления золота?
Сколько составили сборы фильма «Dark
Knight Rises» в мире?

22. Интуитивная оценка
Сколько станций метро в Лондоне?
270
Какой средний срок беременности у осла
(в днях)? - 348
Какова температура плавления золота? 1063
Сколько составили сборы фильма «Dark
Knight Rises» в мире? - 1,084 млрд. $

23. Интуитивная оценка
СЧИТАЕМ ТОЧНОСТЬ ОЦЕНКИ:
Dev = 100-|Eo-Er|/(Er+Eo)*100

24. Интуитивная оценка
Быстро, просто, удобно
Неплохо работает в спокойных проектах
Дикие отклонения в больших проектах

25. Оценка по аналогии

26. Оценка по аналогии
Сколько станций метро в Токио?
Какой средний срок беременности у зебры
(в днях)?
Какова температура плавления меди?
Сколько составили сборы фильма «Iron
Man 3» в мире?

27. Оценка по аналогии
Сколько станций метро в Токио?
290
Какой средний срок беременности у зебры
(в днях)? - 361
Какова температура плавления меди? 1083,4
Сколько составили сборы фильма «Iron
Man 3» в мире? - 1,215 млрд. $

28. Оценка по аналогии
СЧИТАЕМ ТОЧНОСТЬ ОЦЕНКИ:
Dev = 100-|Eo-Er|/(Er+Eo)*100

29. Оценка по аналогии
Требует наличия предыдущего опыта и
оценок (и чем их больше, тем точнее
оценка)
Не применима для принципиально новых
проектов и предметных областей
Хорошо работает на малых и средних
проектах
Опыт предыдущих проектов может быть
неосознанно нерелевантным

30. Экспертная оценка

31. Экспертная оценка
Сколько станций метро в Москве?
Какой средний срок беременности у
человекообразной гориллы(в днях)?
Какова температура плавления бензола?
Сколько составили сборы фильма
«Avengers» в мире?

32. Экспертная оценка
Сколько станций метро в Москве?
190
Какой средний срок беременности у
человекообразной гориллы(в днях)? 260
Какова температура плавления бензола? 5,5
Сколько составили сборы фильма «Avengers»
в мире? 1,518 млрд. $

33. Экспертная оценка
СЧИТАЕМ ТОЧНОСТЬ ОЦЕНКИ:
Dev = 100-|Eo-Er|/(Er+Eo)*100

34. Экспертная оценка
Можно оценивать любые проекты и вещи (был
бы эксперт)
Нужен тот самый эксперт
Очень сильно зависит от человеческого
фактора (устал, забыл, забил, запил)
Риск “игнорирования” рисков

35. PERT
Program Evaluation Review Technique

36. Немного формул
Берем три экспертных оценки срока:
!
MIN
- «раньше не справлюсь точно, даже если
повезет»
MAX
- «успею гарантированно, даже если все
риски сыграют»
NORM
– «наиболее вероятно успею»

37. Немного формул
PERT Estimation:
µ =( MIN + 4NORM + MAX )/6
PERT Deviation:
σ = ( MAX – MIN )/6
Expected Time = μ+σ

38. Что это дает?
➢ Длительность
задачи - случайная
величина, имеющая
бета-распределение.
!
➢ Между крайними
оценками – 6 сигм
!
➢Вероятность
попадания в оценку:
72%

39. PERT
Сколько станций метро в Ташкенте?
Какой средний срок беременности у рыси (в
днях)?
Какова температура плавления платины?
Сколько составили сборы фильма «Сумерки»
в мире?

40. PERT
Сколько станций метро в Ташкенте?
29
Какой средний срок беременности у рыси (в
днях)? 72
Какова температура плавления платины?1772
Сколько составили сборы фильма «Сумерки»
в мире? 392 млн $

41. PERT
СЧИТАЕМ ТОЧНОСТЬ ОЦЕНКИ:
Dev = 100-|Eo-Er|/(Er+Eo)*100

42. PERT
Хорошо применяется для неопределенных задач
Довольно высокая вероятность верной оценки
Есть возможности модифицировать методику и
получить более точную оценку без
дополнительных трудозатрат ;)

43. Метрики
If you cannot measure it, you cannot manage it.

44. Метрики
Эффективность оценки: Er/Eo
Сработавшие риски: ΣEп
Поточность задач
Персонализация затрат
If you cannot measure it, you cannot manage it.

45. Проверка оценки
Используем результаты, полученные
разными методиками
Используем метрики и прошлые данные
Используем здравый смысл

46. А если Ж*ПА?

47. Варианты…
Добавить ресурсов
Повысить интенсивность труда
Дотестировать что сможем
Засунуть голову в песок

48. Первым делом

49. А если подумать
Мозговой штурм - вместе с командой!
“Срываем низко висящие плоды”
Тестируем то что нужно.
Привлекаем, но только экспертов!
Заручаемся поддержкой руководства
Проводим ретроспективу по факту

50. Вопросы?
!
!
!
!
!
!
!
Слава Лукьяненко
v_lukyanenka@wargaming.net

51. В следующей
серии
Модифицированный PERT
!
Метод критического пути
!
Метод функциональных точек
!
COCOMO II