Цими вихідними (18.04 - 19.04) було проведено Перший Український Тестатон. Дякуємо команді GoIT за організацію івенту. І, нарешті, настав час підвести підсумки.
Чому варто було відвідати Тестатон?
По-перше,
Тестатон - це як хакатон, тільки для тестувальників (с), але не тільки...
Насправді, це захід, який від якого кожен може взяти те, що йому потрібно:
- тестувальникам не лише випробувати себе під тиском, познайомитися та допомогти українським молодим стартапам, а й отримати сторонній фідбек від професіоналів;
- стартапам - протестувати продукт на різних системах, виявити невидимі для девелоперського ока дефекти та, можливо, отримати нових прихильників їхнього продукту.
По-друге,
насолодитися чудовомим краєвидом з 19 та 20го поверхів компанії Ciklum та познайомитися з такими ж кльовим людьми.
Що за стартапи?
Настав час відкрити цю таємницю для тих, хто так і не зміг цього разу взяти участь у Тестатоні. Першими двома відібраними стартапами стали:
- Helper (iOS , Andoid) - он-лайновий консультаційний сервіс, де кожен учасник може як надати так і отримати консультацію від професіоналів, використовуючи месенджер та (відео-) дзвінки.
- Pibox (Web) - соціалізован “хмарне” рішення для сумісного доступу до файлів та зберігання в середині Facebook.
Номінації та чемпіони:
Після довготривалого оцінювання, у кожній номінації Тестатону було визначено найкращого.
Наші переможці:
Igor Khovrichev - Best Web QA
Николай Левченко - Best iOS QA
Анна Надзуга - Best Android QA
Николай Левченко - Best iOS QA
Анна Надзуга - Best Android QA
Volodymyr Pershyn - Best Crasher
Виктория Нечаева - Best Quality Bug Report
Виктория Нечаева - Best Quality Bug Report
Сергей Рудов - Most Valuable Web Bug
Денис Яременко - Most Valuable iOS Bug
Максим Филиппов - Most Valuable Android Bug
Денис Яременко - Most Valuable iOS Bug
Максим Филиппов - Most Valuable Android Bug
Та ті, хто відстав буквально на трошки:
Testathon Web Summary Results
Testathon Web Summary Results
| Igor Khovrichev | 66.9 |
| Берлинец Павел | 64.7 |
| Pavel Potanin | 63.6 |
| Яна Малецкая | 55.5 |
| Ольга Чудинова | 52.7 |
| Сергей Рудов | 51.3 |
| Виктория Нечаева | 46.7 |
| Владимир Глушков | 42.5 |
| Ольга Шкурка | 41.6 |
| Анастасия Шипко | 40.7 |
| Алёна Мирошниченко | 38.2 |
| Игорь Барановский | 31.1 |
| Александр Ищенко | 23.6 |
| Sergey Pivenko | 22.7 |
| Нагорняк Николай | 17.2 |
| Жанна Бітюкова | 17.1 |
| Igor Lavrynenko | 15.5 |
| Виталий Мазурчук | 9.7 |
| Сергей Иващенко | 9.4 |
Testathon Android Summary Results
| Анна Надзуга | 32.9 |
| Юлія Крамаренко | 32.4 |
| Юлия Комарова | 30.1 |
| Anna Polonska | 27 |
| Ярослав Нагний | 25.1 |
| Валентина Рашевская | 18.7 |
| Валентина Лескова | 14.3 |
| Максим Филиппов | 12.4 |
| Vita Kucheruk | 1.5 |
Testathon iOS Summary Results
| Николай Левченко | 46 |
| Павел Бойко | 45.6 |
| Volodymyr Pershyn | 40.7 |
| Денис Яременко | 39.4 |
| Дима Голоцван | 23.4 |
| Роман Бегун | 15.3 |
| Ольга Макаревич | 15.1 |
| Юлия Куприна | 8.2 |
| Вита Омельченко | 3.5 |
Суддівський фідбек:
Загалом, судді залишилися задоволеними побаченими результатами. Та по завершенню заходу дали коротке інтервью, що заважало учасникам отримати найвищі бали та чого бракувало у описах дефектів.
Web
Hе вистачало секьюріті багів. Були на HTML, була парочка на JS у те саме поле, але не було жодної навіть найпростішої SQL-ін’єкції. Якби була - присудили Best Security Bug б тому, хто її написав. Але це все не дотягує до повноцінного тестування безпеки. І ще ніхто чомусь не користався різними шаблонами і плагінами для пошуку багів, як наприклад чудовий плагін BugMagnet для Firefox та BugMagnet для Chrome.
Часто можно было встретить завышение севирити, отсутствие или неполное описание окружения(ОС, браузер, версия браузера, разрешение экрана). Участники делали больше фокус на интерфейс, чем на функциональность. Частое отсутствие Actual и Expected Result. Добавляли мало скриншотов, в основном не более одного на баг.
Android
Наиболее частые ошибки на Андроиде были: завышение severity, отсутствие логов при crash (stack trace), не всегда был указан environment, вместо одного бага на первопричину, заводили несколько багов на следствие.
Буду лаконічно: завищення, а тільки в деяких випадках заниження Severity у багів; відсутність скріншотів та креш-репортів у деяких учасників; відсутність планування і фокусу тільки на основний функціонал; хотілося більшого використання інстументів для тестування (debugging, memory leaks, logs). Дуже приємно вразили кількість знайдених багів за лімітованих 5 годин часу.
iOS
На жаль, мало хто зробив перед початком тестування Smoke, щоб побачити загальну картину. Складалося враження, що тільки декілька фіч протестовані добре, а інші взагалі - ні. Часто стикалися з завищеним северіті та доданими креш логами без степів.
Большинство тестировщиков проводили тестирование от частного, а не от общего - по этой причине многие баги были попросту упущенны и отсутствовал полный охват тестируемого приложения. Встречалось, некоректное задание северити, отсутствие указания версии тестируемого продукта и выделения проблемных областей на скриншотах. Еще, к сожалению, акценты тестирования в большинстве случаев были сделаны на второстепенном функционале.
Трошки фото для заздрощів ;)
В планах провести командний тестатон. Stay tuned!
Комментариев нет:
Отправить комментарий