среда, 22 апреля 2015 г.

Перший український Тестатон. Підсумки


Цими вихідними (18.04 - 19.04) було проведено Перший Український Тестатон. Дякуємо команді GoIT за організацію івенту. І, нарешті, настав час підвести підсумки. 

Чому варто було відвідати Тестатон?


По-перше,
Тестатон - це як хакатон, тільки для тестувальників (с), але не тільки...


Насправді, це захід, який від якого кожен може взяти те, що йому потрібно:
  •  тестувальникам не лише випробувати себе під тиском, познайомитися та допомогти українським молодим стартапам, а й отримати сторонній фідбек від професіоналів;
  • стартапам - протестувати продукт на різних системах, виявити невидимі для девелоперського ока дефекти та, можливо, отримати нових прихильників їхнього продукту.
По-друге,
насолодитися чудовомим краєвидом з 19 та 20го поверхів компанії Ciklum та познайомитися з такими ж кльовим людьми.

Що за стартапи?

Настав час відкрити цю таємницю для тих, хто так і не зміг цього разу взяти участь у Тестатоні. Першими двома відібраними стартапами стали:

Helper (iOS , Andoid) - он-лайновий консультаційний сервіс, де кожен учасник може як надати так і отримати консультацію від професіоналів, використовуючи месенджер та (відео-) дзвінки.

Pibox (Web) - соціалізован “хмарне” рішення для сумісного доступу до файлів та зберігання в середині Facebook.

Номінації та чемпіони:

Після довготривалого оцінювання, у кожній номінації Тестатону було визначено найкращого.
Наші переможці:

Igor Khovrichev - Best Web QA
Николай Левченко - Best iOS QA
Анна Надзуга - Best Android QA
Volodymyr Pershyn - Best Crasher
Виктория Нечаева - Best Quality Bug Report
Сергей Рудов - Most Valuable Web Bug
Денис Яременко - Most Valuable iOS Bug
Максим Филиппов - Most Valuable Android Bug
Та ті, хто відстав буквально на трошки:

Testathon Web Summary Results

Igor Khovrichev66.9
Берлинец Павел64.7
Pavel Potanin63.6
Яна Малецкая55.5
Ольга Чудинова52.7
Сергей Рудов51.3
Виктория Нечаева46.7
Владимир Глушков42.5
Ольга Шкурка41.6
Анастасия Шипко40.7
Алёна Мирошниченко38.2
Игорь Барановский31.1
Александр Ищенко 23.6
Sergey Pivenko22.7
Нагорняк Николай17.2
Жанна Бітюкова17.1
Igor Lavrynenko15.5
Виталий Мазурчук9.7
Сергей Иващенко9.4
Testathon Android Summary Results

Анна Надзуга32.9
Юлія Крамаренко32.4
Юлия Комарова30.1
Anna Polonska27
Ярослав Нагний25.1
Валентина Рашевская18.7
Валентина Лескова14.3
Максим Филиппов12.4
Vita Kucheruk1.5

Testathon iOS Summary Results

Николай Левченко46
Павел Бойко 45.6
Volodymyr Pershyn40.7
Денис Яременко39.4
Дима Голоцван23.4
Роман Бегун15.3
Ольга Макаревич15.1
Юлия Куприна8.2
Вита Омельченко3.5

Суддівський фідбек:

Загалом, судді залишилися задоволеними побаченими результатами. Та по завершенню заходу дали коротке інтервью, що заважало учасникам отримати найвищі бали та чого бракувало у описах дефектів.

Web

 Oleksii Burdin
Hе вистачало секьюріті багів. Були на HTML, була парочка на JS у те саме поле, але не було жодної навіть найпростішої SQL-ін’єкції. Якби була - присудили Best Security Bug б тому, хто її написав. Але це все не дотягує до повноцінного тестування безпеки. І ще ніхто чомусь не користався різними шаблонами і плагінами для пошуку багів, як наприклад чудовий плагін BugMagnet для Firefox та BugMagnet для Chrome. 

Georgii Kurtanidze
Часто можно было встретить завышение севирити, отсутствие или неполное описание окружения(ОС, браузер, версия браузера, разрешение экрана). Участники делали больше фокус на интерфейс, чем на функциональность. Частое отсутствие Actual и Expected Result. Добавляли мало скриншотов, в основном не более одного на баг.

Android

Oleg Kuzych
Наиболее частые ошибки на Андроиде были: завышение severity, отсутствие логов при crash (stack trace), не всегда был указан environment, вместо одного бага на первопричину, заводили несколько багов на следствие.



Oleksandr Maidaniuk
Буду лаконічно: завищення, а тільки в деяких випадках заниження Severity у багів; відсутність скріншотів та креш-репортів у деяких учасників; відсутність планування і фокусу тільки на основний функціонал; хотілося більшого використання інстументів для тестування (debugging, memory leaks, logs). Дуже приємно вразили кількість знайдених багів за лімітованих 5 годин часу.

iOS

Shevchenko Maryna
На жаль, мало хто зробив перед початком тестування Smoke, щоб побачити загальну картину. Складалося враження, що тільки декілька фіч протестовані добре, а інші взагалі - ні. Часто стикалися з завищеним северіті та доданими креш логами без степів. 



Vladimir Primakov
Большинство тестировщиков проводили тестирование от частного, а не от общего - по этой причине многие баги были попросту упущенны и отсутствовал полный охват тестируемого приложения. Встречалось, некоректное задание северити, отсутствие указания версии тестируемого продукта и выделения проблемных областей на скриншотах. Еще, к сожалению, акценты тестирования в большинстве случаев были  сделаны на второстепенном функционале.


Трошки фото для заздрощів ;)









В планах провести командний тестатон. Stay tuned! 

Комментариев нет:

Отправить комментарий