Как быстро время летит. В прошлом году мы только допиливали виртуальную АТС RingCloud и пробовали сделать хороший бета-тест перед запуском решения в продакшен. Мне кажется у нас получилось. Под катом — инфографика, раздача айпадов тестерам и довольные фотографии (даже из Берлина на фоне Рейхстага!!!).

19 августа 2014 года мы объявили о старте бета-тестирования нашей виртуальной АТС.

Целью данного бета-тестирования являлся сбор информации об ошибках и недочётах, которые были допущены в процессе разработки. Бета-тестирование велось по трём направлениям, которые интересовали компанию в плане качественного исполнения.

· Тестирование юзабилити;

· Тестирование SIP-взаимодействия;

· Тестирование безопасности решения.

Тестировщиков мы искали через социальные сети, рекламу и статьи на специализированных сайтах. Призом в каждой номинации объявлялсяnApple IPad 3. Победителем становился тот, кто обнаружил больше всех ошибок.

Мы зафиксировали 272 регистрации в системе для тестирования. Но, в итоге, в системе зарегистрировалось 117 тестеров. Для участников была разработана схема действий, по которой они тестировали нашу виртуальную АТС.

Тестировщики работали удаленно. Специально для участия в бета-тестировании, мы настроили нашу систему по приёму заявок о неисправностях. Всё, что требовалось от участников, это отправить письмо нам на специальный почтовый адрес.

Датой окончания бета-тестирования стало 5 сентября 2014 года, а итоги были подведены 12 сентября.

В каждой номинации нам отправляли ошибки и неисправности системы. По юзабилити нам отправили 20 тестеров, по подключению -6 человек и по безопасности — 2.

В итоге нами получено 228 ошибок, 98 из которых принято в работу.

В номинации Юзабилити развернулась настоящая борьба между участниками, вплоть до самого последнего дня тестирования. Больше всех ошибок прислали нам: Екатерина Артомонова, Рыжиков Денис и Александр Богомолов.

Между ними наша команда разработчиков и выбирала победителя. Определиться с победителем было сложно. Все участники подошли к тестированию креативно, проявили творческий подход к анализу интерфейса и помогли нам сделать интерфейс еще более простым и понятным. По итогам тестирования, Apple iPad мы вручили Екатерине Артомоновой, которая внесла наиболее весомый вклад в улучшение юзабилити нашей виртуальной АТС.

В ходе тестирования безопасности нашей системы были проверены многие аспекты, было совершено множество попыток взлома нашими бета-тестерами, за что им огромное спасибо. Наиболее активными участниками в данной номинации были: Станислав Еремин и Локтионов Лев.

Из всего разнообразия тестируемых уязвимостей хотелось бы выделить попытки bruteforcing и SQL-injection атак, хоть они и не привели к результату, но всё же дали нам понять, что мы движемся в верном направлении. За данный вид атак хотелось бы особо поблагодарить Станислава Еремина, который очень профессионально подошёл к вопросу, а также указал нам немало XSS уязвимостей, проблем безопасности при регистрации и CSRF уязвимости, за что мы и вручили ему Apple iPad. Самое интересное, что за время бета-теста Станислав переехал в Европу для реализации нового проекта, но мы сдержали своё слово и доставили подарок в Берлин!

Потому что для виртуальной АТС RingCloud не существует границ. Спасибо за внимание!

Автор: Yud_SS

Источник