Как мы приручили демона или процесс тестирования демонов в Badoo

Как мы приручили демона или процесс тестирования демонов в Badoo

badoo

- > 300 млн. пользователей

badoo

- > 300 млн. пользователей- 46 языков

badoo

- > 300 млн. пользователей- 46 языков- 190 стран

badoo


С технической точки зрения это:

- 3 000 000+ строк кода

badoo



- 3 000 000+ строк кода- 3 000+ серверов

badoo



- 3 000 000+ строк кода- 3 000+ серверов- 25+ демонов

badoo



- 3 000 000+ строк кода- 3 000+ серверов- 25+ демонов- 8500+ тестов демонов

Роль демонов в badoo

Что такое демон?



бинарь



бинарь

конфиг



бинарь

конфиг

расширения



бинарь

конфиг

расширения

снапшоты


Форматы общения с демоном:

- текст



- текст - protobuf



- текст - protobuf- json


Режимы работы демонов:

- multi-shards- multi-nodes


multi-shards

PID-1

PID-2

<...>

PID-N


multi-nodes

PID-(M+1)

PID-(M+2)

<...>

PID-1

PID-2

<...>

PID-MPID-N


- Encounters


- Encounters- Asearch


- Encounters- Asearch- Bumpd


- Encounters- Asearch- Bumpd- GeoBorder


- Encounters- Asearch- Bumpd- GeoBorder- CT

111100011010010100101100000110

11100000000000000001


- Encounters- Asearch- Bumpd- GeoBorder- CT- Trustd-Loader



Процесс разработки и тестирования




OPEN


OPEN IN PROGRESS


OPEN IN PROGRESS


OPEN IN PROGRESS ON REVIEW



IN BRANCH QA



IN BRANCH QA


- Демона не тестировали- Только внешние проверки


- Демона не тестировали- Только внешние проверки


- black-box


- black-box- конфигурационное тестирование


- black-box- конфигурационное тестирование- интеграционное тестирование


- black-box- конфигурационное тестирование- интеграционное тестирование- системное тестирование


- black-box- конфигурационное тестирование- интеграционное тестирование- системное тестирование- фаззинг


- Подготовка


- Подготовка- Тест


- Подготовка- Тест- Завершение



IN BRANCH QA



IN BRANCH QA

Regression Tests



IN BRANCH QANew Tests Regression

Tests



IN BRANCH QA

TO MERGE

New Tests Regression Tests



IN BRANCH QA

IN BUILD TO MERGE




IN BRANCH QA

IN BUILD - OK IN BUILD TO MERGE




IN BRANCH QA

IN BUILD - OK IN BUILD TO MERGE


ON PRODUCTION


- Режимы- Настройки


- Режимы- debug


- Режимы- debug- docker


- Режимы- debug- docker- valgrind- helgrind


- Режимы- debug- docker- valgrind- helgrind- scripts


- Режимы- debug- docker- valgrind- helgrind- scripts- showcmd


- Режимы- debug- docker- valgrind- helgrind- scripts- showcmd- keep-daemon


- Режимы- debug- docker- valgrind- helgrind- scripts- showcmd- keep-daemon- use-launched-daemon


- Настройки- host- port


- Настройки- host- port- system user


- Настройки- host- port- system user- paths (bin, conf, proto/so, etc.)

Docker

Docker. Изолированность

1 машина для тестирования демонов







много демонов


пример лога



$ docker port <container_name> <internal_port>

Docker. Интеграционное тестирование111100011010010100101100000110

11100000000000000001

Utils. Logger

- действия до запуска демона

Utils. Logger

- действия до запуска демона- действия после остановки демона

Utils. Logger


Utils. Logger


чт слчлс

Utils. Logger


Utils. Logger

- Логирование исполняемых команд

Utils. Logger

- Логирование исполняемых команд- Логирование взаимодействия с демоном

Utils. Logger

- Логирование исполняемых команд- Логирование взаимодействия с демоном- Логирование работы с БД

Utils. Scripts

пример скрипта

Utils. Scripts

- php script.php- Данные, что и при фейле- Артефакты в ТС

Utils. Cleaners

Utils. Cleaners

Utils. Cleanersотслеживаются брошенные

демона


демона

отслеживаются брошенные контейнеры


демона


удаляются старые рабочие папки


демона


удаляются старые рабочие папки

чистится БД

Utils. Failures stats

Utils. Failures stats

Utils. Documentation

Utils. Documentation

Резюмируя

- Обнаруживать проблему на самых ранних этапах

Резюмируя

- Обнаруживать проблему на самых ранних этапах- Полноценный цикл CI

Резюмируя

- Обнаруживать проблему на самых ранних этапах- Полноценный цикл CI- Гибкий фреймворк и утилиты

- Быстрое добавление новых тестов- Легкое воспроизведение проблемы

Спасибо за внимание

Антон Волков

[email protected]

Badoo Development

tech.badoo.com

habrahabr.ru/company/badoo/

bit.ly/2058FhM

QAApi

mailto:[email protected]

mailto:[email protected]

http://tech.badoo.com

http://tech.badoo.com

http://habrahabr.ru/company/badoo/

http://habrahabr.ru/company/badoo/

http://bit.ly/2058FhM

http://bit.ly/2058FhM

Education

Как мы приручили демона или процесс тестирования демонов в Badoo