Java осень 2013 лекция 5-1

Углубленное программирование

на JavaЛекция 5 / 1

«QA и всё такое»

Александр Акбашев

Saturday, October 19, 13

О себе

2005-2011 МГТУ им. Баумана - магистр

2011- ? МГТУ им.Баумана - аспирант

2011 - 2013 Open University Skolkovo

Образование:

2011 - Mail.Ru Games (Allods Team)Ключевой поворот:

Senior QA Engineer, команда сервера Skyforge

Содержание лекции

1. Контроль качества разрабатываемого программного обеспечения

2. Юнит-тесты

3. Функциональные тесты

4. Нагрузочные тесты

5. Профилирование: сервера, памяти, контента

Критерии качества разрабатываемого ПО

Оценка качества разрабатываемого ПО

Формальные проверки

Не волнуйтесь, если что-то не работает. Если бы всё работало, вас бы уволили.

Mosher’s Law of Sostware Engineering

Тестирование

Черный ящик Белый ящик

ничего не знаем знаем всё

QA/тестировщики разработчики

Unit тесты

Виды тестов

Пишут все программисты

Перед коммитом изменения проверяются самим программистом

После коммита изменения проверяются системой CI

Метрика - покрытие кода тестами

Функциональные тесты

Пишутся для ключевых элементов

Проверяют, что сервер запускается и аватар может убить моба программистом

Нагрузочное тестирование

Проверяют, выдерживает ли сервер заявленное число пользователей

Выявление наиболее популярных и наиболее редких багов

Метрика - максимальное число пользователей в один момент времени (CCU)

Лучше написать и выполнить неполные тесты, чем не выполнить полные.

Мартин Фаулер

UnitTest

Проверка отдельных модулей

UnitTest

Безопасный рефакторинг

UnitTest

Совместимость модулей

UnitTest

Mock-объекты для тестов

UnitTest

Mock-объекты для тестов

UnitTest

Защита от повторения ошибок

UnitTest

Test Driven Development

Hello, world!

UnitTest

Среда тестирования: JUnitВ IDEA: Navigate -> Test

public class simpleTest { @Before public void setUp() throws Exception { }

@After public void tearDown() throws Exception { }

@Test public void test() { fail("Not yet implemented"); }}

Простейший Unit тест

UnitTest

public class Math { private int a; private int b;

public Math (int a, int b) { this.a = a; this.b = b; }

public int getSum() { return this.a + this.b; }

public int getDiv() { return this.a % this.b; }}

public class simpleTest { private Math math; private int a = 3; private int b = 1; @Before public void setUp() throws Exception { math = new Math(a, b); } @Test public void testGood() { assertEqual(a+b, math.getSum()); } @Test public void testBad() { assertEqual(a/b, math.getDiv()); }

Какие Unit тесты нужны вам?

UnitTest

Mock Frontend

Page Generator

Балансировщик

Message System

<groupId>org.mockito</groupId>

<artifactId>mockito-all</artifactId>

</dependency>

Устанавливаем Mockito

UnitTest

FunctionalTest

Необходимое, но недостаточное условие работоспособности.

Практика

Функциональное тестирование

FunctionalTest

Реализует ли требуемый функционал

Поднимается ли сервер?

Можно ли зайти в игру?

Можно ли играть?

Ручное тестирование должно быть более глубоким

Selenium

FunctionalTest

Без единой строки кода (plugin Firefox)

Много кода на Java

Быстро

Слабо контролируемо

Несерьезно

Не так быстро

Полный контроль

Путь джедая

Установка Selenium

FunctionalTest

<groupId>org.seleniumhq.selenium</groupId>

<artifactId>selenium-java</artifactId>

</dependency>

Схема работы теста

FunctionalTest

Вход на страницу

Заполнение формы

Отправка

Получение IDWin!

Реализация тестирования аутентификации

FunctionalTest

public void testLogin(@NotNull String url,@NotNull String username,@NotNull String password) {

WebDriver driver = new HtmlUnitDriver(true); driver.get(url); // Find the text input element by its name WebElement element = driver.findElement(By.name(“userName")); element.sendKeys(username); WebElement element = driver.findElement(By.name(“password")); element.sendKeys(password);

// Now submit the form. WebDriver will find the form for us from the element element.submit();

// Wait for the page to load, timeout after 10 seconds (new WebDriverWait(driver, 10)).until(new ExpectedCondition<Boolean>() { @Override @NotNull public Boolean apply(@NotNull WebDriver d) { final int id = d.findElement(By.name(“id”)); return id != 0; } }); driver.quit();

Домашнее задание

FunctionalTest

завести тест с помощью Selenium

3 unit теста на каждый разработанный модуль

LoadTest

[robic]: привет, нужно просетапить сервер чтоб держал нагрузку

[robic]: нужен mysql и apache

[ad_minic]: какая нагрузка?

[robic]: большая

[ad_minic]: круто

[ad_minic]: тогда ставь большой апач и большой мускуль на большой сервер

bash.org

LoadTest

Моделирование

Ожидаемое использование

LoadTest

Нескольких пользователей

LoadTest

Одновременно

Как происходит?

LoadTest

Формируется список активностей гейммеханики

Формируются параметры игрового дизайна

Реализуется бот

Проводится испытание

Анализируются результаты

Список активностей гейммеханики

LoadTest

Танк должен ехать вправо/влево/вниз/вверх

Танк должен стрелять

Танк должен умирать

Параметры игрового дизайна

LoadTest

Танк должен ехать 4 секунды из 5

Танк должен стрелять раз в 5 секунд

Танк должен умирать раз в 10 секунд

Танк НЕ обязан делать это осознанно

Проводится испытание

LoadTest

Час

Два

8 часов

Сутки

Неделю

Рекомендуемые инструменты

LoadTest

jMeter

LoadBalancer

Yandex-tanki

Анализируются результаты

LoadTest

1. Потребление CPU, %

2. Диск (iowait)

3. Сеть, Mb/s

4. Время отклика, ms

5. CCU, users

6. Load, parrots

7. Использование памяти, МБ

TextHi

ghload

Быкова

CCU, users

LoadTest

private Map<Integer, Avatar> avatars = new HashMap<>();

public final int getTotalAvatars() { return avatars.size();}

Server FPS

LoadTest

Инициализация

Обработка данных

Обновление состояния

Освобождение ресурсов

Входные данные

Выходные данные

Тик сервера

Load [parrots]

LoadTest

public void run () { while(true) { msgSystem.execForAbonent(this); Thread.sleep(100); // фиксированное время ожидания потока }}

private static final int TICK_TIME = 20; public void run () { while(true) { long startTime = System.currentTimeMillis(); msgSystem.execForAbonent(this); int deltaTime = System.currentTimeMillis() - startTime; float load = deltaTime / TICK_TIME; if (load < 1) // динамическое время ожидания потока Thread.sleep( TICK_TIME - deltaTime ); }}

Многопоточность

LoadTest

Не спать вредно

Много спать тоже вредно

Чем больше нагрузка на CPU, тем лучше

Нагрузка на процессор

LoadTest

Нагрузка на процессор

LoadTest

Память

LoadTest

long free = Runtime.getRuntime().freeMemory();long max = Runtime.getRuntime().maxMemory();

Углубленное программирование

на JavaЛекция 5 / 2

«Вся правда о GC»

Александр Акбашев

Garbage Collector

Если бы в Java действительно работала сборка мусора, большинство программ бы удаляли сами себя при первом

же запуске.Robert Sewell

Garbage Collector

Garbage collector (GC)

Типы ссылок

Поиск недостежимых объектов

Освобождение памяти Stack Heap

Strong references

Weak references

Sost references

Phantom references

Strong ReferencesОбъект не удаляется

Garbage Collector

Sost References

Объект удаляется...если нужна памятьУчитывает количество ссылок

Используется для memory-sensitive cache

new SostReference(T obj);

Garbage Collector

Weak References

Атомарно очищает все слабые ссылки на объект

Если надо, помещает объекты на финализацию

Перед использовать - проверять на NULL

WeakHashMap

new WeakReference(T obj);

Garbage Collector

Объект удаляется

Phantom References

Не использовать в домашних условиях

Garbage Collector

Немного о потреблении памяти

Garbage Collector

Permanent Generation

HotSpot JVM

-XX:PermSize -XX:MaxPermSize

Old Generation New Generation

Eden Survivor Survivor

-Xms -Xmx

Garbage Collector

Eden Survivor

Copy Collection

Mark-compact algorithm

Garbage Collector

Что делать? Как настраивать?

Garbage Collector

jvisualvm входит в JDK

Домашнее задание

Итого

MemoryUsage

http://www.highcharts.com/

http://www.oracle.com/

Спасибо за внимание

Акбашев Александр, a.akbashev@corp.mail.ru

1. Refactor -> Extract -> Interface

2. Public methods

getAddress

doPost

3. @Mock

Простейший Mock для Frontend

UnitTest

Java осень 2013 лекция 5-1

Education

Java осень 2012 лекция 5

Web осень 2013 лекция 1

Web осень 2013 лекция 2

Java осень 2013 лекция 6

C++ осень 2012 лекция 5

C++ осень 2013 лекция 1

Web осень 2012 лекция 3

Web осень 2012 лекция 9

Web осень 2013 лекция 3

Highload осень 2012 лекция 1

Web осень 2013 лекция 5

Java осень 2013 лекция 8

АиСД осень 2012 лекция 11

Тестирование осень 2013 лекция 2

Web осень 2012 лекция 4

C++ осень 2013 лекция 5

Java осень 2012 лекция 4

Java осень 2013 лекция 1-1

Java осень 2012 лекция 9

Web осень 2013 лекция 8