Java осень 2013 лекция 5-1

Углубленное программирование

на JavaЛекция 5 / 1

«QA и всё такое»

Александр Акбашев

Saturday, October 19, 13

О себе

2

2005-2011 МГТУ им. Баумана - магистр

2011- ? МГТУ им.Баумана - аспирант

2011 - 2013 Open University Skolkovo

Образование:

2011 - Mail.Ru Games (Allods Team)Ключевой поворот:

Senior QA Engineer, команда сервера Skyforge


Содержание лекции

3

1. Контроль качества разрабатываемого программного обеспечения

2. Юнит-тесты

3. Функциональные тесты

4. Нагрузочные тесты

5. Профилирование: сервера, памяти, контента


QA

4

Критерии качества разрабатываемого ПО

Оценка качества разрабатываемого ПО

Формальные проверки

Не волнуйтесь, если что-то не работает. Если бы всё работало, вас бы уволили.

Mosher’s Law of Sostware Engineering


Тестирование

5

Черный ящик Белый ящик

ничего не знаем знаем всё

QA/тестировщики разработчики


Unit тесты

Виды тестов

6

Пишут все программисты

Перед коммитом изменения проверяются самим программистом

После коммита изменения проверяются системой CI

Метрика - покрытие кода тестами


Функциональные тесты


7

Пишутся для ключевых элементов

Проверяют, что сервер запускается и аватар может убить моба программистом


Нагрузочное тестирование


8

Проверяют, выдерживает ли сервер заявленное число пользователей

Выявление наиболее популярных и наиболее редких багов

Метрика - максимальное число пользователей в один момент времени (CCU)


Лучше написать и выполнить неполные тесты, чем не выполнить полные.

Мартин Фаулер

UnitTest

9


UnitTest

10

Проверка отдельных модулей


UnitTest

11

Безопасный рефакторинг


UnitTest

12

Совместимость модулей


UnitTest

13

Mock-объекты для тестов


UnitTest

13

Mock-объекты для тестов


UnitTest

14

Защита от повторения ошибок


UnitTest

15

Test Driven Development


Hello, world!

UnitTest

16

Среда тестирования: JUnitВ IDEA: Navigate -> Test

public class simpleTest { @Before public void setUp() throws Exception { }

@After public void tearDown() throws Exception { }

@Test public void test() { fail("Not yet implemented"); }}


Простейший Unit тест

UnitTest

17

public class Math { private int a; private int b;

public Math (int a, int b) { this.a = a; this.b = b; }

public int getSum() { return this.a + this.b; }

public int getDiv() { return this.a % this.b; }}

public class simpleTest { private Math math; private int a = 3; private int b = 1; @Before public void setUp() throws Exception { math = new Math(a, b); } @Test public void testGood() { assertEqual(a+b, math.getSum()); } @Test public void testBad() { assertEqual(a/b, math.getDiv()); }


Какие Unit тесты нужны вам?

UnitTest

18

Mock Frontend

Page Generator

Балансировщик

Message System


<dependency>

<groupId>org.mockito</groupId>

<artifactId>mockito-all</artifactId>

<version>1.8.4</version>

</dependency>

Устанавливаем Mockito

UnitTest

19


FunctionalTest

20

Необходимое, но недостаточное условие работоспособности.

Практика


Функциональное тестирование

FunctionalTest

21

Реализует ли требуемый функционал

Поднимается ли сервер?

Можно ли зайти в игру?

Можно ли играть?

Ручное тестирование должно быть более глубоким


Selenium

FunctionalTest

22

Без единой строки кода (plugin Firefox)

Много кода на Java

Быстро

Слабо контролируемо

Несерьезно

Не так быстро

Полный контроль

Путь джедая


Установка Selenium

FunctionalTest

23

<dependency>

<groupId>org.seleniumhq.selenium</groupId>

<artifactId>selenium-java</artifactId>

<version>2.4.0</version>

</dependency>


Схема работы теста

FunctionalTest

24

Вход на страницу

Заполнение формы

Отправка

Получение IDWin!


Реализация тестирования аутентификации

FunctionalTest

25

public void testLogin(@NotNull String url,@NotNull String username,@NotNull String password) {

}

WebDriver driver = new HtmlUnitDriver(true); driver.get(url); // Find the text input element by its name WebElement element = driver.findElement(By.name(“userName")); element.sendKeys(username); WebElement element = driver.findElement(By.name(“password")); element.sendKeys(password);

// Now submit the form. WebDriver will find the form for us from the element element.submit();

// Wait for the page to load, timeout after 10 seconds (new WebDriverWait(driver, 10)).until(new ExpectedCondition<Boolean>() { @Override @NotNull public Boolean apply(@NotNull WebDriver d) { final int id = d.findElement(By.name(“id”)); return id != 0; } }); driver.quit();


Домашнее задание

FunctionalTest

26

завести тест с помощью Selenium

3 unit теста на каждый разработанный модуль


LoadTest

27

[robic]: привет, нужно просетапить сервер чтоб держал нагрузку

[robic]: нужен mysql и apache

[ad_minic]: какая нагрузка?

[robic]: большая

[ad_minic]: круто

[ad_minic]: тогда ставь большой апач и большой мускуль на большой сервер

bash.org


LoadTest

28

Моделирование


Ожидаемое использование

LoadTest

29


LoadTest

30

Нескольких пользователей


LoadTest

31

Одновременно


Как происходит?

LoadTest

32

Формируется список активностей гейммеханики

Формируются параметры игрового дизайна

Реализуется бот

Проводится испытание

Анализируются результаты


Список активностей гейммеханики

LoadTest

33

Танк должен ехать вправо/влево/вниз/вверх

Танк должен стрелять

Танк должен умирать


Параметры игрового дизайна

LoadTest

34

Танк должен ехать 4 секунды из 5

Танк должен стрелять раз в 5 секунд

Танк должен умирать раз в 10 секунд

Танк НЕ обязан делать это осознанно


Проводится испытание

LoadTest

35

Час

Два

8 часов

Сутки

Неделю

?


Рекомендуемые инструменты

LoadTest

36

jMeter

LoadBalancer

Yandex-tanki


Анализируются результаты

LoadTest

37

1. Потребление CPU, %

2. Диск (iowait)

3. Сеть, Mb/s

4. Время отклика, ms

5. CCU, users

6. Load, parrots

7. Использование памяти, МБ

TextHi

ghload

от

Быкова


CCU, users

LoadTest

38

private Map<Integer, Avatar> avatars = new HashMap<>();

public final int getTotalAvatars() { return avatars.size();}


Server FPS

LoadTest

39

Инициализация

Обработка данных

Обновление состояния

Освобождение ресурсов

Входные данные

Выходные данные

Тик сервера


Load [parrots]

LoadTest

40

public void run () { while(true) { msgSystem.execForAbonent(this); Thread.sleep(100); // фиксированное время ожидания потока }}

private static final int TICK_TIME = 20; public void run () { while(true) { long startTime = System.currentTimeMillis(); msgSystem.execForAbonent(this); int deltaTime = System.currentTimeMillis() - startTime; float load = deltaTime / TICK_TIME; if (load < 1) // динамическое время ожидания потока Thread.sleep( TICK_TIME - deltaTime ); }}


Многопоточность

LoadTest

41

Не спать вредно

Много спать тоже вредно

Чем больше нагрузка на CPU, тем лучше


Нагрузка на процессор

LoadTest

42


Нагрузка на процессор

LoadTest

43


Память

LoadTest

44

long free = Runtime.getRuntime().freeMemory();long max = Runtime.getRuntime().maxMemory();


Углубленное программирование

на JavaЛекция 5 / 2

«Вся правда о GC»

Александр Акбашев


Garbage Collector

46

Если бы в Java действительно работала сборка мусора, большинство программ бы удаляли сами себя при первом

же запуске.Robert Sewell


Garbage Collector

47

Garbage collector (GC)

Типы ссылок

Поиск недостежимых объектов

Освобождение памяти Stack Heap

Strong references

Weak references

Sost references

Phantom references


Strong ReferencesОбъект не удаляется

Garbage Collector

48


Sost References

Объект удаляется...если нужна памятьУчитывает количество ссылок

Используется для memory-sensitive cache

new SostReference(T obj);

Garbage Collector

49


Weak References

Атомарно очищает все слабые ссылки на объект

Если надо, помещает объекты на финализацию

Перед использовать - проверять на NULL

WeakHashMap

new WeakReference(T obj);

Garbage Collector

50

Объект удаляется


Phantom References

Не использовать в домашних условиях

Garbage Collector

51


Немного о потреблении памяти

Garbage Collector

52


Garbage Collector

53

Permanent Generation

Heap

HotSpot JVM

-XX:PermSize -XX:MaxPermSize

Old Generation New Generation

Eden Survivor Survivor

-Xms -Xmx

t


Garbage Collector

54

Eden Survivor

Copy Collection

Mark-compact algorithm


Garbage Collector

55


Что делать? Как настраивать?

Garbage Collector

56

jvisualvm входит в JDK


Домашнее задание

Итого

57

MemoryUsage

CCU

Load

http://www.highcharts.com/

http://www.oracle.com/




http://www.oracle.com

http://www.oracle.com

Спасибо за внимание

Акбашев Александр, [email protected]


1. Refactor -> Extract -> Interface

2. Public methods

getAddress

doGet

doPost

run

3. @Mock

Простейший Mock для Frontend

UnitTest

59


Education

Java осень 2013 лекция 5-1