[SnowOne 2025] Николай Шипяков: Интеграционные тесты. Приключение на 5 минут

Интеграционные тесты давно стали привычным инструментом в работе инженеров. Рекомендации по работе с ними зачастую выглядят слишком просто: «Просто подключите Testcontainers, и все заработает!». На учебных примерах это действительно так, но в реальных проектах все далеко не так гладко.

В докладе на конкретном примере разберем «типичный» REST-сервис: с походами в базу данных, HTTP-вызовами внешних сервисов и работой с брокером сообщений. Начнем с полного отсутствия тестов и шаг за шагом итеративно будем дорабатывать их, сталкиваясь все с новыми проблемами.

В конце оценим пройденный путь и попытаемся этот опыт масштабировать на реальный проект.

Будет полезно как разработчикам, кто только начинает свой путь с таким типом тестирования, так и тем, кто хочет посмотреть на знакомые задачи под новым углом.

Видео: https://youtu.be/tYSHx6omtro

Transcript

1. Интеграционные тесты. Приключение на 5 минут Николай Шипяков | Ведущий разработчик
2. Николай Шипяков Т-Банк Sales Tech 2 nikolayshipyakov@gmail.com n.shipyakov@tbank.ru
3. 6+ лет отцовства 3
4. Почему про тесты? 4
5. Почему про тесты? 5
6. Почему про тесты? 6 делится проблемами и неудачами рассказывают истории успеха любят рассказывать про тесты Почти все Многие Мало кто
7. Кто расскажет о неудачах? 7
8. Предметная область: книжный магазин 8 POST /bookstore/api/book - проверить книгу в РКН - добавить книгу в базу данных - отправить нотификацию подписчикам, в маркетплейсы
9. Стек 9
10. Стек 10
11. Модель данных 11
12. Модель данных 12
13. Бизнес логика 13
14. Бизнес логика 14
15. Бизнес логика 15
16. HTTP взаимодействие 16
17. HTTP взаимодействие 17
18. Бизнес логика 18
19. Взаимодействие с БД 19
20. Бизнес логика 20
21. Отправка нотификаций 21
22. Бизнес логика 22
23. Бизнес логика 23
24. Предположим имеются юнит тесты 24
25. Предположим имеются юнит тесты 25
26. Предположим имеются юнит тесты 26
27. Предположим имеются юнит тесты 27
28. Предположим имеются юнит тесты 28
29. Предположим имеются юнит тесты 29
30. Предположим имеются юнит тесты 30
31. Предположим имеются юнит тесты 31
32. Предположим имеются юнит тесты 32
33. Предположим имеются юнит тесты 33
34. Предположим имеются юнит тесты 34
35. Хотим интеграционные тесты 35
36. Зачем они нам? 36 прониклись чужой историей успеха спустили сверху нужна ачивка для повышения
37. Зачем они нам? 37 выявление ошибок на уровне взаимодействий улучшение качества тестов в целом … и кода условно дешевый контур
38. Шаг 1. Прикручиваем базу данных 38
39. Шаг 1. Убираем mock на Repository 39
40. Шаг 1. Копируем howto с популярных источников 40
41. Шаг 1. Копируем howto с популярных источников 41
42. Шаг 1. Как изменились зависимости 42
43. Шаг 1. Как изменились зависимости 43
44. Шаг 1. Изменения в тестах 44
45. Шаг 1. Изменения в тестах 45
46. Шаг 1. Изменения в тестах 46
47. Шаг 1. Изменения в тестах 47
48. Шаг 1. Изменения в тестах 48
49. Шаг 1. Изменения в тестах 49
50. Шаг 1. OOPS 50
51. Шаг 1. WTF? 51
52. Шаг 1. Копипаста до добра не доведет 52
53. Шаг 1. Копипаста до добра не доведет 53
54. Шаг 1. Fixed 54
55. Промежуточные впечатления Не так уж и сложно, как изначально обещалось 55
56. Промежуточные впечатления Запустить БД в контейнере, прогнать скрипты миграции, стартануть Spring контекст Долгий запуск Не так уж и сложно, как изначально обещалось 56
57. Промежуточные впечатления Запустить БД в контейнере, прогнать скрипты миграции, стартануть Spring контекст Долгий запуск Нужно следить за состоянием БД Не так уж и сложно, как изначально обещалось 57
58. Промежуточные впечатления Запустить БД в контейнере, прогнать скрипты миграции, стартануть Spring контекст Долгий запуск Копипаста данных между тестами может сыграть злую шутку Данные для тестирования Нужно следить за состоянием БД Не так уж и сложно, как изначально обещалось 58
59. Промежуточные впечатления Запустить БД в контейнере, прогнать скрипты миграции, стартануть Spring контекст Долгий запуск Копипаста данных между тестами может сыграть злую шутку Данные для тестирования Нужно следить за состоянием БД Liquibase, flyway … Без миграции БД никак Не так уж и сложно, как изначально обещалось 59
60. Шаг 2 Что дальше? 60
61. Шаг 2 Прикручиваем Kafka 61
62. Шаг 2. Избавляемся еще от одного мока 62
63. Шаг 2. Копируем howto с популярных источников 63
64. Шаг 2. Копируем howto с популярных источников 64
65. Шаг 2. Изменения в тестах 65
66. Шаг 2. Настройки consumer 66
67. Шаг 2. Настройки consumer 67
68. Шаг 2. Внимание настройкам consumer 68
69. Шаг 2. Изменения в тестах 69
70. Шаг 2. Первый запуск - успешный 70
71. Шаг 2. Запускаем тесты в параллель 71
72. Шаг 2. И снова … oops 72
73. Шаг 2. Все перепуталось 73
74. Шаг 2. Разбираемся 74
75. Шаг 2. Разбираемся 75
76. Шаг 2. Разбираемся 76
77. Шаг 2. Разбираемся 77
78. Шаг 2. Это же гонка состояний! 78
79. Шаг 2. Очевидный фикс 79
80. Шаг 2. Очевидный фикс 80
81. Шаг 2. Очевидный фикс 81
82. Шаг 2. Опять oops 82
83. Шаг 2. Опять oops 83
84. Шаг 2. Опять разбираемся 84
85. Шаг 2. Все еще гонка состояний 85
86. Шаг 2. Фикс с выборкой по результатам 86
87. Шаг 2. Фикс с выборкой по результатам 87
88. Шаг 2. Fixed 88
89. Пусть каждый тест работает со своим топиком, тогда и гонки не будет Очевидно же! Каждому тесту по топику! 89
90. Можно и так Мне не нравится Можно и так. Я не против Каждому тесту свой контекст со своими настройками. Сложно Пусть каждый тест работает со своим топиком, тогда и гонки не будет Очевидно же! Каждому тесту по топику! 90
91. Можно и так Мне не нравится Можно и так. Я не против Тест должен тестировать, а не просто быть зеленым Пусть каждый тест работает со своим топиком, тогда и гонки не будет Очевидно же! Каждому тесту по топику! 91
92. Промежуточные впечатления Помимо прочего запуск Kafka в контейнере Все еще долгий запуск Уже прям душненько, но терпимо 92
93. Промежуточные впечатления Помимо прочего запуск Kafka в контейнере Все еще долгий запуск Все еще нужно следить за состоянием Уже прям душненько, но терпимо 93 На этот раз того, что в топиках лежит, плюс гонка состояний
94. Промежуточные впечатления Помимо прочего запуск Kafka в контейнере Все еще долгий запуск Добавляются проблемы с чтением чужих событий. Все сильно неочевиднее, чем было с БД Данные для тестирования Все еще нужно следить за состоянием Уже прям душненько, но терпимо 94 На этот раз того, что в топиках лежит, плюс гонка состояний
95. Промежуточные впечатления Помимо прочего запуск Kafka в контейнере Все еще долгий запуск Добавляются проблемы с чтением чужих событий. Все сильно неочевиднее, чем было с БД Данные для тестирования Все еще нужно следить за состоянием Без базовых знаний далеко не уедешь Нужно знать Kafka Уже прям душненько, но терпимо 95 На этот раз того, что в топиках лежит, плюс гонка состояний
96. Шаг 3. Прикручиваем http интеграцию 96
97. Шаг 3. Прикручиваем MockRestServiceServer 97
98. Шаг 3. Прикручиваем MockRestServiceServer 98
99. Шаг 3. MockRestServiceServer - изменения в тестах 99
100. Шаг 3. MockRestServiceServer - изменения в тестах 100
101. Шаг 3. И сразу успех! 101
102. Промежуточные впечатления Реально никакой сервер ни на каком порту не стартует Это все-таки mock Окей, но сомнительно 102
103. Промежуточные впечатления Реально никакой сервер ни на каком порту не стартует Это все-таки mock Завязка на RestTemplate Окей, но сомнительно 103
104. Промежуточные впечатления Реально никакой сервер ни на каком порту не стартует Это все-таки mock Не требуется много времени на изучения, не требуется время на старт Быстро и удобно Завязка на RestTemplate Окей, но сомнительно 104
105. Шаг 3.5 Прикручиваем MockWebServer 105
106. Шаг 3.5 Прикручиваем MockWebServer 106
107. Шаг 3.5 MockWebServer - изменения в тестах 107
108. Шаг 3.5 MockWebServer – мок ответа 108
109. Шаг 3.5 MockWebServer - изменения в тестах 109
110. Шаг 3.5 Oops … 110
111. Шаг 3.5 Разбираемся 111
112. Шаг 3.5 Разбираемся 112
113. Шаг 3.5 Разбираемся 113
114. Шаг 3.5 Разбираемся 114
115. Шаг 3.5 Опять гонка состояний 115
116. Шаг 3.5 Опять гонка состояний 116
117. Шаг 3.5 Опять гонка состояний 117
118. Шаг 3.5 Меняем подход 118
119. Шаг 3.5 Меняем подход 119
120. Шаг 3.5 Меняем подход 120
121. Шаг 3.5 Успех успешный 121
122. Шаг 3.5 Говорят, что бывают проблемы с … 122
123. Шаг 3.5 Говорят, что бывают проблемы с датами 123
124. Шаг 3.5 Говорят, что бывают проблемы с датами 124
125. Шаг 3.5 Говорят, что бывают проблемы с датами 125
126. Шаг 3.5 Исправляем 126
127. Шаг 3.5 Исправляем 127
128. Шаг 3.5 Fixed 128
129. Шаг 3.6 C MockRestServiceServer не лучше 129
130. Шаг 3.6 C MockRestServiceServer не лучше 130
131. Шаг 3.6 C MockRestServiceServer не лучше 131
132. Шаг 3.6 MockRestServiceServer еще проблемы 132
133. Шаг 3.6 MockRestServiceServer еще проблемы 133
134. Шаг 3.6 MockRestServiceServer еще проблемы 134
135. Шаг 3.6 Разобрались 135
136. Промежуточные впечатления И MockWebServer, и MockRestServiceServer запускаются быстро Быстрый запуск Не все так однозначно 136
137. Промежуточные впечатления И MockWebServer, и MockRestServiceServer запускаются быстро Быстрый запуск Все еще нужно следить за состоянием Не все так однозначно 137 При параллельном запуске гонка состояний более чем реальна
138. Промежуточные впечатления И MockWebServer, и MockRestServiceServer запускаются быстро Быстрый запуск Проблемы с чтением чужих ответов и размашистый диспетчер Данные для тестирования Все еще нужно следить за состоянием Не все так однозначно 138 При параллельном запуске гонка состояний более чем реальна
139. Шаг 4 Еще немного! 139
140. Шаг 4 Http вызов проверяемого метода 140
141. Шаг 4 Http вызов проверяемого метода 141
142. Шаг 4 Http вызов проверяемого метода 142
143. Шаг 4 Http вызов проверяемого метода 143
144. Шаг 4 Http вызов проверяемого метода 144
145. Промежуточные впечатления Или почти никак. Все что мы могли сделать для замедления тестов мы уже сделали Никак не влияет на скорость Ну тут легкотня 145
146. Промежуточные впечатления Или почти никак. Все что мы могли сделать для замедления тестов мы уже сделали Никак не влияет на скорость Ну тут легкотня 146 Никакого стейта Весь стейт остался на предыдущих шагах
147. Промежуточные впечатления Или почти никак. Все что мы могли сделать для замедления тестов мы уже сделали Никак не влияет на скорость Ну тут легкотня 147 Никакого стейта Весь стейт остался на предыдущих шагах Можно проиграть при проверке Проверка дат – зачастую отдельная проблема
148. Выводы Сама разработка тестов довольно трудоемка, выполнение сильно дольше юнит тестов Не быстро Хорошо делай, хорошо будет 148
149. Выводы Сама разработка тестов довольно трудоемка, выполнение сильно дольше юнит тестов Не быстро Достойный результат Хорошо делай, хорошо будет 149 Тесты более приближенные к реальности, нежели юнит; Плюс получаем рабочий контур, который можно использовать при разработке
150. Выводы 150
151. Выводы А как у нас? 151
152. Выводы Обнаружение ошибок сильно сдвигается “влево”, хороши для регресса Используем в команде А как у нас? 152
153. Выводы Обнаружение ошибок сильно сдвигается “влево”, хороши для регресса Используем в команде А как у нас? 153 QA за нас Не отнимаем хлеб у QA, а помогаем в решении вопроса качества со своей стороны
154. Выводы Обнаружение ошибок сильно сдвигается “влево”, хороши для регресса Используем в команде А как у нас? 154 Чем раньше – тем проще Сильно сложнее внедрять такие тесты, когда уже много кода QA за нас Не отнимаем хлеб у QA, а помогаем в решении вопроса качества со своей стороны
155. Выводы Обнаружение ошибок сильно сдвигается “влево”, хороши для регресса Используем в команде А как у нас? 155 Чем раньше – тем проще Сильно сложнее внедрять такие тесты, когда уже много логики; QA за нас Не отнимаем хлеб у QA, а помогаем в решении вопроса качества со своей стороны Не интеграционными только Юниты, “маленькие” интеграционные, системные
156. Цитата в тему 156 «Возможно хорошие тесты даже важнее, чем хороший код» Артем
157. Спасибо за внимание 157