0 added
0 removed
Original
2026-01-01
Modified
2026-02-21
1
<h2>Митап страшных историй и факапов в АйТи</h2>
1
<h2>Митап страшных историй и факапов в АйТи</h2>
2
<h2>Жесть!</h2>
2
<h2>Жесть!</h2>
3
<ul><li><p>Виктор Попов</p>
3
<ul><li><p>Виктор Попов</p>
4
<p>Техлид DevOps в X5 Group</p>
4
<p>Техлид DevOps в X5 Group</p>
5
</li>
5
</li>
6
<li><p>Тимофей Ларкин</p>
6
<li><p>Тимофей Ларкин</p>
7
<p>Ведущий инженер в X5 Group</p>
7
<p>Ведущий инженер в X5 Group</p>
8
</li>
8
</li>
9
<li><p>Алексей Кузнецов</p>
9
<li><p>Алексей Кузнецов</p>
10
<p>Системный архитектор</p>
10
<p>Системный архитектор</p>
11
</li>
11
</li>
12
<li><p>Иван Чувашов</p>
12
<li><p>Иван Чувашов</p>
13
<p>Администратор баз данных в Southbridge. Ведущий инженер в Okko</p>
13
<p>Администратор баз данных в Southbridge. Ведущий инженер в Okko</p>
14
</li>
14
</li>
15
<li><p>Александр Волочнев</p>
15
<li><p>Александр Волочнев</p>
16
<p>Developer Advocate Lead в Datastax Inc</p>
16
<p>Developer Advocate Lead в Datastax Inc</p>
17
</li>
17
</li>
18
</ul><p>И рассказывали истории, например, такие:</p>
18
</ul><p>И рассказывали истории, например, такие:</p>
19
<p>История о том, как чёрной-чёрной ночью приходит ОММ киллер и прибивает инстанс</p>
19
<p>История о том, как чёрной-чёрной ночью приходит ОММ киллер и прибивает инстанс</p>
20
<p>Сервер СУБД PostgreSQL, большой жирный сервер. Но один запрос повисает и всё. По таблице, на которой висит запрос, нельзя посчитать количество записей - повисает. Да Бог бы с ним, но эти запросы висят сутками и память утекает. В какой-то момент приходит ОММ киллер и прибивает инстанс PostgreSQL. И, как назло, делает он это ночью...</p>
20
<p>Сервер СУБД PostgreSQL, большой жирный сервер. Но один запрос повисает и всё. По таблице, на которой висит запрос, нельзя посчитать количество записей - повисает. Да Бог бы с ним, но эти запросы висят сутками и память утекает. В какой-то момент приходит ОММ киллер и прибивает инстанс PostgreSQL. И, как назло, делает он это ночью...</p>
21
<p>Как стынет кровь и карма уходит за пределы int32</p>
21
<p>Как стынет кровь и карма уходит за пределы int32</p>
22
<p>Четыре часа ночи, я завершаю процесс миграции, вижу, что некоторые примонтированные диски "задублировались" в LVM, удаляю копию, и в тот момент, когда я уже нажимаю enter в консоли виртуализации, я понимаю...</p>
22
<p>Четыре часа ночи, я завершаю процесс миграции, вижу, что некоторые примонтированные диски "задублировались" в LVM, удаляю копию, и в тот момент, когда я уже нажимаю enter в консоли виртуализации, я понимаю...</p>
23
<p>О чудовище, кое порождает х20 журналов предзаписи для логической репликации</p>
23
<p>О чудовище, кое порождает х20 журналов предзаписи для логической репликации</p>
24
<p>Сервер баз данных. Высоконагруженный: примерно 40 тыс. запросов в секунду. Есть таблица, которая содержит 2 млрд строк, нужно удалить 1,5 млрд строк без простоя системы. Мы пишем запрос на sql, который по 10 тыс. записей удаляет строки. Запускаем, всё хорошо работает примерно 1 час. Потом система умирает. Вообще. Явных факапов нет. Явных проблем нет...</p>
24
<p>Сервер баз данных. Высоконагруженный: примерно 40 тыс. запросов в секунду. Есть таблица, которая содержит 2 млрд строк, нужно удалить 1,5 млрд строк без простоя системы. Мы пишем запрос на sql, который по 10 тыс. записей удаляет строки. Запускаем, всё хорошо работает примерно 1 час. Потом система умирает. Вообще. Явных факапов нет. Явных проблем нет...</p>
25
<p>История об обновлении кластера стодневного возраста</p>
25
<p>История об обновлении кластера стодневного возраста</p>
26
<p>...я прокатываю обновление по первому хосту, кубелет и контролплейн компоненты перезагружаются и сыпят ворнингами. Ожидаемое поведение. Вот только веб-морда ранчера почему-то показывает не форму логина, а ошибку 401. Ну, ничего, там тесная интеграция с апи куба, закончим обновлять, всё вернётся в норму. Ведь вернётся?..</p>
26
<p>...я прокатываю обновление по первому хосту, кубелет и контролплейн компоненты перезагружаются и сыпят ворнингами. Ожидаемое поведение. Вот только веб-морда ранчера почему-то показывает не форму логина, а ошибку 401. Ну, ничего, там тесная интеграция с апи куба, закончим обновлять, всё вернётся в норму. Ведь вернётся?..</p>
27
<p>История о том, как однажды утром пользователи включили компьютеры и увидели незнакомый рабочий стол</p>
27
<p>История о том, как однажды утром пользователи включили компьютеры и увидели незнакомый рабочий стол</p>
28
<p>Экспериментировал я как-то с автоматизированной установкой винды через PXE. Был у меня стенд из псевдо-сервера и клиента, на сервере я настройки правил, с клиента грузился и проверял. А по умолчанию там надо было успеть нажать какую-то кнопку, чтобы пошла PXE загрузка, и т.к. на момент перезагрузки клиента я порой отвлекался на что-то другое...</p>
28
<p>Экспериментировал я как-то с автоматизированной установкой винды через PXE. Был у меня стенд из псевдо-сервера и клиента, на сервере я настройки правил, с клиента грузился и проверял. А по умолчанию там надо было успеть нажать какую-то кнопку, чтобы пошла PXE загрузка, и т.к. на момент перезагрузки клиента я порой отвлекался на что-то другое...</p>
29
<h2>Записаться</h2>
29
<h2>Записаться</h2>
30
30