Для .NET-бэкендеров
Многопоточка как в BigTech
Опыт инцидентов под нагрузкой за четыре недели, даже если на работе одни круды.
Пять инцидентов в маркетплейсе на .NET. Код уже написан: ты находишь, где он ломается, и чинишь. Доска показывает, сколько магазин теряет в минуту, а отчёт смены, что стало после твоей правки. На собесе в компанию с нагрузкой рассказываешь, что сломалось, как нашёл и что поменял.
Смотреть программуЧто бывает, когда на работе одни круды
- Который год монолит, круды и пара фоновых задач по расписанию.
SemaphoreSlimиChannelты встречал только в статьях. - На собесе спрашивают, сколько запросов в секунду держал твой сервис. Ты не знаешь: его никто ни разу не нагружал.
- Потом дают кусок кода: тут
.Wait(), там.Result, где-тоConfigureAwait(false). Спрашивают, где он встанет под нагрузкой, а ты гадаешь. - Про асинхронность прочитал три статьи и всё понял. На первом же уточнении понимание закончилось.
- Код уже пишет нейронка. Он проходит ревью и тесты, а под нагрузкой ложится. Объяснять почему будешь ты.
Круды сами не закончатся
Опыт нагрузки дают там, где нагрузка есть, а туда берут с опытом. Ты в этом не виноват, но и круг сам не разомкнётся.
С каждым годом стажа от тебя ждут ответов сеньора. Про нагрузку сказать всё так же нечего, и это видно на первом уточнении.
А круды первыми забирает нейронка. Собеседования уже смещаются к чтению чужого кода и проверке того, что написал ИИ. Ценным остаётся тот, кто видит, где такой код встанет под нагрузкой.
Откуда берётся опыт под нагрузкой
Представь ночь. Сервис встал, процессор свободен, в логах тихо, а к утру надо разобраться, что здесь вообще происходит и какой поток кого ждёт. После такой ночи тебе придётся понять, как оно работает, и поймёшь ты это лучше, чем из любой статьи.
На крудах такой ночи можно ждать годами. Здесь она будет на четвёртой неделе. До неё четыре инцидента и одно ревью, и в каждом инциденте ты сначала даёшь нагрузку на исходный код и смотришь на графиках, где он не справляется.
Ночную аварию устроит PR коллеги, который ты ревьюишь на третьей неделе. Его вольют, не дождавшись тебя.
На собесе про нагрузку тебе будет что рассказать: что сломалось, как ты это нашёл и что поменял. Эту историю ты прожил сам.
Магазин уже написан
Ты получаешь маркетплейс с пятью сервисами, базами, нагрузкой и графиками. С нуля ничего писать не придётся.
В каждой задаче ты дописываешь или меняешь обычно 100–300 строк. Много кода нейронка уже пишет быстрее тебя. А вот найти место, где сервис ложится, и объяснить, почему починка правильная, за тебя она не сделает.
Иногда верное и неверное решения отличаются на пару строк. Неверное нормально выглядит на ревью, а падает на тестах или под нагрузкой. Этому и учимся.
Каждый инцидент разбираешь как дежурный
- АлертНа доске горит алерт. Ранбук подсказывает, что он значит и какими графиками его подтвердить.
- ДеньгиСмотришь, сколько магазин теряет в минуту и растут ли потери.
- ПричинаСтроишь гипотезы и проверяешь их по графикам, трейсам и логам.
- ПочинкаСначала тест, который падает на исходном коде, потом исправление.
- ДоказательствоПолный прогон нагрузки, отчёт смены до и после, PR и постмортем.
Сколько стоит каждая поломка
Компании ищут разработчика, который понимает, что его код делает с деньгами.
В проекте у каждой поломки на доске «Бизнес» есть цена, а после твоей правки там же видно, сколько магазин перестал терять. На собесе к рассказу про пул соединений добавляется ещё одна строка: сколько покупок он стоил магазину и сколько их стало после правки.
- Распродажа9,2 млн ₽потеряно за пять минут распродажиПосле починки: 0 ₽
- Цены197 млн ₽потеряно за пять минут акцииПосле починки: 0 ₽
- Витрина10,8 млн ₽потеряно за пять минут, пока тормозит каталогПосле починки: 1,2 млн ₽
- Ночь32 млн ₽заказов сорвалось за пять минут ночной распродажиПосле починки: 0 ₽
Как проходит неделя
- ТеорияУроки по 5–10 минут: как устроены поток, пул,
awaitи что делает рантайм. - ПрактикаВидео по проекту: что за задача, где она в коде, с чего начать, как имитировать нагрузку и куда смотреть на графиках.
- КодПишешь код в своём репозитории на GitHub.
- ПроверкаТесты и нагрузочный прогон.
- ОбсуждениеСозвон группы: разбираем решения, ошибки и вопросы.
Программа
Неделя 1. Поток и общая память · 15 уроков Вводная: продавцам недосчитали треть показовРаспродажа одного товара больше не роняет весь магазин
Поток изнутри
- Из чего состоит поток, чем он отличается от процесса и почему тысяча потоков не спасёт сервис
- Многопоточность, параллельность и асинхронность: чем они отличаются
Гонки
- Почему два потока теряют инкременты одного счётчика
- Interlocked: счётчик без блокировки
- Почему счётчик теряет лайки, когда между чтением и записью стоит запрос к базе
Блокировки
- Как устроен
lockи откуда он знает, какой поток его держит - Дедлок и как его не допустить
Что есть кроме lock
- Как пускать к базе не больше N запросов и не повесить сервис
- Почему с потокобезопасным словарём всё равно можно потерять обновление
- Почему read-only коллекция не спасает от гонки и как подменять данные целиком
- Какой инструмент когда брать
- Как копить события в памяти и сбрасывать в базу, не теряя ни одного
- Как один горячий товар забирает соединения у всего магазина и сколько запросов к нему пускать
Отмена и остановка
- Почему токен отмены сам ничего не останавливает
- Как остановить сервис и успеть записать в базу всё, что накопилось
Практика
Вводная: продавцам недосчитали треть показов
Продавцы платят за показы карточек, а счётчик, который писал стажёр, теряет каждый третий показ. Магазин недополучает деньги
Сделаешь так, чтобы показы не терялись: ни под нагрузкой, ни во время записи в базу, ни при остановке сервиса
исходный код
после правки
Распродажа одного товара больше не роняет весь магазин
Стартует распродажа, сотни покупателей в секунду жмут «Купить» на один товар. Пул соединений с базой забит, и не проходят даже покупки чайника, который в распродаже не участвует
Напишешь код так, чтобы горячий товар не утягивал за собой остальные: сейчас срывается больше 10 % обычных покупок, после правки меньше 1 %
исходный код
после правки
Итог недели
За неделю ты подготовил магазин к распродаже и починил счётчик показов. На собесе рассказываешь, как это сделал и что при этом происходит внутри lock.
Неделя 2. Task, async/await и отмена · 13 уроков «Час скидок» проходит: покупки акции с 1 % до 100 %
Зачем async
- Когда
asyncускоряет сервис - Откуда берутся потоки в пуле
Task
- Чем таска отличается от потока
- Куда девается исключение из таски
- Как завернуть колбэк в
Task - Как сто одновременных промахов кэша свести к одному походу в базу
async/await изнутри
- Почему
asyncне создаёт потоков - Что делает метод на
awaitи кто его потом продолжает - Почему
Thread.Sleepдержит поток, аTask.Delayнет - Какие переменные уедут в кучу после
awaitи сколько это стоит
Отмена
- Клиент отвалился, вышел таймаут, хост останавливается: как отменить работу правильно
Видимость памяти
- Почему поток не видит чужую запись
- Что на самом деле гарантирует
volatileи как заставить потоки видеть записи друг друга
Практика
«Час скидок» проходит: покупки акции с 1 % до 100 %
Маркетинг запускает «Час скидок» на 200 товаров и заводит правила прямо во время трафика. Каждый расчёт цены ходит в базу дважды: за правилами скидок и за базовой ценой. Пул кончается, покупатели получают таймауты. А один товар продали сорок раз за полцены
Правила скидок переедут в память, и покупатель не увидит цену, где половина скидок старые, а половина новые. Кэш базовой цены сведёт сто одновременных запросов за одной ценой к одному походу в базу. Вчерашнюю цену он за сегодняшнюю не выдаст
исходный код
после правки
Итог недели
За неделю ты убрал из расчёта цены почти все походы в базу, и акция перестала ложиться. На собесе объясняешь, как расчёт видит правила без блокировок и зачем склеивать одновременные промахи кэша.
Неделя 3. Где async ломается · 11 уроков Каталог тормозит, а сайт открывается: список товаров за 0,2 секунды вместо двухРевью PR коллеги: найти, что сломается ночью
Много задач сразу
- Как ждать много задач сразу и куда деваются их ошибки
- Почему пул добавляет потоки медленно и сервис встаёт при пустом процессоре
- Во что компилятор превращает async-метод и как узнать его в профилировщике
Где ломается асинхронный код
- Где продолжится метод после
awaitв десктопе, старом ASP.NET и ASP.NET Core - Как
.Resultи.Wait()вешают сервис - Когда нужен
ConfigureAwait(false) - Почему
async voidроняет процесс - Почему нельзя
awaitвнутриlock - Как данные запроса переживают
awaitи почемуThreadLocalпоказывает чужое - Что искать на ревью в чужом async-коде
Параллелизм
- Как раскидать вычисления по ядрам и почему на сервере не надо занимать все
Практика
Каталог тормозит, а сайт открывается: список товаров за 0,2 секунды вместо двух
Каталог ушёл в медленную миграцию. Остальные сервисы здоровы, а лёг весь сайт: витрина ждёт каталог без предела, и брошенные запросы продолжают висеть
После фичи витрина отвечает в срок, показывает карточку без цены или остатка, если их нет, и не копит запросы к больному сервису
исходный код
после правки
Ревью PR коллеги: найти, что сломается ночью
Коллега ускорил уборку просроченных резервов: две реплики и параллельная обработка. Просит ревью до конца недели
Найдёшь минимум четыре проблемы и для каждой объяснишь, что случится под нагрузкой и при сбоях
Итог недели
Можешь рассказать, как сделал сайт, который работает, пока одна из зависимостей тормозит, и что нашёл в чужом коде на ревью.
Неделя 4. Сервис встал · 16 уроков Ночной инцидент: склад продал товар дважды
Почему сервис встал
- Голодание пула: ломаешь сервис сам
- Какие метрики смотреть первыми
- Дамп: кто кого ждёт
- Трейс: авария, которую не застал дамп
- Как идти от симптома к причине
- Три поломки разом
Тесты
- Тест на гонку, который не зависит от удачи
Сверх задач курса
- Ограниченная очередь: быстрый продюсер ждёт медленного консьюмера, и память не растёт
- Как стримить данные из базы, не загружая всё в память
- Когда
ValueTaskэкономит, а когда ломает - Как рантайм пулит объекты
- Lock-free и где он ломается
- Как пул подбирает число потоков и почему порядок задач не обещан
- Кто ждёт ответа базы, если поток отпущен
- Почему одни блокировки дешевле других
- Какую блокировку брать, когда читателей много, а писатель один
Практика
Ночной инцидент: склад продал товар дважды
В 03:07 просроченные резервы перестали сниматься. Процессор почти пустой, в журнале ни одной ошибки, а к утру горячие товары то нет в наличии, то проданы дважды. Это тот самый PR коллеги: его влили без ревью
Найдёшь причину по метрикам, починишь уборщик и данные склада и напишешь разбор инцидента для команды
исходный код
после правки
Итог недели
Можешь рассказать, как нашёл, почему сервис встал ночью, починил данные и написал разбор инцидента. Когда сервис встаёт, знаешь, с какой команды начать.
Что изменится к 27 декабря
На собесе спрашивают про нагрузку, а рассказать нечего
В репозитории пять починок с отчётами до и после: время ответа, доля покупок, деньги. Про каждую рассказываешь, что сломалось, что поменял и почему.
Почему сервис лёг, объясняешь на глаз
Считаешь узкое место в одну строку: сколько запросов, сколько длится каждый, сколько соединений в пуле.
Как сервис ведёт себя под нагрузкой, знаешь только из статей
Видел сам: где копится очередь, когда кончается пул соединений и почему сервис встаёт при пустом процессоре.
Сервис встал, и непонятно, с чего начать
Снимаешь дамп и показываешь, где встряли потоки.
На уточнении пытаешься угадать
Рассуждаешь от механизма: ты видел, как он ломается под нагрузкой.
Тарифы
Старт 29 ноября, четыре недели, последний созвон 27 декабря.
группа
Группа
Починишь пять инцидентов
- Проект на четыре недели: пять инцидентов под нагрузкой, ревью PR коллеги и разбор ночной аварии
- 55+ уроков: от устройства
lockдо разбора дампа упавшего сервиса - Эталон после выполнения: как решено, почему так и что могло пойти не так
- Каждое решение проверяют тесты и нагрузка в k6
- Живой созвон группы каждую неделю, полтора часа
- Чат участников, отвечаю в тот же рабочий день
- Доступ к урокам и проекту ещё год после конца группы
или 6 667 ₽ в месяц на полгода
советую его, всего 15 мест
С разбором
Сделаешь и сможешь об этом рассказать
- Всё из «Группы»
- Две самые сильные твои задачи превращаем в рассказ для собеса
- Ты пишешь, что сломалось и как починил. Я правлю текст два раза: механизм, цифры до и после, выводы из графиков
- Созвон 30 минут: рассказываешь вслух, я задаю уточнения, пока рассказ не перестанет сыпаться
Бонус
Финальный созвон, час
Час вдвоём после четвёртой недели. Проходим голосом все темы, с уточнениями, и в конце у тебя список, что подтянуть.
или 10 000 ₽ в месяц на полгода
3 места
Лично
Плюс созвон со мной каждую неделю
- Всё из «С разбором»
- Созвон один на один каждую неделю, час
- Пишешь мне в личку в любой день, отвечаю в тот же день
- На личных созвонах смотрим твой код и слабые темы
Бонус
Два месяца разборов после группы
Задали вопрос по многопоточке на собесе? Приноси, разберёмся. До трёх созвонов.
или 20 834 ₽ в месяц на полгода
Вопросы
Как оплатить?
Нажми «Занять место» у тарифа и впиши почту, на неё придут чек и доступ. Откроется страница оплаты: там можно сменить тариф и ввести промокод. Остались вопросы до оплаты — напиши мне в Telegram.
Сколько времени в неделю? Совмещу с работой?
Уроки недели: 11–16 штук по 5–10 минут, это час-два, в четвёртой неделе до трёх. Созвон: полтора часа. Остальное время уходит на код: одна-две задачи с тестами, нагрузочным прогоном и пулл-реквестом. Закладывай около десяти часов в неделю. Сдаёшь решение до конца недели.
Не успеваю по графику. Что будет?
Созвоны записываются, открытые уроки и проект остаются у тебя ещё год после конца группы. Решение можно сдать после срока, тесты проверят его так же.
Я мидл. Мне рано?
Нет, если пишешь бэкенд на C# и видел async в коде. Программа рассчитана на вход с уровня джуна или мидла.
Что нужно на компьютере?
Docker Desktop, .NET 10 и от 8 ГБ свободной памяти. Подойдут Rider 2025.3 и новее, Visual Studio 2026 или VS Code с C# Dev Kit. Visual Studio 2022 проекты на .NET 10 не откроет. Стенд целиком поднимается у тебя на машине.
На работе нет нагрузки. Потяну?
На это и рассчитано. Стенд поднимается у тебя, нагрузку подаёшь сам, графики смотришь в Grafana. В первой неделе есть урок про нагрузочный прогон: как его запускать и как читать графики.
Можно писать код с нейронкой?
Можно. Кода в задачах немного, магазин уже написан. Работа в другом: понять, почему сервис ложится под нагрузкой, что поменять и почему именно так. Это ты потом объясняешь команде.
Можно в рассрочку?
Да, на полгода, сумма та же, что при оплате сразу.
Можно оплатить из-за границы?
Да. На странице оплаты есть кнопка «Зарубежной картой»: доллары, евро или белорусские рубли. Если карта не пройдёт, напиши мне в Telegram, найдём другой способ.
Платит работодатель.
Напиши мне в Telegram, пришлю счёт и договор на юрлицо. Цена та же.
Дальше три варианта
- Ничего не менять. Остаёшься на крудах и ждёшь, что нагрузка когда-нибудь придёт сама.
- Разобраться самому. Рихтер, исходники рантайма, блог Стивена Тауба, свои эксперименты: всё это есть в открытом доступе. Стенда с нагрузкой и человека, который скажет, где ты ошибся, там нет.
- Пойти в группу. Четыре недели по графику, пять инцидентов под нагрузкой и созвон каждую неделю.
Займи место
Выбери тариф и впиши почту, дальше откроется страница оплаты. Продажи закрываются 26 ноября в 23:59 по Москве.