dotnetdad .NET бэкенд

Для .NET-бэкендеров

Многопоточка как в BigTech

Опыт инцидентов под нагрузкой за четыре недели, даже если на работе одни круды.

Пять инцидентов в маркетплейсе на .NET. Код уже написан: ты находишь, где он ломается, и чинишь. Доска показывает, сколько магазин теряет в минуту, а отчёт смены, что стало после твоей правки. На собесе в компанию с нагрузкой рассказываешь, что сломалось, как нашёл и что поменял.

Смотреть программу

Что бывает, когда на работе одни круды

  • Который год монолит, круды и пара фоновых задач по расписанию. SemaphoreSlim и Channel ты встречал только в статьях.
  • На собесе спрашивают, сколько запросов в секунду держал твой сервис. Ты не знаешь: его никто ни разу не нагружал.
  • Потом дают кусок кода: тут .Wait(), там .Result, где-то ConfigureAwait(false). Спрашивают, где он встанет под нагрузкой, а ты гадаешь.
  • Про асинхронность прочитал три статьи и всё понял. На первом же уточнении понимание закончилось.
  • Код уже пишет нейронка. Он проходит ревью и тесты, а под нагрузкой ложится. Объяснять почему будешь ты.

Круды сами не закончатся

Опыт нагрузки дают там, где нагрузка есть, а туда берут с опытом. Ты в этом не виноват, но и круг сам не разомкнётся.

С каждым годом стажа от тебя ждут ответов сеньора. Про нагрузку сказать всё так же нечего, и это видно на первом уточнении.

А круды первыми забирает нейронка. Собеседования уже смещаются к чтению чужого кода и проверке того, что написал ИИ. Ценным остаётся тот, кто видит, где такой код встанет под нагрузкой.

Откуда берётся опыт под нагрузкой

Представь ночь. Сервис встал, процессор свободен, в логах тихо, а к утру надо разобраться, что здесь вообще происходит и какой поток кого ждёт. После такой ночи тебе придётся понять, как оно работает, и поймёшь ты это лучше, чем из любой статьи.

На крудах такой ночи можно ждать годами. Здесь она будет на четвёртой неделе. До неё четыре инцидента и одно ревью, и в каждом инциденте ты сначала даёшь нагрузку на исходный код и смотришь на графиках, где он не справляется.

Ночную аварию устроит PR коллеги, который ты ревьюишь на третьей неделе. Его вольют, не дождавшись тебя.

На собесе про нагрузку тебе будет что рассказать: что сломалось, как ты это нашёл и что поменял. Эту историю ты прожил сам.

Магазин уже написан

Ты получаешь маркетплейс с пятью сервисами, базами, нагрузкой и графиками. С нуля ничего писать не придётся.

В каждой задаче ты дописываешь или меняешь обычно 100–300 строк. Много кода нейронка уже пишет быстрее тебя. А вот найти место, где сервис ложится, и объяснить, почему починка правильная, за тебя она не сделает.

Иногда верное и неверное решения отличаются на пару строк. Неверное нормально выглядит на ревью, а падает на тестах или под нагрузкой. Этому и учимся.

Каждый инцидент разбираешь как дежурный

  1. АлертНа доске горит алерт. Ранбук подсказывает, что он значит и какими графиками его подтвердить.
  2. ДеньгиСмотришь, сколько магазин теряет в минуту и растут ли потери.
  3. ПричинаСтроишь гипотезы и проверяешь их по графикам, трейсам и логам.
  4. ПочинкаСначала тест, который падает на исходном коде, потом исправление.
  5. ДоказательствоПолный прогон нагрузки, отчёт смены до и после, PR и постмортем.

Сколько стоит каждая поломка

Компании ищут разработчика, который понимает, что его код делает с деньгами.

В проекте у каждой поломки на доске «Бизнес» есть цена, а после твоей правки там же видно, сколько магазин перестал терять. На собесе к рассказу про пул соединений добавляется ещё одна строка: сколько покупок он стоил магазину и сколько их стало после правки.

  • Распродажа9,2 млн ₽потеряно за пять минут распродажиПосле починки: 0 ₽
  • Цены197 млн ₽потеряно за пять минут акцииПосле починки: 0 ₽
  • Витрина10,8 млн ₽потеряно за пять минут, пока тормозит каталогПосле починки: 1,2 млн ₽
  • Ночь32 млн ₽заказов сорвалось за пять минут ночной распродажиПосле починки: 0 ₽

Как проходит неделя

  1. ТеорияУроки по 5–10 минут: как устроены поток, пул, await и что делает рантайм.
  2. ПрактикаВидео по проекту: что за задача, где она в коде, с чего начать, как имитировать нагрузку и куда смотреть на графиках.
  3. КодПишешь код в своём репозитории на GitHub.
  4. ПроверкаТесты и нагрузочный прогон.
  5. ОбсуждениеСозвон группы: разбираем решения, ошибки и вопросы.

Программа

Неделя 1. Поток и общая память · 15 уроков Вводная: продавцам недосчитали треть показовРаспродажа одного товара больше не роняет весь магазин

Поток изнутри

  • Из чего состоит поток, чем он отличается от процесса и почему тысяча потоков не спасёт сервис
  • Многопоточность, параллельность и асинхронность: чем они отличаются

Гонки

  • Почему два потока теряют инкременты одного счётчика
  • Interlocked: счётчик без блокировки
  • Почему счётчик теряет лайки, когда между чтением и записью стоит запрос к базе

Блокировки

  • Как устроен lock и откуда он знает, какой поток его держит
  • Дедлок и как его не допустить

Что есть кроме lock

  • Как пускать к базе не больше N запросов и не повесить сервис
  • Почему с потокобезопасным словарём всё равно можно потерять обновление
  • Почему read-only коллекция не спасает от гонки и как подменять данные целиком
  • Какой инструмент когда брать
  • Как копить события в памяти и сбрасывать в базу, не теряя ни одного
  • Как один горячий товар забирает соединения у всего магазина и сколько запросов к нему пускать

Отмена и остановка

  • Почему токен отмены сам ничего не останавливает
  • Как остановить сервис и успеть записать в базу всё, что накопилось

Практика

Вводная: продавцам недосчитали треть показов

Продавцы платят за показы карточек, а счётчик, который писал стажёр, теряет каждый третий показ. Магазин недополучает деньги

Сделаешь так, чтобы показы не терялись: ни под нагрузкой, ни во время записи в базу, ни при остановке сервиса

исходный код

Панель Grafana «Показы: открыто и засчитано», исходный код

после правки

Панель Grafana «Показы: открыто и засчитано», после правки
Зелёная линия показывает, сколько карточек открыли покупатели, жёлтая показывает, сколько показов засчитал сервис. До правки между ними почти треть, после линии совпадают.

Распродажа одного товара больше не роняет весь магазин

Стартует распродажа, сотни покупателей в секунду жмут «Купить» на один товар. Пул соединений с базой забит, и не проходят даже покупки чайника, который в распродаже не участвует

Напишешь код так, чтобы горячий товар не утягивал за собой остальные: сейчас срывается больше 10 % обычных покупок, после правки меньше 1 %

исходный код

Панель Grafana «p99 резерва по потокам», исходный код

после правки

Панель Grafana «p99 резерва по потокам», после правки
Распродажа на нашем стенде: сколько ждёт покупатель обычного товара. До правки 3 секунды, после 50 мс.

Итог недели

За неделю ты подготовил магазин к распродаже и починил счётчик показов. На собесе рассказываешь, как это сделал и что при этом происходит внутри lock.

Неделя 2. Task, async/await и отмена · 13 уроков «Час скидок» проходит: покупки акции с 1 % до 100 %

Зачем async

  • Когда async ускоряет сервис
  • Откуда берутся потоки в пуле

Task

  • Чем таска отличается от потока
  • Куда девается исключение из таски
  • Как завернуть колбэк в Task
  • Как сто одновременных промахов кэша свести к одному походу в базу

async/await изнутри

  • Почему async не создаёт потоков
  • Что делает метод на await и кто его потом продолжает
  • Почему Thread.Sleep держит поток, а Task.Delay нет
  • Какие переменные уедут в кучу после await и сколько это стоит

Отмена

  • Клиент отвалился, вышел таймаут, хост останавливается: как отменить работу правильно

Видимость памяти

  • Почему поток не видит чужую запись
  • Что на самом деле гарантирует volatile и как заставить потоки видеть записи друг друга

Практика

«Час скидок» проходит: покупки акции с 1 % до 100 %

Маркетинг запускает «Час скидок» на 200 товаров и заводит правила прямо во время трафика. Каждый расчёт цены ходит в базу дважды: за правилами скидок и за базовой ценой. Пул кончается, покупатели получают таймауты. А один товар продали сорок раз за полцены

Правила скидок переедут в память, и покупатель не увидит цену, где половина скидок старые, а половина новые. Кэш базовой цены сведёт сто одновременных запросов за одной ценой к одному походу в базу. Вчерашнюю цену он за сегодняшнюю не выдаст

исходный код

Панель Grafana «p99 расчёта цены», исходный код

после правки

Панель Grafana «p99 расчёта цены», после правки
Одна цена во время акции считалась 10 секунд. После правки 25 мс.

Итог недели

За неделю ты убрал из расчёта цены почти все походы в базу, и акция перестала ложиться. На собесе объясняешь, как расчёт видит правила без блокировок и зачем склеивать одновременные промахи кэша.

Неделя 3. Где async ломается · 11 уроков Каталог тормозит, а сайт открывается: список товаров за 0,2 секунды вместо двухРевью PR коллеги: найти, что сломается ночью

Много задач сразу

  • Как ждать много задач сразу и куда деваются их ошибки
  • Почему пул добавляет потоки медленно и сервис встаёт при пустом процессоре
  • Во что компилятор превращает async-метод и как узнать его в профилировщике

Где ломается асинхронный код

  • Где продолжится метод после await в десктопе, старом ASP.NET и ASP.NET Core
  • Как .Result и .Wait() вешают сервис
  • Когда нужен ConfigureAwait(false)
  • Почему async void роняет процесс
  • Почему нельзя await внутри lock
  • Как данные запроса переживают await и почему ThreadLocal показывает чужое
  • Что искать на ревью в чужом async-коде

Параллелизм

  • Как раскидать вычисления по ядрам и почему на сервере не надо занимать все

Практика

Каталог тормозит, а сайт открывается: список товаров за 0,2 секунды вместо двух

Каталог ушёл в медленную миграцию. Остальные сервисы здоровы, а лёг весь сайт: витрина ждёт каталог без предела, и брошенные запросы продолжают висеть

После фичи витрина отвечает в срок, показывает карточку без цены или остатка, если их нет, и не копит запросы к больному сервису

исходный код

Панель Grafana «Доступность карточек», исходный код

после правки

Панель Grafana «Доступность карточек», после правки
Каталог тормозит, а витрина должна открывать карточки. Без правки в худший момент открывались две из трёх, с правкой открываются все.

Ревью PR коллеги: найти, что сломается ночью

Коллега ускорил уборку просроченных резервов: две реплики и параллельная обработка. Просит ревью до конца недели

Найдёшь минимум четыре проблемы и для каждой объяснишь, что случится под нагрузкой и при сбоях

Итог недели

Можешь рассказать, как сделал сайт, который работает, пока одна из зависимостей тормозит, и что нашёл в чужом коде на ревью.

Неделя 4. Сервис встал · 16 уроков Ночной инцидент: склад продал товар дважды

Почему сервис встал

  • Голодание пула: ломаешь сервис сам
  • Какие метрики смотреть первыми
  • Дамп: кто кого ждёт
  • Трейс: авария, которую не застал дамп
  • Как идти от симптома к причине
  • Три поломки разом

Тесты

  • Тест на гонку, который не зависит от удачи

Сверх задач курса

  • Ограниченная очередь: быстрый продюсер ждёт медленного консьюмера, и память не растёт
  • Как стримить данные из базы, не загружая всё в память
  • Когда ValueTask экономит, а когда ломает
  • Как рантайм пулит объекты
  • Lock-free и где он ломается
  • Как пул подбирает число потоков и почему порядок задач не обещан
  • Кто ждёт ответа базы, если поток отпущен
  • Почему одни блокировки дешевле других
  • Какую блокировку брать, когда читателей много, а писатель один

Практика

Ночной инцидент: склад продал товар дважды

В 03:07 просроченные резервы перестали сниматься. Процессор почти пустой, в журнале ни одной ошибки, а к утру горячие товары то нет в наличии, то проданы дважды. Это тот самый PR коллеги: его влили без ревью

Найдёшь причину по метрикам, починишь уборщик и данные склада и напишешь разбор инцидента для команды

исходный код

Панель Grafana «Просроченные резервы», исходный код

после правки

Панель Grafana «Просроченные резервы», после правки
За ночь набирается почти шесть тысяч просроченных резервов, которые никто не снял. После правки их нет.

Итог недели

Можешь рассказать, как нашёл, почему сервис встал ночью, починил данные и написал разбор инцидента. Когда сервис встаёт, знаешь, с какой команды начать.

Кто ведёт группу

Александр Алексеев

Техлид, сеньор, больше восьми лет коммерческой разработки на .NET.

Что изменится к 27 декабря

Сейчас27 декабря

На собесе спрашивают про нагрузку, а рассказать нечего

В репозитории пять починок с отчётами до и после: время ответа, доля покупок, деньги. Про каждую рассказываешь, что сломалось, что поменял и почему.

Почему сервис лёг, объясняешь на глаз

Считаешь узкое место в одну строку: сколько запросов, сколько длится каждый, сколько соединений в пуле.

Как сервис ведёт себя под нагрузкой, знаешь только из статей

Видел сам: где копится очередь, когда кончается пул соединений и почему сервис встаёт при пустом процессоре.

Сервис встал, и непонятно, с чего начать

Снимаешь дамп и показываешь, где встряли потоки.

На уточнении пытаешься угадать

Рассуждаешь от механизма: ты видел, как он ломается под нагрузкой.

Тарифы

Старт 29 ноября, четыре недели, последний созвон 27 декабря.

группа

Группа

Починишь пять инцидентов

40 000 ₽
  • Проект на четыре недели: пять инцидентов под нагрузкой, ревью PR коллеги и разбор ночной аварии
  • 55+ уроков: от устройства lock до разбора дампа упавшего сервиса
  • Эталон после выполнения: как решено, почему так и что могло пойти не так
  • Каждое решение проверяют тесты и нагрузка в k6
  • Живой созвон группы каждую неделю, полтора часа
  • Чат участников, отвечаю в тот же рабочий день
  • Доступ к урокам и проекту ещё год после конца группы

или 6 667 ₽ в месяц на полгода

советую его, всего 15 мест

С разбором

Сделаешь и сможешь об этом рассказать

60 000 ₽
  • Всё из «Группы»
  • Две самые сильные твои задачи превращаем в рассказ для собеса
  • Ты пишешь, что сломалось и как починил. Я правлю текст два раза: механизм, цифры до и после, выводы из графиков
  • Созвон 30 минут: рассказываешь вслух, я задаю уточнения, пока рассказ не перестанет сыпаться

Бонус

Финальный созвон, час

Час вдвоём после четвёртой недели. Проходим голосом все темы, с уточнениями, и в конце у тебя список, что подтянуть.

или 10 000 ₽ в месяц на полгода

3 места

Лично

Плюс созвон со мной каждую неделю

125 000 ₽
  • Всё из «С разбором»
  • Созвон один на один каждую неделю, час
  • Пишешь мне в личку в любой день, отвечаю в тот же день
  • На личных созвонах смотрим твой код и слабые темы

Бонус

Два месяца разборов после группы

Задали вопрос по многопоточке на собесе? Приноси, разберёмся. До трёх созвонов.

или 20 834 ₽ в месяц на полгода

Вопросы

Как оплатить?

Нажми «Занять место» у тарифа и впиши почту, на неё придут чек и доступ. Откроется страница оплаты: там можно сменить тариф и ввести промокод. Остались вопросы до оплаты — напиши мне в Telegram.

Сколько времени в неделю? Совмещу с работой?

Уроки недели: 11–16 штук по 5–10 минут, это час-два, в четвёртой неделе до трёх. Созвон: полтора часа. Остальное время уходит на код: одна-две задачи с тестами, нагрузочным прогоном и пулл-реквестом. Закладывай около десяти часов в неделю. Сдаёшь решение до конца недели.

Не успеваю по графику. Что будет?

Созвоны записываются, открытые уроки и проект остаются у тебя ещё год после конца группы. Решение можно сдать после срока, тесты проверят его так же.

Я мидл. Мне рано?

Нет, если пишешь бэкенд на C# и видел async в коде. Программа рассчитана на вход с уровня джуна или мидла.

Что нужно на компьютере?

Docker Desktop, .NET 10 и от 8 ГБ свободной памяти. Подойдут Rider 2025.3 и новее, Visual Studio 2026 или VS Code с C# Dev Kit. Visual Studio 2022 проекты на .NET 10 не откроет. Стенд целиком поднимается у тебя на машине.

На работе нет нагрузки. Потяну?

На это и рассчитано. Стенд поднимается у тебя, нагрузку подаёшь сам, графики смотришь в Grafana. В первой неделе есть урок про нагрузочный прогон: как его запускать и как читать графики.

Можно писать код с нейронкой?

Можно. Кода в задачах немного, магазин уже написан. Работа в другом: понять, почему сервис ложится под нагрузкой, что поменять и почему именно так. Это ты потом объясняешь команде.

Можно в рассрочку?

Да, на полгода, сумма та же, что при оплате сразу.

Можно оплатить из-за границы?

Да. На странице оплаты есть кнопка «Зарубежной картой»: доллары, евро или белорусские рубли. Если карта не пройдёт, напиши мне в Telegram, найдём другой способ.

Платит работодатель.

Напиши мне в Telegram, пришлю счёт и договор на юрлицо. Цена та же.

Дальше три варианта

  1. Ничего не менять. Остаёшься на крудах и ждёшь, что нагрузка когда-нибудь придёт сама.
  2. Разобраться самому. Рихтер, исходники рантайма, блог Стивена Тауба, свои эксперименты: всё это есть в открытом доступе. Стенда с нагрузкой и человека, который скажет, где ты ошибся, там нет.
  3. Пойти в группу. Четыре недели по графику, пять инцидентов под нагрузкой и созвон каждую неделю.

Займи место

Выбери тариф и впиши почту, дальше откроется страница оплаты. Продажи закрываются 26 ноября в 23:59 по Москве.

Тариф «С разбором»

На эту почту придут чек и доступ. Дальше страница оплаты: там же можно сменить тариф и ввести промокод.