Архитектура бэкенда
Что блокирует цикл: CPU-работа и синхронные вызовы
Эндпоинт health-check, который не делает ничего, кроме возврата 200 OK, начинает отваливаться по таймауту. Его никто не трогает; его код — две строки. Настоящая причина в трёх роутах отсюда: репортинговый эндпоинт вызывает JSON.parse на теле в 40 МБ, и те ~800 мс, что этот парс работает, единственный поток цикла занят, и каждый другой запрос — включая тривиальный health-check — сидит замороженным в очереди. Никто не писал медленный health-check. Кто-то написал одну медленную синхронную строку, и кооперативная конкурентность разнесла боль на весь процесс.
Один медленный колбэк стопорит всех
Выигрыш прошлого урока и его цена — один и тот же факт: колбэки выполняются до конца без вытеснения. Пока всё уступает быстро — await на I/O, быстрый возврат — тысячи соединений плавно чередуются. Но в момент, когда один колбэк делает синхронную работу, занимающую реальное время, цикл не может продвинуться к фазе poll, не может выполнить ни один другой I/O-колбэк, не может запустить ни один таймер. Цена не «этот запрос медленный». Это head-of-line blocking для всего процесса: каждый конкурентный запрос платит полную длительность, потому что все они ждут за одним колбэком, захватившим поток.
Это определяющий режим отказа модели. В сервере поток-на-соединение один медленный запрос замедляет тот поток; здесь один медленный синхронный отрезок замедляет все.
Обычные виновники
Блокирующая работа бывает двух видов: синхронные API, делающие I/O на потоке цикла, и CPU-bound вычисления, которые просто слишком долго идут между уступками.
- Синхронные I/O API —
fs.readFileSync,fs.writeFileSync,child_process.execSync. Они делают I/O на потоке цикла и могут застопорить его на сотни миллисекунд (синхронное чтение большого файла замерялось около 1200 мс). Асинхронные двойники (fs.promises.readFile) отдают работу и дают циклу продолжить. - Большой
JSON.parse/JSON.stringify— парсинг или сериализация многомегабайтного тела — это чистый CPU на потоке цикла; крупный парс замерялся около 800 мс замороженного цикла. - Синхронный crypto —
bcrypt.hashSyncпри реалистичном cost factor блокирует примерно 200–400 мс на вызов; под нагрузкой логина одна эта строка обрушивает пропускную способность. Хеширование,crypto.pbkdf2Sync, большойgzipSync. - Катастрофический regex (ReDoS) — паттерн с вложенными квантификаторами вроде
/A(B|C+)+D/против специально подобранной строки может откатываться экспоненциально; один задокументированный случай потратил ~3,7 секунды чистого CPU на одном входе. Поскольку это на потоке цикла, атакующий может заморозить весь сервер одним запросом — отказ в обслуживании.
Лаг цикла: увидеть это раньше пользователей
Не нужно ждать жалоб на таймауты, чтобы найти блокировку. Прямой сигнал — лаг event loop (он же event-loop delay): запланируй таймер на t мс и замерь, насколько поздно он реально сработал. Если setTimeout(fn, 0) стабильно бежит на 200 мс позже, цикл был занят 200 мс — это опоздание и есть блокировка, в числах. Node даёт perf_hooks.monitorEventLoopDelay() для гистограммы (p50/p99 лага), а инструменты вроде clinic.js выводят это; обычный продакшен-порог алерта — около 100 мс лага.
Почему это работает
Почему лаг цикла — лучший сигнал здоровья, чем загрузка CPU? CPU может показывать 100% по совершенно здоровой причине — цикл делает полезную, хорошо нарезанную работу и всё ещё уступает между порциями. Пользователям вредит не занятость CPU; вредит то, что цикл не возвращается к poll, чтобы обслужить ждущие сокеты. Лаг измеряет ровно этот разрыв: время между тем, когда колбэк должен был выполниться, и тем, когда цикл реально до него добрался. Сервер может сидеть на 60% CPU с 500 мс лага цикла (один жирный синхронный отрезок повторно) и быть куда больнее, чем на 95% CPU с 2 мс лага (ровная, уступающая работа). Поэтому старшие команды алертят на event-loop delay и event-loop utilization (ELU), а не только на CPU — лаг это метрика, коррелирующая с таймаутами, которые пользователи реально ощущают.
Мысленный тест
Прежде чем любая строка выполнится на потоке цикла, старший рефлекс — один вопрос: это ограничено и быстро или может бежать десятки миллисекунд на большом входе? Прочитать 2 КБ конфига синхронно на старте — нормально. Парсить произвольный пользовательский JSON неизвестного размера, хешировать пароль или сопоставлять пользовательскую строку с откатывающимся regex на пути запроса — нет; этому место вне цикла, что и есть следующий урок.
| Виновник блокировки | Примерное время заморозки | Почему блокирует | Направление фикса |
|---|---|---|---|
fs.readFileSync (большой) | ~1200 мс | I/O на потоке цикла | Асинхронный fs.promises |
JSON.parse (много МБ) | ~800 мс | Чистый CPU на цикле | Стрим / worker thread |
bcrypt.hashSync | ~200–400 мс/вызов | CPU на цикле | Асинхронный bcrypt (пул libuv) |
| Катастрофический regex (ReDoS) | секунды, контроль атакующего | Экспоненциальный откат на цикле | Безопасный regex / таймаут / валидация |
Тривиальный health-check отваливается по таймауту всякий раз, когда репортинговый роут запускает `JSON.parse` на теле в 40 МБ. Почему страдает health-check?
Почему лаг event loop часто лучший сигнал здоровья, чем загрузка CPU?
Почему катастрофически откатывающийся regex на пути запроса — это риск отказа в обслуживании именно в рантайме на event loop?
- 01Почему один медленный синхронный колбэк замораживает весь сервер, а не только свой запрос?
- 02Что обычно блокирует цикл и примерно насколько надолго замораживает его?
- 03Что такое лаг event loop, как его измерить и почему он лучше загрузки CPU как сигнал здоровья?
Сила кооперативной конкурентности — колбэки выполняются до конца без вытеснения — это и её единственный фатальный режим отказа: любой синхронный отрезок на потоке цикла замораживает все соединения разом, поэтому медленная строка в трёх роутах отсюда может выбить по таймауту двухстрочный health-check. Виновники делятся на синхронный I/O на цикле (fs.readFileSync, около 1200 мс), тяжёлый CPU между уступками (JSON.parse многомегабайтного тела около 800 мс, bcrypt.hashSync на 200–400 мс на вызов) и контролируемые атакующим катастрофические regex, которые откатываются секундами и превращают один запрос в отказ в обслуживании. Всё это видно раньше пользователей через лаг event loop — опоздание запланированного таймера, выводимое monitorEventLoopDelay и алертимое около 100 мс — что более правдивый сигнал здоровья, чем CPU, потому что занятый-и-уступающий нормален, а занятый-и-застопоренный нет. Рефлекс — спросить, ограничена ли любая строка на цикле и быстра или может бежать десятки миллисекунд на большом входе; медленным место полностью вне цикла, что и есть следующий урок: worker threads, пул libuv и нарезка CPU-работы.
встречается в185
- Задачи, микрозадачи и scheduler.yield()middle
- Точность таймеров, троттлинг и фоновая работаmiddle
- Event loop Node.js: фазы, nextTick и задержка циклаsenior
- Стратегии рендеринга: SSG, SSR, ISR, streaming и гидратацияjunior
- SSG, SSR, ISR, streaming и RSC — как работает каждая стратегияmiddle
- Цена гидратации: selective, progressive, острова, resumabilitymiddle
- Core Web Vitals: что измеряют LCP, INP и CLSjunior
- LCP: четыре фазы, одна доминирующая стоимостьmiddle
- INP: input delay, processing, presentationmiddle
- Lab vs field: почему они расходятся и как использовать каждыйmiddle
- Трейдоффы метрик, RUM-атрибуция и цикл CI+полеsenior
- Общая картина: от URL до LCP до INP как эстафетаjunior
- Восемь слоёв трассировки: от service worker до второй навигацииmiddle
- Пять канонических поломок: где производство стабильно ломаетсяsenior
- Метод трёх треков: чтение трасс и построение системы мониторингаsenior
- Что такое индекс и как он ускоряет запросыjunior
- Leading-column rule: почему порядок столбцов в composite-индексе важенmiddle
- Partial, expression и covering-индексыmiddle
- Типы индексов: GIN, GiST, BRIN, Hash, Bloom и HOT-обновленияmiddle
- Index-only scan, Visibility Map и INCLUDEsenior
- Типичные сбои в продакшне и аудит индексовsenior
- Упражнение по проектированию индексов: стратегия полнотекстового поискаsenior
- EXPLAIN и планы выполнения: что решает планировщик и почемуjunior
- Типы сканирования: Seq, Index, Bitmap, Index-Onlymiddle
- Алгоритмы соединения и каскад ошибок оценки строкmiddle
- pg_statistic, ANALYZE и производственная наблюдаемостьmiddle
- Расширенная статистика: исправление ошибок оценки для коррелированных колонокsenior
- Кеш планов, настройка константных стоимостей и внутренности планировщикаsenior
- Производственные режимы отказа и стабильность плановsenior
- Connection pool: зачем амортизировать стоимость backend Postgresjunior
- Режимы PgBouncer: session, transaction и statementmiddle
- Размер пула: формула (ядра × 2) + шпинделей и двухуровневый стекmiddle
- Исчерпание пула и idle-in-transaction: сценарий отказа в 3 ночиmiddle
- Миграция на transaction mode: план развёртывания и prepared statements в PgBouncer 1.21middle
- Процессная модель Postgres и почему увеличение max_connections снижает производительностьsenior
- Ландшафт пулеров 2026, serverless connection storms и полная таксономия отказовsenior
- ADD COLUMN: мгновенно в PG 11+ против перезаписи в старом Postgresjunior
- Режим отказа очереди блокировок: почему мгновенный DDL может заморозить базуmiddle
- Безопасные DDL-паттерны: NOT VALID, CONCURRENTLY и исправления небезопасных операцийmiddle
- Таксономия сбоев миграций и дисциплина продакшнаsenior
- Выбор ключа шарда: стратегии hash, range, list и directorymiddle
- Ко-локация и Citus: инвариант, делающий шардирование пригодным к использованиюmiddle
- Режим отказа hot shard: обнаружение, изоляция и долгосрочная политикаmiddle
- Онлайн-решардинг, 2PC и операционная стоимость шардированияsenior
- Семь актов: от CREATE TABLE до Citusjunior
- Акты 1–3 в глубину: схема, индексы и статистика планировщикаmiddle
- Акты 4–6 в глубину: MVCC bloat, connection pooling и безопасные миграцииmiddle
- Акт 7 в глубину: шардинг, co-location и семиуровневый каскад трейдоффовmiddle
- Наблюдаемость, антипаттерны и производственный триажsenior
- Биты в проводеjunior
- Математика задержкиmiddle
- Bufferbloat и перегрузкаsenior
- Граница физического уровняsenior
- Номера последовательности и состояние соединенияmiddle
- Управление потоком и перегрузкойmiddle
- BBR, производственная наблюдаемость и за пределами TCPsenior
- CDN: контент по соседствуjunior
- Anycast и GeoDNS: маршрутизация к ближайшему edgemiddle
- Многоуровневый кеш и Cache-Controlmiddle
- Заголовок Vary и cache keysmiddle
- Stale-while-revalidate и cache stampedesenior
- Edge workers и edge-side compositionsenior
- CDN: операции и observabilitysenior
- WebSocket: HTTP-апгрейд до постоянного соединенияjunior
- WebSocket vs SSE vs long-polling: выбор правильного транспортаmiddle
- Backpressure в WebSocket: когда клиенты не успеваютmiddle
- Реконнект: jittered backoff, thundering herd, восстановление сообщенийsenior
- WebSocket в масштабе: HTTP/2 мультиплексирование, permessage-deflate, C10Msenior
- WebSocket в production: прокси, безопасность и распределённая архитектураsenior
- Что делают обратные проксиjunior
- Алгоритмы балансировки: от round-robin до power-of-two-choicesmiddle
- L4 vs L7 балансировка и сохранение IP клиентаmiddle
- Health checks, connection draining и slow startmiddle
- Retry-бури, circuit breakers и load sheddingsenior
- Устойчивая архитектура LB: anycast, zone-aware маршрутизация и observabilitysenior
- Почему QUIC, а не TCP+TLSjunior
- QUIC-потоки и head-of-line blockingjunior
- Объединённое рукопожатие и 1-RTTmiddle
- Connection ID и миграция сетиmiddle
- Обнаружение потерь и управление перегрузкойmiddle
- Возобновление 0-RTT и шифрование пакетовsenior
- Развёртывание и стоимость CPUsenior
- DDoS: что это и почему работаетjunior
- Атаки усиления и истощение состоянияmiddle
- Ограничение скорости: алгоритмы и архитектураmiddle
- WAF, межсетевые экраны, mTLS и HSTSmiddle
- Отравление DNS-кэша и BGP-перехватsenior
- Эшелонированная защита и экономика атакsenior
- Двенадцать слоёв: один URL, семь действующих лицjunior
- DNS, TCP, TLS по очереди: куда уходят миллисекундыmiddle
- Критический путь рендеринга и Core Web Vitalsmiddle
- Перехват прокси и шлюзы безопасности: rate limiter, WAF, mTLSmiddle
- Альтернативные пути: QUIC 0-RTT, WebSocket upgrade, миграция соединенияmiddle
- Наблюдаемость: распределённые трейсы, USE/RED и семплированиеsenior
- Устойчивость: каскадные повторы, circuit breakers и error budgetsenior
- Что такое три сигнала: метрики, логи, трейсыjunior
- Метрики и cardinality: cost-модель time-series databasemiddle
- Логи и объём: cost-модель структурного логированияmiddle
- Трейсы и сэмплирование: cost-модель distributed tracingmiddle
- Join-ключи и exemplar''''ы: как три сигнала становятся компонуемымиmiddle
- Observability 2.0: широкие события и сдвиг стоимостиsenior
- Режимы сбоя и инженерная практика: cardinality budget''''ы, PII и сэмплированиеsenior
- Зачем нужны структурные логи: дневник против таблицыjunior
- Схема продакшн-лога: поля, которые несёт каждая строкаmiddle
- Log levels и маршрутизация алертовmiddle
- Стратегии sampling и стоимость логовmiddle
- PII-редакция и log injectionsenior
- Propagation trace-контекста в логахsenior
- OTel Logs Data Model и audit-логи как подсистемаsenior
- Сигналы OTel, Semantic Conventions и проводной формат OTLPmiddle
- Авто-инструментирование и ручные спаны: правило 80/20 в OTelmiddle
- Collector OTel: receivers, processors, exporters и паттерны развёртыванияmiddle
- Стратегии сэмплирования: head, tail и parent-basedmiddle
- Vendor-нейтральность, eBPF-инструментирование, Operator и OTel в браузере и serverlesssenior
- Эксплуатация OTel Collector: надёжность, version skew, режимы отказа и управлениеsenior
- RED и USE: два чек-листа, одна дисциплина триажаjunior
- Инструментация RED в Prometheus: счётчики, гистограммы и дисциплина cardinalitymiddle
- USE на Linux: CPU, память, диск, сеть и PSImiddle
- Golden signals, структура дашборда и auto-RED в service meshmiddle
- Cardinality как драйвер затрат: label, PII, exemplars и семплированиеmiddle
- Native histograms, SLO и паттерны production-сбоевmiddle
- Выбор SLI и SLO-целей: отношения, не ощущенияmiddle
- Multi-window multi-burn-rate-алертинг: почему AND лучше ORmiddle
- Error budget policy, latency SLO и составные journeysmiddle
- Iceberg SLI, математика составного SLO и SLA vs SLOsenior
- Flame graph: читаем картинку, которая показывает, куда ушло времяjunior
- Sampling vs instrumentation profiling: почему 99 Гц побеждает в productionmiddle
- Типы профилей: CPU, память, off-CPU, mutex — какой когда братьmiddle
- Continuous profiling: always-on flame graphs с eBPF и корреляцией trace-idmiddle
- Как flame graph строится из сэмплов и как использовать его в productionmiddle
- Linux perf, внутренности eBPF, PGO и ограничения sampling''''аsenior
- Profiling в production: безопасность, war stories, OTel profiles и дизайн инфраструктурыsenior
- Debugging-воронка: SLO → RED → trace → profilejunior
- Архитектура OTel: один SDK, четыре сигнала, один wire-форматmiddle
- Экономия на observability: удерживаем затраты в пределах 5% inframiddle
- Масштаб, безопасность и ROI наблюдаемых системsenior
- Сначала профиль: измерь куда реально уходит времяjunior
- Закон Амдала и self-time: потолок любого ускорения, которое ты можешь выпуститьmiddle
- Измерительный цикл: микробенч, макробенч, prod-профиль, эффект наблюдателяmiddle
- Чтение флейм-графов: формы, профайлеры по языкам и 60-секундный сканmiddle
- Статистические baseline''''ы: почему один запуск — не измерениеmiddle
- История профайлеров и ловушки микробенчей: от Кнута до GWPsenior
- Hardware counters, профили холодного старта и безопасность профилейsenior
- Непрерывное профилирование в масштабе: затраты, CI-гейты, корреляция с трейсами и антипаттерныsenior
- Что делает путь горячим: симптом против причиныjunior
- Пять форм hotspot''''а: CPU, аллокации, кэш, лок, syscallmiddle
- Чтение parent и child chains: где применять правкуmiddle
- JIT deopt, цикл fix-and-verify и PR-time профилированиеmiddle
- Аппаратные счётчики и Intel TMA: диагностика подкатегорийsenior
- False sharing и горячие пути нативных мостовsenior
- Горячие пути в production: безопасность, хвостовая латентность и происхождение инструментовsenior
- Иерархия памяти: почему расстояние важнее числа операцийjunior
- Row-major vs column-major: порядок доступа и разрыв в 9xjunior
- Branch prediction: 10–30 циклов штрафа за неожиданный ifmiddle
- Hardware prefetcher, TLB и memory-level parallelismsenior
- Основы GC: за что рантайм берёт налогjunior
- Алгоритмы GC: поколенческая гипотеза, concurrent marking и write barriermiddle
- GC tradeoffs: пауза, throughput, память и давление аллокацийmiddle
- Настройка GC: пейсинг, форма кучи и наблюдаемость аллокацийmiddle
- Внутреннее устройство GC: tri-color инвариант, write barriers и глубокое погружение в рантаймыsenior
- GC в production: наблюдаемость, безопасность, edge cases и управление флотомsenior
- N+1: одна логическая операция, много round-trip''''овjunior
- Семейства фиксов: JOIN, IN, preload и DataLoadermiddle
- Обнаружение N+1: query logs, APM traces и CI gatesmiddle
- DataLoader: батчинг по дереву резолверовmiddle
- Кросс-протокольный N+1: HTTP fan-out и Redis MGETmiddle
- N+1 в масштабе: исчерпание пула, изменения планов и денормализацияsenior
- Batching: амортизируй фиксированную цену каждой операцииjunior
- Окно батчинга: размер и время ожиданияmiddle
- Batching в Kafka и Postgresmiddle
- io_uring и наблюдаемость пакетированияmiddle
- От Nagle до io_uring: эволюция пакетированияmiddle
- Backpressure, изоляция сбоев и безопасность батчей в продакшенеsenior
- Что на самом деле стоит bundle: download, parse, compile, executejunior
- Core Web Vitals: LCP, INP и CLSmiddle
- Code splitting: route-level, component-level, vendor splittingmiddle
- Tree shaking и compression: удаляем то, что не используемmiddle
- Third-party scripts: тихий убийца бюджетаmiddle
- CI enforcement и RUM: делаем бюджеты рабочимиmiddle
- V8 JIT-пайплайн, HTTP-приоритеты и безопасность bundlesenior
- Цикл performance: дисциплина, а не проектjunior
- Классификация и исправление: сопоставление family bottleneck с методамиmiddle
- Observability-стек и CI gates: ловить регрессии до выпускаmiddle
- От инцидента к enforcement: SLO burn до верифицированного исправления за 35 минутmiddle
- Культура, экономика и масштаб performancesenior