Производительность
Пять форм hotspot''''а: CPU, аллокации, кэш, лок, syscall
Два широких leaf’а во flame graph на первый взгляд выглядят одинаково. Один требует лучшего алгоритма. Второй требует переиспользования буферов. Применить лучший алгоритм к allocation-bound-пути — значит получить 1,05x вместо предсказанных 3x. Два часа работы ради пяти процентов. Категория определяет toolbox.
Пять категорий
Широкий leaf подходит под одну из пяти категорий. Прочтение второго слоя профиля — не только «какая функция», но «что функция делает» — даёт классификацию.
1. CPU-bound алгоритмический
Функция исполняет много инструкций. CPU исполняет алгоритм.
Сигнатура: большой self-time, узкие children, высокий instructions-per-second, IPC в диапазоне 2–4. В CPU flame graph leaf занимает настоящую ширину без GC или kernel-фреймов рядом.
Семейство правок: лучший алгоритм, векторизация (SIMD), inline-pragma, специализация hot-path’а для частого случая.
2. Allocation-bound
Функция (или её caller) так много аллоцирует, что сборщик мусора доминирует над wall-time.
Сигнатура: runtime.scanobject, gc, mallocgc или malloc появляются широкими рядом с горячим leaf’ом. CPU-профиль винит GC-machinery, не application-логику. Переключись на allocation-профиль, чтобы найти аллокатор на стороне приложения.
Семейство правок: пулинг объектов, переиспользование буферов (sync.Pool), in-place мутация, struct-of-arrays, предварительное выделение контейнеров нужного размера.
3. Cache-bound
Функция трогает память по паттерну, который аппаратный prefetcher не может предсказать. CPU стопорится, ожидая данные из RAM вместо L1/L2.
Сигнатура: низкий IPC (<1), высокий cache-miss rate (15%+), низкий instructions-per-second несмотря на широкий CPU-фрейм. Аппаратные счётчики подтверждают тип stall (L3 miss, DRAM stall).
Семейство правок: смена data-layout’а (contiguous arrays вместо pointer-chased linked lists, struct-of-arrays вместо array-of-structs), смена порядка итерации для улучшения spatial locality, prefetch-подсказки.
4. Lock-bound
Функция тратит время в ожидании mutex’а или канала.
Сигнатура: широкая в mutex/block/off-CPU профиле, узкая в CPU-профиле. Функция off-CPU, не работает. Wall-clock time высокий; CPU time низкий.
Семейство правок: lock-free структуры данных, более гранулярные локи, шардированное состояние, read-write локи для read-heavy-путей, eventual consistency для устранения shared state.
5. Syscall-bound
Функция тратит время в ядре — чтение, запись, сетевой I/O или ожидание на futex.
Сигнатура: kernel-фреймы (read, write, recv, futex) видны во flame graph с поддержкой kernel-символов. Доминирует off-CPU время. Может проявляться как частые узкие kernel-entry вместо одного широкого leaf’а.
Семейство правок: батчинг syscall’ов (один writev вместо десяти write), большие I/O-буферы, io_uring для async kernel I/O, memory-mapped I/O, полное устранение syscall’а там, где данные могут оставаться в user space.
| Категория | Сигнатура в профиле | Семейство правок |
|---|---|---|
| CPU-bound | Высокий self-time, IPC 2–4 | Лучший алгоритм, SIMD, специализация |
| Allocation-bound | Широкие GC-фреймы (mallocgc, scanobject) | Пулинг, переиспользование буферов, SoA |
| Cache-bound | IPC <1, высокий cache-miss rate | Смена data layout, contiguous arrays |
| Lock-bound | Широкий off-CPU, узкий on-CPU | Lock-free, шардирование, мелкие локи |
| Syscall-bound | Kernel-фреймы во flame graph | Батчинг syscall’ов, io_uring, буферы |
- Типовой IPC compute-bound кода
- 2–4 инстр./цикл
- Типовой IPC memory-bound кода
- 0,3–0,8 инстр./цикл
- Штраф L1 cache miss
- ~5 циклов
- Штраф L3 cache miss → DRAM
- ~150–300 циклов
- Штраф branch mispredict
- ~15–25 циклов
- Цена одного deopt + recompile (V8)
- ~10–100 мкс
- Round-trip syscall
- ~1–5 мкс
- futex lock contention wakeup
- ~5–50 мкс
Классификация hotspot’а на практике
Классифицируй hotspot до выбора правки
1/3Функция показывает IPC 0,4 и cache-miss rate 15%. Какова категория и какое семейство правок она предполагает?
После правки локальный hotspot сжался на 60%, но p99 сервиса не изменился. Что скорее всего это означает?
- 01Разбери пять категорий hot path'ов с одним характерным признаком каждой в профиле и соответствующим семейством правок.
- 02Go API показывает runtime.mallocgc на 18% и runtime.scanobject на 14% в CPU-профиле. Какова категория и каков следующий диагностический шаг?
Пять категорий hotspot’ов — CPU, аллокации, кэш, лок, syscall — у каждой чёткая сигнатура в профиле: IPC и self-time для CPU-bound, GC-фреймы для allocation-bound, низкий IPC с высоким cache-miss для cache-bound, широкий off-CPU но узкий on-CPU для lock-bound, kernel-фреймы для syscall-bound. Диагноз занимает минуты (снять нужный вторичный профиль, прочитать IPC или miss-rate); семейство правок следует механически. Выбрать неверное семейство — значит потратить всю работу впустую. Следующий урок разбирает, как читать parent и child chains, чтобы локализовать правку на верном уровне дерева вызовов.
- Аппаратные счётчики и Intel TMA: диагностика подкатегорийsenior
- False sharing и горячие пути нативных мостовsenior
- Горячие пути в production: безопасность, хвостовая латентность и происхождение инструментовsenior
- Горячие пути: диагностируй и почини две формыsenior
- Горячие пути: тест с выбором ответаsenior
- Горячие пути: чтение кода и счётчиковsenior
- Горячие пути: тест на свободное припоминаниеsenior
встречается в159
- Путь запроса: семь остановок от сокета до ответаjunior
- Accept и парсинг: от очереди ядра до типизированного запросаmiddle
- Маршрутизация и middleware: что выполняется и в каком порядкеmiddle
- Обработчик и ответ: от бизнес-логики до байтов на проводеmiddle
- Стриминг и backpressure: когда клиент читает медленнее, чем вы пишетеsenior
- Таймауты и хвостовая задержка: бюджеты, дедлайны и ловушка fan-outsenior
- Middleware и DI: два паттерна, формирующие любой backendjunior
- Пишем middleware: сигнатуры, next() и три модели фреймворковmiddle
- Инверсия управления: как зависимости добираются до классаmiddle
- Скоупы и время жизни DI: singleton, request, transientmiddle
- DI как шов для тестов: фейки, моки и граница, которая важнаsenior
- DI-контейнеры в продакшене: графы разрешения, циклы и когда не стоитsenior
- Блокирующий vs неблокирующий I/O: два способа ждатьjunior
- Event loop: один поток, упорядоченные фазыmiddle
- Что блокирует цикл: CPU-работа и синхронные вызовыmiddle
- Вынос CPU-работы: worker threads и пул libuvmiddle
- Backpressure и ограниченная конкурентностьsenior
- Пропускная способность под нагрузкой: хвостовая задержка и насыщениеsenior
- Зачем пул: цена создания соединенияjunior
- Размер пула: почему больше не значит быстрееmiddle
- Взятие и таймауты: очередь ожидания — настоящий дроссель задержкиmiddle
- Стратегии retry: backoff, jitter и thundering herdmiddle
- Наблюдаемость, production-инциденты и дизайн для глобального масштабаsenior
- Задачи, микрозадачи и scheduler.yield()middle
- Точность таймеров, троттлинг и фоновая работаmiddle
- Event loop Node.js: фазы, nextTick и задержка циклаsenior
- Стратегии рендеринга: SSG, SSR, ISR, streaming и гидратацияjunior
- SSG, SSR, ISR, streaming и RSC — как работает каждая стратегияmiddle
- Цена гидратации: selective, progressive, острова, resumabilitymiddle
- Core Web Vitals: что измеряют LCP, INP и CLSjunior
- LCP: четыре фазы, одна доминирующая стоимостьmiddle
- INP: input delay, processing, presentationmiddle
- Lab vs field: почему они расходятся и как использовать каждыйmiddle
- Трейдоффы метрик, RUM-атрибуция и цикл CI+полеsenior
- Общая картина: от URL до LCP до INP как эстафетаjunior
- Восемь слоёв трассировки: от service worker до второй навигацииmiddle
- Пять канонических поломок: где производство стабильно ломаетсяsenior
- Метод трёх треков: чтение трасс и построение системы мониторингаsenior
- Что такое индекс и как он ускоряет запросыjunior
- Leading-column rule: почему порядок столбцов в composite-индексе важенmiddle
- Partial, expression и covering-индексыmiddle
- Типы индексов: GIN, GiST, BRIN, Hash, Bloom и HOT-обновленияmiddle
- Index-only scan, Visibility Map и INCLUDEsenior
- Типичные сбои в продакшне и аудит индексовsenior
- Упражнение по проектированию индексов: стратегия полнотекстового поискаsenior
- EXPLAIN и планы выполнения: что решает планировщик и почемуjunior
- Типы сканирования: Seq, Index, Bitmap, Index-Onlymiddle
- Алгоритмы соединения и каскад ошибок оценки строкmiddle
- pg_statistic, ANALYZE и производственная наблюдаемостьmiddle
- Расширенная статистика: исправление ошибок оценки для коррелированных колонокsenior
- Кеш планов, настройка константных стоимостей и внутренности планировщикаsenior
- Производственные режимы отказа и стабильность плановsenior
- Connection pool: зачем амортизировать стоимость backend Postgresjunior
- Режимы PgBouncer: session, transaction и statementmiddle
- Размер пула: формула (ядра × 2) + шпинделей и двухуровневый стекmiddle
- Исчерпание пула и idle-in-transaction: сценарий отказа в 3 ночиmiddle
- Миграция на transaction mode: план развёртывания и prepared statements в PgBouncer 1.21middle
- Процессная модель Postgres и почему увеличение max_connections снижает производительностьsenior
- Ландшафт пулеров 2026, serverless connection storms и полная таксономия отказовsenior
- ADD COLUMN: мгновенно в PG 11+ против перезаписи в старом Postgresjunior
- Режим отказа очереди блокировок: почему мгновенный DDL может заморозить базуmiddle
- Безопасные DDL-паттерны: NOT VALID, CONCURRENTLY и исправления небезопасных операцийmiddle
- Таксономия сбоев миграций и дисциплина продакшнаsenior
- Выбор ключа шарда: стратегии hash, range, list и directorymiddle
- Ко-локация и Citus: инвариант, делающий шардирование пригодным к использованиюmiddle
- Режим отказа hot shard: обнаружение, изоляция и долгосрочная политикаmiddle
- Онлайн-решардинг, 2PC и операционная стоимость шардированияsenior
- Семь актов: от CREATE TABLE до Citusjunior
- Акты 1–3 в глубину: схема, индексы и статистика планировщикаmiddle
- Акты 4–6 в глубину: MVCC bloat, connection pooling и безопасные миграцииmiddle
- Акт 7 в глубину: шардинг, co-location и семиуровневый каскад трейдоффовmiddle
- Наблюдаемость, антипаттерны и производственный триажsenior
- Биты в проводеjunior
- Математика задержкиmiddle
- Bufferbloat и перегрузкаsenior
- Граница физического уровняsenior
- Номера последовательности и состояние соединенияmiddle
- Управление потоком и перегрузкойmiddle
- BBR, производственная наблюдаемость и за пределами TCPsenior
- CDN: контент по соседствуjunior
- Anycast и GeoDNS: маршрутизация к ближайшему edgemiddle
- Многоуровневый кеш и Cache-Controlmiddle
- Заголовок Vary и cache keysmiddle
- Stale-while-revalidate и cache stampedesenior
- Edge workers и edge-side compositionsenior
- CDN: операции и observabilitysenior
- WebSocket: HTTP-апгрейд до постоянного соединенияjunior
- WebSocket vs SSE vs long-polling: выбор правильного транспортаmiddle
- Backpressure в WebSocket: когда клиенты не успеваютmiddle
- Реконнект: jittered backoff, thundering herd, восстановление сообщенийsenior
- WebSocket в масштабе: HTTP/2 мультиплексирование, permessage-deflate, C10Msenior
- WebSocket в production: прокси, безопасность и распределённая архитектураsenior
- Что делают обратные проксиjunior
- Алгоритмы балансировки: от round-robin до power-of-two-choicesmiddle
- L4 vs L7 балансировка и сохранение IP клиентаmiddle
- Health checks, connection draining и slow startmiddle
- Retry-бури, circuit breakers и load sheddingsenior
- Устойчивая архитектура LB: anycast, zone-aware маршрутизация и observabilitysenior
- Почему QUIC, а не TCP+TLSjunior
- QUIC-потоки и head-of-line blockingjunior
- Объединённое рукопожатие и 1-RTTmiddle
- Connection ID и миграция сетиmiddle
- Обнаружение потерь и управление перегрузкойmiddle
- Возобновление 0-RTT и шифрование пакетовsenior
- Развёртывание и стоимость CPUsenior
- DDoS: что это и почему работаетjunior
- Атаки усиления и истощение состоянияmiddle
- Ограничение скорости: алгоритмы и архитектураmiddle
- WAF, межсетевые экраны, mTLS и HSTSmiddle
- Отравление DNS-кэша и BGP-перехватsenior
- Эшелонированная защита и экономика атакsenior
- Двенадцать слоёв: один URL, семь действующих лицjunior
- DNS, TCP, TLS по очереди: куда уходят миллисекундыmiddle
- Критический путь рендеринга и Core Web Vitalsmiddle
- Перехват прокси и шлюзы безопасности: rate limiter, WAF, mTLSmiddle
- Альтернативные пути: QUIC 0-RTT, WebSocket upgrade, миграция соединенияmiddle
- Наблюдаемость: распределённые трейсы, USE/RED и семплированиеsenior
- Устойчивость: каскадные повторы, circuit breakers и error budgetsenior
- Что такое три сигнала: метрики, логи, трейсыjunior
- Метрики и cardinality: cost-модель time-series databasemiddle
- Логи и объём: cost-модель структурного логированияmiddle
- Трейсы и сэмплирование: cost-модель distributed tracingmiddle
- Join-ключи и exemplar''''ы: как три сигнала становятся компонуемымиmiddle
- Observability 2.0: широкие события и сдвиг стоимостиsenior
- Режимы сбоя и инженерная практика: cardinality budget''''ы, PII и сэмплированиеsenior
- Зачем нужны структурные логи: дневник против таблицыjunior
- Схема продакшн-лога: поля, которые несёт каждая строкаmiddle
- Log levels и маршрутизация алертовmiddle
- Стратегии sampling и стоимость логовmiddle
- PII-редакция и log injectionsenior
- Propagation trace-контекста в логахsenior
- OTel Logs Data Model и audit-логи как подсистемаsenior
- Сигналы OTel, Semantic Conventions и проводной формат OTLPmiddle
- Авто-инструментирование и ручные спаны: правило 80/20 в OTelmiddle
- Collector OTel: receivers, processors, exporters и паттерны развёртыванияmiddle
- Стратегии сэмплирования: head, tail и parent-basedmiddle
- Vendor-нейтральность, eBPF-инструментирование, Operator и OTel в браузере и serverlesssenior
- Эксплуатация OTel Collector: надёжность, version skew, режимы отказа и управлениеsenior
- RED и USE: два чек-листа, одна дисциплина триажаjunior
- Инструментация RED в Prometheus: счётчики, гистограммы и дисциплина cardinalitymiddle
- USE на Linux: CPU, память, диск, сеть и PSImiddle
- Golden signals, структура дашборда и auto-RED в service meshmiddle
- Cardinality как драйвер затрат: label, PII, exemplars и семплированиеmiddle
- Native histograms, SLO и паттерны production-сбоевmiddle
- Выбор SLI и SLO-целей: отношения, не ощущенияmiddle
- Multi-window multi-burn-rate-алертинг: почему AND лучше ORmiddle
- Error budget policy, latency SLO и составные journeysmiddle
- Iceberg SLI, математика составного SLO и SLA vs SLOsenior
- Flame graph: читаем картинку, которая показывает, куда ушло времяjunior
- Sampling vs instrumentation profiling: почему 99 Гц побеждает в productionmiddle
- Типы профилей: CPU, память, off-CPU, mutex — какой когда братьmiddle
- Continuous profiling: always-on flame graphs с eBPF и корреляцией trace-idmiddle
- Как flame graph строится из сэмплов и как использовать его в productionmiddle
- Linux perf, внутренности eBPF, PGO и ограничения sampling''''аsenior
- Profiling в production: безопасность, war stories, OTel profiles и дизайн инфраструктурыsenior
- Debugging-воронка: SLO → RED → trace → profilejunior
- Архитектура OTel: один SDK, четыре сигнала, один wire-форматmiddle
- Экономия на observability: удерживаем затраты в пределах 5% inframiddle
- Масштаб, безопасность и ROI наблюдаемых системsenior