Сети и протоколы
Формат WebSocket-фрейма: opcodes, маскирование, фрагментация
После WebSocket-handshake HTTP-парсер исчезает. По проводу идёт компактный бинарный формат, несущий каждое сообщение — текст, бинарные данные, keepalive-пинги и graceful close — при накладных расходах всего от 2 байт. Понимание этого формата отделяет «как-то работает» от «точно знаю, что сломалось».
Анатомия заголовка фрейма
WebSocket-фрейм начинается с 2 обязательных байт, за которыми следуют опциональные поля расширения длины и masking-ключа, а затем сам payload:
0 1 2 3
0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1
+-+-+-+-+-------+-+-------------+-------------------------------+
|F|R|R|R| opcode|M| Payload len | Extended payload length |
|I|S|S|S| (4) |A| (7) | (16/64) |
|N|V|V|V| |S| | (if payload len==126/127) |
| |1|2|3| |K| | |
+-+-+-+-+-------+-+-------------+-------------------------------+
| Masking-key (если MASK=1, 4 байта) |
+---------------------------------------------------------------+
| Payload data |
+---------------------------------------------------------------+Байт 1:
- FIN (бит 7) —
1означает, что это последний (или единственный) фрагмент сообщения. - RSV1-3 (биты 6-4) — зарезервированы для расширений (например,
permessage-deflateвыставляет RSV1=1). - Opcode (биты 3-0) — тип данных фрейма:
| Opcode | Значение |
|---|---|
0x0 | Continuation-фрейм |
0x1 | Текстовые данные (UTF-8) |
0x2 | Бинарные данные |
0x8 | Close |
0x9 | Ping |
0xA | Pong |
Байт 2:
- MASK (бит 7) —
1= payload XOR-маскирован (клиент→сервер всегда; сервер→клиент никогда). - Длина payload (биты 6-0):
0–125— реальная длина.126— следующие 2 байта (uint16) содержат реальную длину.127— следующие 8 байт (uint64) содержат реальную длину.
Итоговые накладные расходы фрейма:
- Маленький фрейм сервер→клиент: 2 байта только заголовок.
- Маленький фрейм клиент→сервер: 2 байта заголовок + 4 байта masking-ключ = 6 байт.
- Минимальный заголовок фрейма (без маски, payload ≤125 байт)
- 2 байта
- Накладные расходы клиент→сервер (маска обязательна)
- 6 байт
- Максимальный payload в 7-битном поле длины
- 125 байт
- Расширение длины для payload 126–65535 байт
- +2 байта (uint16)
- Расширение длины для бо́льших payload
- +8 байт (uint64)
- Максимальный payload control-фреймов (ping/pong/close)
- 125 байт
Почему клиентские фреймы должны маскироваться
Маскирование — не шифрование, а защита от cache-poisoning. Вот атака, которую оно предотвращает:
Вредоносный JavaScript на site-a.com открывает WebSocket-соединение к промежуточному прокси. Затем отправляет байты, которые выглядят как корректный HTTP-ответ. Наивный stateless-прокси воспринимает эти байты как HTTP и возвращает их другим клиентам — отравляя кеш.
С маскированием клиент XOR-ирует каждый байт payload с 4-байтным случайным ключом из заголовка фрейма:
masked_byte[i] = payload[i] XOR mask_key[i % 4]Получатель XOR-ирует обратно тем же ключом, восстанавливая исходный payload. Поскольку masking-ключ случаен для каждого фрейма, JavaScript на вредоносном сайте не может заранее сконструировать байты, которые одновременно выглядели бы как HTTP-ответ И корректно раскодировались под XOR. Атака становится нереализуемой.
Серверные фреймы не маскируются, потому что JavaScript на site-a.com всё равно не может прочитать сырые байты ответа с site-b.com (same-origin policy это блокирует).
Фрагментация и continuation-фреймы
Большое сообщение можно разбить на несколько фреймов. Правила:
- Первый фрагмент: реальный opcode (
0x1или0x2), FIN=0. - Средние фрагменты: opcode
0x0(continuation), FIN=0. - Последний фрагмент: opcode
0x0, FIN=1.
Получатель собирает фрагменты по порядку. Control-фреймы (ping, pong, close) не могут фрагментироваться и ограничены 125 байтами; они могут приходить между фрагментами данных.
Control-фреймы: ping, pong, close
Ping (0x9): keepalive-проба. Получатель обязан ответить pong с тем же payload. Прокси часто имеют idle timeout (обычно 60 секунд); ping каждые 25–30 секунд сбрасывает таймер прокси и поддерживает соединение живым.
Pong (0xA): обязательный ответ на ping. Можно слать без запроса как односторонний heartbeat.
Close (0x8): инициирует closing-handshake. Тело содержит опциональный 2-байтный код статуса и UTF-8 причину. Стандартные коды:
| Код | Значение |
|---|---|
| 1000 | Нормальное закрытие |
| 1001 | Going away (перезапуск сервера, вкладка закрыта) |
| 1006 | Аномальное закрытие (close-фрейм не получен; генерируется реализацией) |
| 1008 | Нарушение политики |
| 1011 | Непредвиденная ошибка |
| 1013 | Попробуйте позже |
После отправки close-фрейма каждая сторона должна дождаться ответного close-фрейма, прежде чем закрывать TCP-соединение.
Почему это работает
Почему RSV-биты важны для расширений. Расширение permessage-deflate (RFC 7692), согласованное в handshake, использует RSV1=1 для сигнализации, что payload сжат DEFLATE. Сервер, не согласовавший это расширение и увидевший RSV1=1, обязан закрыть соединение с кодом 1002 (ошибка протокола). Такая строгая проверка гарантирует, что расширения не могут незаметно повредить фреймы.
Разбор небольшого WebSocket-фрейма
1/3Почему Sec-WebSocket-Key клиента преобразуется в Sec-WebSocket-Accept через добавление фиксированного GUID, хеширование и base64-кодирование?
Почему фреймы клиент→сервер должны маскироваться, а фреймы сервер→клиент — нет?
Упорядочите шаги closing-handshake WebSocket:
- 1 Одна сторона отправляет close-фрейм с кодом 1000
- 2 Другая сторона получает его и отвечает close-фреймом
- 3 Отправитель второго close-фрейма закрывает TCP-соединение
- 4 Обе стороны переходят в состояние closed
- 01Объясните, почему маскирование защищает от cache-poisoning, даже несмотря на то, что masking-ключ передаётся открытым текстом внутри фрейма.
- 02Чат-сервер рассылает сообщение 10 000 подключённых клиентов. Рассылка занимает 100 мс, хотя RTT сети всего 5 мс. Откуда берутся остальные 95 мс?
- 03Для чего нужен FIN-бит в WebSocket-фрейме и как он взаимодействует с opcode?
Каждое WebSocket-сообщение передаётся в одном или нескольких фреймах. 2-байтный заголовок кодирует FIN-бит (флаг последнего фрагмента), opcode (текст, бинарные данные, ping, pong, close), флаг MASK и длину payload. Клиентские фреймы обязаны XOR-ировать payload с случайным 4-байтным masking-ключом для защиты от cache-poisoning, где вредоносный JavaScript конструирует байты, похожие на HTTP-ответы; серверные фреймы никогда не маскируются, потому что same-origin policy и так блокирует чтение JavaScript cross-origin сырых байт. Большие сообщения могут фрагментироваться через opcode 0x0 (continuation) с FIN=0 на всех фрагментах кроме последнего. Control-фреймы (ping, pong, close) несут не более 125 байт и не могут фрагментироваться. Close-фреймы несут 2-байтный код статуса; 1000 — нормальное закрытие, 1006 генерируется когда close-фрейм не был получен.
встречается в152
- Почему GraphQL получает N+1junior
- Механика DataLoader: батчинг на границе тикаmiddle
- Контракты batch-функции: порядок, формы, ошибкиmiddle
- Federation и lookahead: батчинг за пределами DataLoadermiddle
- Защита сложности запросов: depth, cost, persisted queriesmiddle
- Senior GraphQL API: scheduling-контракт, изоляция арендаторов, наблюдаемостьsenior
- Зачем идемпотентность: безопасные retryjunior
- Серверный state machine: четыре состояния idempotency keymiddle
- Outbox и inbox: effectively-once через dual-write границуmiddle
- Конкурентность и архитектура кеша для идемпотентности на масштабеsenior
- Наблюдаемость, production-инциденты и дизайн для глобального масштабаsenior
- Event loop: один поток, три очередиjunior
- Задачи, микрозадачи и scheduler.yield()middle
- Голодание микрозадач, длинные задачи и LoAFsenior
- Event loop Node.js: фазы, nextTick и задержка циклаsenior
- React, Vue и наблюдаемость INP в продакшенеsenior
- Render pipeline: шесть стадий от байтов до пикселейjunior
- Цена стадий и модель процесса рендерераmiddle
- Инвалидация, dirty-биты и containmiddle
- Слои композитора: продвижение, перекрытие и память GPUmiddle
- Флейм-стрип DevTools и жизненный цикл кадраmiddle
- Layout thrash: форсированная синхронная компоновкаsenior
- BeginMainFrame, анимации на потоке compositor и память GPUsenior
- Observability в проде: LoAF, INP и полная поверхность атакиsenior
- Что такое V8 и почему производительность различается в 100 разjunior
- Четырёхуровневый JIT-конвейер V8 и профилированная тиеризацияmiddle
- Hidden classes, деревья переходов и расположение в памятиmiddle
- Inline caches, состояния IC и деоптимизацияmiddle
- Orinoco GC: параллельный scavenger, конкурентная разметка и барьеры записиmiddle
- Спекулятивный движок TurboFan и ловушка deopt-loopsenior
- V8 в production: Isolates, сжатие указателей и реальные аварииsenior
- Жизненный цикл service worker и стратегии кешированияmiddle
- Граничные случаи service worker: version skew, долговременность и ловушка навигацииsenior
- Что делает реконсилер: render vs commitjunior
- Объект fiber и дерево с двойной буферизациейmiddle
- Чистота фазы render и подшаги фазы commitmiddle
- Реконсиляция: эвристики диффа и ловушка ключейmiddle
- Приоритетные lanes, time-slicing и useTransitionmiddle
- Bailout, мемоизация и tearingsenior
- React Profiler, компилятор и продакшн-наблюдаемостьsenior
- Стратегии рендеринга: SSG, SSR, ISR, streaming и гидратацияjunior
- SSG, SSR, ISR, streaming и RSC — как работает каждая стратегияmiddle
- Цена гидратации: selective, progressive, острова, resumabilitymiddle
- Hydration mismatch: причины, обнаружение и правило детерминизмаsenior
- RSC, стратегия на маршрут и production-наблюдаемостьsenior
- Core Web Vitals: что измеряют LCP, INP и CLSjunior
- CLS: почему происходят сдвиги лейаута и как их остановитьmiddle
- Трейдоффы метрик, RUM-атрибуция и цикл CI+полеsenior
- Общая картина: от URL до LCP до INP как эстафетаjunior
- Восемь слоёв трассировки: от service worker до второй навигацииmiddle
- Пять канонических поломок: где производство стабильно ломаетсяsenior
- Метод трёх треков: чтение трасс и построение системы мониторингаsenior
- Что такое cache stampede и почему он делает всё хужеjunior
- Лок и single-flight: ограничение параллельных rebuildmiddle
- XFetch: вероятностное раннее истечение без координацииmiddle
- Stale-while-revalidate и CDN request coalescingmiddle
- Детектирование stampede и дизайн TTL для продакшенаmiddle
- Метастабильный сбой, fencing-токены и production-постмортемыsenior
- Что такое отношение: таблицы, строки, ключи и ограниченияjunior
- Ограничения, ключи и типы данных Postgresmiddle
- Нормальные формы, денормализация и почему схемы «прилипают»middle
- JSONB, массивы и когда side table побеждаетmiddle
- Heap-хранилище, TOAST и выравнивание колонокsenior
- Целостность схемы: deferral, версионирование и сбои в продакшнеsenior
- Реляционная модель vs документные, wide-column, граф и key-valuesenior
- Index-only scan, Visibility Map и INCLUDEsenior
- Типичные сбои в продакшне и аудит индексовsenior
- pg_statistic, ANALYZE и производственная наблюдаемостьmiddle
- Производственные режимы отказа и стабильность плановsenior
- MVCC: как Postgres раздаёт согласованные снимкиjunior
- Заголовок tuple и механика снимковmiddle
- HOT-обновления и уровни изоляцииmiddle
- VACUUM, bloat и autovacuummiddle
- CLOG, XID wraparound и MultiXactsenior
- SSI и production-тюнинг autovacuumsenior
- Реальные провалы MVCC, deployment-паттерны и распределённые снимкиsenior
- Connection pool: зачем амортизировать стоимость backend Postgresjunior
- Режимы PgBouncer: session, transaction и statementmiddle
- Размер пула: формула (ядра × 2) + шпинделей и двухуровневый стекmiddle
- Исчерпание пула и idle-in-transaction: сценарий отказа в 3 ночиmiddle
- Миграция на transaction mode: план развёртывания и prepared statements в PgBouncer 1.21middle
- Процессная модель Postgres и почему увеличение max_connections снижает производительностьsenior
- Ландшафт пулеров 2026, serverless connection storms и полная таксономия отказовsenior
- Что такое миграция схемы и почему она заменяет ad-hoc DDLjunior
- ADD COLUMN: мгновенно в PG 11+ против перезаписи в старом Postgresjunior
- Режим отказа очереди блокировок: почему мгновенный DDL может заморозить базуmiddle
- Безопасные DDL-паттерны: NOT VALID, CONCURRENTLY и исправления небезопасных операцийmiddle
- Expand-contract: нулевой простой для ломающих изменений схемыmiddle
- Advisory-блокировки, инструменты миграций и координация деплояsenior
- Таксономия сбоев миграций и дисциплина продакшнаsenior
- Зачем нужно шардирование: потолок одного Postgresjunior
- Выбор ключа шарда: стратегии hash, range, list и directorymiddle
- Партиционирование против шардирования: одно слово, два разных понятияmiddle
- Ко-локация и Citus: инвариант, делающий шардирование пригодным к использованиюmiddle
- Режим отказа hot shard: обнаружение, изоляция и долгосрочная политикаmiddle
- Schema-based шардирование и альтернативы мультиарендностиsenior
- Онлайн-решардинг, 2PC и операционная стоимость шардированияsenior
- Семь актов: от CREATE TABLE до Citusjunior
- Акты 1–3 в глубину: схема, индексы и статистика планировщикаmiddle
- Акты 4–6 в глубину: MVCC bloat, connection pooling и безопасные миграцииmiddle
- Акт 7 в глубину: шардинг, co-location и семиуровневый каскад трейдоффовmiddle
- Наблюдаемость, антипаттерны и производственный триажsenior
- Роли Raft, term и почему majority-кворум предотвращает split brainjunior
- Как Raft реплицирует log entry и решает, что его безопасно коммититьmiddle
- Выборы лидера в Raft: таймауты, правила голосования и четыре свойства безопасностиmiddle
- Raft в реальном мире: partition, медленный диск и клиентская маршрутизацияmiddle
- Расширения Raft: pre-vote, learner, snapshot и линеаризуемые чтенияsenior
- Raft в production: membership change, Multi-Raft и observabilitysenior
- Где происходит data fetching — и почему это решает LCPjunior
- Fetch waterfall''''ы — диагностика и лечение через Promise.allmiddle
- React Server Components и Suspense streamingmiddle
- Клиентский кэш: TanStack Query, SWR и stale-while-revalidatemiddle
- LCP, prefetch и race conditions в интерактивном fetchingmiddle
- Senior internals: RSC payload, слои кэша и production паденияsenior
- Что такое три сигнала: метрики, логи, трейсыjunior
- Зачем нужны структурные логи: дневник против таблицыjunior
- Схема продакшн-лога: поля, которые несёт каждая строкаmiddle
- PII-редакция и log injectionsenior
- OTel Logs Data Model и audit-логи как подсистемаsenior
- SLI, SLO и error budget: надёжность в числахjunior
- Error budget policy, latency SLO и составные journeysmiddle
- Продакшн-отказы SLO, самонаблюдаемость, безопасность и общая картинаsenior
- Петля инцидента: от пейджера до постмортема до предотвращенияmiddle
- Cache lines и false sharing: когда параллелизм замедляет кодmiddle
- SIMD и data layout: AoS vs SoA и разница в 4–8xmiddle
- Cache-oblivious алгоритмы, PGO и production failuressenior
- GC в production: наблюдаемость, безопасность, edge cases и управление флотомsenior
- Batching: амортизируй фиксированную цену каждой операцииjunior
- Окно батчинга: размер и время ожиданияmiddle
- Batching в Kafka и Postgresmiddle
- io_uring и наблюдаемость пакетированияmiddle
- От Nagle до io_uring: эволюция пакетированияmiddle
- Backpressure, изоляция сбоев и безопасность батчей в продакшенеsenior
- CI enforcement и RUM: делаем бюджеты рабочимиmiddle
- V8 JIT-пайплайн, HTTP-приоритеты и безопасность bundlesenior
- Цикл performance: дисциплина, а не проектjunior
- Классификация и исправление: сопоставление family bottleneck с методамиmiddle
- Observability-стек и CI gates: ловить регрессии до выпускаmiddle
- От инцидента к enforcement: SLO burn до верифицированного исправления за 35 минутmiddle
- Культура, экономика и масштаб performancesenior
- At-most-once, at-least-once, exactly-once: три контракта доставкиjunior
- Три ножки сбоя — где реально происходят дубликаты и потериmiddle
- Consumer-side dedup: самый дешёвый путь к exactly-once processingmiddle
- Kafka exactly-once semantics: idempotent producer и транзакцииmiddle
- SQS visibility timeout, DLQ и outbox patternmiddle
- Exactly-once в production: impossibility-доказательство, гибридные паттерны и реальные инцидентыsenior
- Что такое OAuth и почему пароли — не ответjunior
- Authorization code flow с PKCEmiddle
- Валидация ID-токена и управление JWKS-кешемmiddle
- Ротация refresh-токенов и scope-based least privilegemiddle
- Sender-constrained токены: DPoP и mTLSsenior
- OAuth в production: audience атаки, observability и реальные провалыsenior