Наблюдаемость
Vendor-нейтральность, eBPF-инструментирование, Operator и OTel в браузере и serverless
Команда использует Collector от vendor-дистрибутива с проприетарными процессорами. Они считают себя OTel-нейтральными, потому что приложение отправляет OTLP. Через год миграция к новому вендору требует переписать не только конфигурацию Collector, но и логику обработки, существующую только в дистрибутиве старого вендора. Vendor-нейтральность была незаметно разрушена.
Ловушка vendor-нейтральности
Многие вендоры поставляют “OTel-совместимые” Collector-дистрибутивы — Datadog Agent, Splunk OTel Collector, New Relic distro — включающие проприетарные процессоры и экспортёры. Использование одного из них допустимо, но с двумя оговорками, часто создающими незаметный lock-in.
(1) Проприетарные процессоры: если вы полагаетесь на процессор, существующий только в дистрибутиве vendor-X (например, специфичная для вендора маршрутизация по стоимости, RUM-коррелятор вендора), ваш конфиг Collector больше не переносим. Переход к vendor-Y означает переписывание этого процессора — он не существует в upstream.
(2) Edge OTLP: контракт, определяющий vendor-нейтральность — “отправляет ли edge приложения OTLP?” Если код приложения вызывает vendor-SDK напрямую (dd-trace, New Relic agent) и данные в формате вендора на границе приложения, вы не vendor-нейтральны, даже если в середине есть Collector — потому что стоимость миграции живёт в коде приложения, в каждом сервисе.
Позиция Honeycomb: vendor-дистрибутивы допустимы для удобства на уровне сбора, но если инструментирование приложения специфично для вендора, вы столкнётесь со стоимостью миграции инструментирования в следующий раз.
Аудит переносимости: проводить ежеквартально. Grep кода приложения на импорты vendor-SDK. Проверять YAML Collector на имена процессоров, существующих только в дистрибутиве вендора. Проверять соответствие Semantic Conventions по сервисам. Vendor-нейтральность — не бинарное состояние, это позиция, поддерживаемая дисциплиной.
OTel и вопрос wide-events
Стабильная модель данных OTel по-прежнему трёхпилонная — трассировки, метрики, логи как отдельные API и типы OTLP-сообщений. Но индустрия движется к более унифицированной модели. Хранилище wide-events (Honeycomb, ClickHouse) может принимать OTel-логи (с прикреплённым trace context) и обрабатывать их как единый поток. Будущая работа OTel — сигнал Profiles, обсуждения wide-event корреляции в рабочей группе по спецификации — движется к более унифицированной модели данных.
Для senior-команд в 2026 году это означает: принятие OTel сейчас прямо совместимо как с бэкендами 1.0 (разделёнными по пилонам), так и с бэкендами 2.0 (wide-event). Смена бэкенда позже — это изменение конфигурации Collector, а не переписывание инструментирования.
eBPF-авто-инструментирование: путь без кода
Растущий класс OTel-совместимого инструментирования работает в ядре через eBPF — Grafana Beyla, Pixie, Datadog USM. Эти инструменты подключают kernel-пробы, наблюдающие системные вызовы, HTTP-трафик на сокетах и gRPC RPC без изменений кода или библиотек приложения.
Что видит eBPF: HTTP + gRPC + вызовы DB-сокетов, задержку, статус-коды. Идентичность сервиса из cgroup (service.name определяется из имени процесса или метки cgroup). OTel-образные спаны с атрибутами Semantic Conventions.
Что eBPF не может видеть: бизнес-атрибуты — customer.segment, feature_flag, batch_size — потому что они живут внутри приложения, а не в системном вызове. Атрибуция медленных хвостов конкретной логике приложения сложнее.
Паттерн на практике: eBPF для широты (бесплатное покрытие каждого сервиса, включая бинарники вендоров, которые нельзя изменить), SDK-инструментирование для глубины (бизнес-спаны и атрибуты). Оба отправляют OTLP в один Collector, оба используют Semantic Conventions, оба отображаются в тех же дашбордах.
| Подход | Покрытие | Бизнес-атрибуты? | Изменения кода? |
|---|---|---|---|
| eBPF (Beyla, Pixie) | HTTP + gRPC + DB-сокеты | Нет | Нет |
| OTel SDK авто-инструментирование | Вызовы фреймворков (HTTP, БД, очереди) | Нет (только уровень фреймворка) | Флаг агента или require hook |
| Ручное SDK-инструментирование | Бизнес-операции | Да | Да — на каждую бизнес-операцию |
OTel Operator: инструментирование как ответственность платформы
OTel Operator (Kubernetes Operator под зонтом CNCF) управляет развёртыванием Collector декларативно.
CRD OpenTelemetryCollector: определяет спецификации агентского и шлюзового Collector в YAML. Operator создаёт DaemonSet, Deployment и Services из CRD; обновление CRD запускает rolling restart без простоев.
CRD Instrumentation: конфигурирует инъекцию авто-инструментирования через аннотации на podах. Пример:
apiVersion: opentelemetry.io/v1alpha1
kind: Instrumentation
metadata:
name: my-instrumentation
spec:
exporter:
endpoint: http://otel-collector:4317
propagators: [tracecontext, baggage]
sampler:
type: parentbased_traceidratio
argument: "0.25"
java:
image: ghcr.io/open-telemetry/opentelemetry-operator/autoinstrumentation-java:latest
nodejs:
image: ghcr.io/open-telemetry/opentelemetry-operator/autoinstrumentation-nodejs:latestPod с аннотацией instrumentation.opentelemetry.io/inject-java: "true" получает Java Agent, инжектируемый через initContainer при старте — никаких изменений Dockerfile или кода.
Стратегическая ценность: инструментирование становится ответственностью платформенной команды, а не ответственностью на уровне каждого сервиса. Новый сервис с правильной аннотацией получает полное авто-инструментирование без изменений Dockerfile или кода. Зрелые платформы делают это поведением по умолчанию; отказ требует явной аннотации.
Браузер и serverless: OTel/HTTP и ограничения холодного старта
Браузер: OTel JavaScript SDK поддерживает браузерную среду через @opentelemetry/sdk-trace-web — инструментируя fetch, XMLHttpRequest, загрузку документа, взаимодействия пользователя. Браузеры отправляют OTLP/HTTP (не gRPC; gRPC несовместим с браузером) на эндпоинт Collector, настроенный с CORS. Получаемые браузерные спаны присоединяются к серверной трассировке через заголовок W3C traceparent, распространяемый на исходящих запросах — настоящие сквозные трассировки от клика пользователя до запроса в БД.
Lambda: стоимость холодного старта инициализации OTel SDK значительна (50-200 мс для полного Lambda-инструментирования). Стандартный подход использует AWS OTel Lambda Layer — слой инициализирует SDK в runtime extension и амортизирует стоимость старта по вызовам.
Cloudflare Workers / Vercel Edge: поддержка OTel ещё развивается, с ограничениями на распространение async-context в модели V8-изолятов.
Почему это работает
Почему gRPC не работает в браузерах? gRPC требует HTTP/2 framing на прикладном уровне — конкретно, возможность напрямую управлять HTTP/2 stream framing. Браузеры не предоставляют raw HTTP/2 framing JavaScript; Fetch API поддерживает HTTP/1.1 и HTTP/2 на сетевом уровне, но не специфичное для gRPC framing. gRPC-Web (протокол на основе прокси) — один из обходных путей, но OTel выбрал OTLP/HTTP поверх HTTP/1.1 как браузерный транспорт для максимальной совместимости — он работает через любой CORS-включённый эндпоинт Collector без прокси.
Команда использует Collector от vendor-дистрибутива с проприетарным процессором маршрутизации. Они считают себя OTel-нейтральными, потому что код приложения отправляет OTLP. Senior-ревью — согласны или нет?
Что видит eBPF-инструментирование (Grafana Beyla, Pixie), чего не может OTel Java Agent, и что видит Java Agent, чего не может eBPF?
- 01Точно сформулируйте, что делает OTel 'vendor-нейтральным' и два наиболее распространённых пути незаметного разрушения этой нейтральности в production.
- 02Какова стратегическая ценность OTel Operator и что он открывает для платформенной команды?
- 03Почему браузерный OTel использует OTLP/HTTP вместо OTLP/gRPC, и что это означает для сшивания сквозных трассировок?
Настоящая vendor-нейтральность требует OTLP на edge приложения — не просто “мы используем Collector.” Два пути незаметного разрушения: (1) vendor-SDK в коде приложения (dd-trace, New Relic agent) означает, что стоимость миграции живёт в коде каждого сервиса, а не только в конфигурации Collector; (2) проприетарные процессоры Collector блокируют плоскость политик в дистрибутиве одного вендора. Проводите ежеквартальный аудит переносимости для обнаружения обоих. eBPF-инструментирование (Grafana Beyla, Pixie) подключает kernel-пробы для наблюдения HTTP, gRPC и DB-сокетов любого процесса без изменений кода — бизнес-атрибуты, невидимые для eBPF, добавляются ручным SDK-инструментированием. OTel Operator управляет как развёртыванием Collector, так и инъекцией инструментирования на уровне сервисов через CRD — аннотация pod запускает авто-инструментирование без изменений Dockerfile или кода. Браузерный OTel использует OTLP/HTTP (gRPC несовместим с браузером) и распространяет W3C traceparent для настоящих сквозных трассировок. Lambda использует Layer для амортизации стоимости холодного старта OTel 50-200 мс.
встречается в202
- Federation и lookahead: батчинг за пределами DataLoadermiddle
- Senior GraphQL API: scheduling-контракт, изоляция арендаторов, наблюдаемостьsenior
- Путь запроса: семь остановок от сокета до ответаjunior
- Accept и парсинг: от очереди ядра до типизированного запросаmiddle
- Маршрутизация и middleware: что выполняется и в каком порядкеmiddle
- Обработчик и ответ: от бизнес-логики до байтов на проводеmiddle
- Стриминг и backpressure: когда клиент читает медленнее, чем вы пишетеsenior
- Таймауты и хвостовая задержка: бюджеты, дедлайны и ловушка fan-outsenior
- Middleware и DI: два паттерна, формирующие любой backendjunior
- Пишем middleware: сигнатуры, next() и три модели фреймворковmiddle
- Инверсия управления: как зависимости добираются до классаmiddle
- Скоупы и время жизни DI: singleton, request, transientmiddle
- DI как шов для тестов: фейки, моки и граница, которая важнаsenior
- DI-контейнеры в продакшене: графы разрешения, циклы и когда не стоитsenior
- Блокирующий vs неблокирующий I/O: два способа ждатьjunior
- Event loop: один поток, упорядоченные фазыmiddle
- Что блокирует цикл: CPU-работа и синхронные вызовыmiddle
- Вынос CPU-работы: worker threads и пул libuvmiddle
- Backpressure и ограниченная конкурентностьsenior
- Пропускная способность под нагрузкой: хвостовая задержка и насыщениеsenior
- Зачем пул: цена создания соединенияjunior
- Размер пула: почему больше не значит быстрееmiddle
- Взятие и таймауты: очередь ожидания — настоящий дроссель задержкиmiddle
- Стратегии retry: backoff, jitter и thundering herdmiddle
- Наблюдаемость, production-инциденты и дизайн для глобального масштабаsenior
- Задачи, микрозадачи и scheduler.yield()middle
- Точность таймеров, троттлинг и фоновая работаmiddle
- Event loop Node.js: фазы, nextTick и задержка циклаsenior
- Инвалидация, dirty-биты и containmiddle
- Слои композитора: продвижение, перекрытие и память GPUmiddle
- Observability в проде: LoAF, INP и полная поверхность атакиsenior
- Hidden classes, деревья переходов и расположение в памятиmiddle
- V8 в production: Isolates, сжатие указателей и реальные аварииsenior
- Что такое воркеры и зачем они нужныjunior
- Механика web workers: dedicated, shared и OffscreenCanvasmiddle
- Structured clone и transferablesmiddle
- SharedArrayBuffer, Atomics и cross-origin isolationsenior
- Пулы воркеров, Comlink и наблюдаемость в продакшенеsenior
- Стратегии рендеринга: SSG, SSR, ISR, streaming и гидратацияjunior
- SSG, SSR, ISR, streaming и RSC — как работает каждая стратегияmiddle
- Цена гидратации: selective, progressive, острова, resumabilitymiddle
- Core Web Vitals: что измеряют LCP, INP и CLSjunior
- LCP: четыре фазы, одна доминирующая стоимостьmiddle
- INP: input delay, processing, presentationmiddle
- Lab vs field: почему они расходятся и как использовать каждыйmiddle
- Трейдоффы метрик, RUM-атрибуция и цикл CI+полеsenior
- Общая картина: от URL до LCP до INP как эстафетаjunior
- Восемь слоёв трассировки: от service worker до второй навигацииmiddle
- Пять канонических поломок: где производство стабильно ломаетсяsenior
- Метод трёх треков: чтение трасс и построение системы мониторингаsenior
- Лок и single-flight: ограничение параллельных rebuildmiddle
- Stale-while-revalidate и CDN request coalescingmiddle
- Детектирование stampede и дизайн TTL для продакшенаmiddle
- Метастабильный сбой, fencing-токены и production-постмортемыsenior
- Что такое отношение: таблицы, строки, ключи и ограниченияjunior
- Ограничения, ключи и типы данных Postgresmiddle
- JSONB, массивы и когда side table побеждаетmiddle
- Целостность схемы: deferral, версионирование и сбои в продакшнеsenior
- Что такое индекс и как он ускоряет запросыjunior
- Leading-column rule: почему порядок столбцов в composite-индексе важенmiddle
- Partial, expression и covering-индексыmiddle
- Типы индексов: GIN, GiST, BRIN, Hash, Bloom и HOT-обновленияmiddle
- Index-only scan, Visibility Map и INCLUDEsenior
- Типичные сбои в продакшне и аудит индексовsenior
- Упражнение по проектированию индексов: стратегия полнотекстового поискаsenior
- EXPLAIN и планы выполнения: что решает планировщик и почемуjunior
- Типы сканирования: Seq, Index, Bitmap, Index-Onlymiddle
- Алгоритмы соединения и каскад ошибок оценки строкmiddle
- pg_statistic, ANALYZE и производственная наблюдаемостьmiddle
- Расширенная статистика: исправление ошибок оценки для коррелированных колонокsenior
- Кеш планов, настройка константных стоимостей и внутренности планировщикаsenior
- Производственные режимы отказа и стабильность плановsenior
- Connection pool: зачем амортизировать стоимость backend Postgresjunior
- Режимы PgBouncer: session, transaction и statementmiddle
- Размер пула: формула (ядра × 2) + шпинделей и двухуровневый стекmiddle
- Исчерпание пула и idle-in-transaction: сценарий отказа в 3 ночиmiddle
- Миграция на transaction mode: план развёртывания и prepared statements в PgBouncer 1.21middle
- Процессная модель Postgres и почему увеличение max_connections снижает производительностьsenior
- Ландшафт пулеров 2026, serverless connection storms и полная таксономия отказовsenior
- ADD COLUMN: мгновенно в PG 11+ против перезаписи в старом Postgresjunior
- Режим отказа очереди блокировок: почему мгновенный DDL может заморозить базуmiddle
- Безопасные DDL-паттерны: NOT VALID, CONCURRENTLY и исправления небезопасных операцийmiddle
- Таксономия сбоев миграций и дисциплина продакшнаsenior
- Выбор ключа шарда: стратегии hash, range, list и directorymiddle
- Ко-локация и Citus: инвариант, делающий шардирование пригодным к использованиюmiddle
- Режим отказа hot shard: обнаружение, изоляция и долгосрочная политикаmiddle
- Онлайн-решардинг, 2PC и операционная стоимость шардированияsenior
- Семь актов: от CREATE TABLE до Citusjunior
- Акты 1–3 в глубину: схема, индексы и статистика планировщикаmiddle
- Акты 4–6 в глубину: MVCC bloat, connection pooling и безопасные миграцииmiddle
- Акт 7 в глубину: шардинг, co-location и семиуровневый каскад трейдоффовmiddle
- Наблюдаемость, антипаттерны и производственный триажsenior
- Где происходит data fetching — и почему это решает LCPjunior
- React Server Components и Suspense streamingmiddle
- Senior internals: RSC payload, слои кэша и production паденияsenior
- Биты в проводеjunior
- Математика задержкиmiddle
- Bufferbloat и перегрузкаsenior
- Граница физического уровняsenior
- Конверт IPjunior
- Читаем IP-заголовокmiddle
- Номера последовательности и состояние соединенияmiddle
- Управление потоком и перегрузкойmiddle
- BBR, производственная наблюдаемость и за пределами TCPsenior
- Что делает TLS и зачем он нуженjunior
- Расписание ключей, SNI, ALPN и расширенияsenior
- Защита 0-RTT, ECH, гибридный PQ и продакшн TLSsenior
- CDN: контент по соседствуjunior
- Anycast и GeoDNS: маршрутизация к ближайшему edgemiddle
- Многоуровневый кеш и Cache-Controlmiddle
- Заголовок Vary и cache keysmiddle
- Stale-while-revalidate и cache stampedesenior
- Edge workers и edge-side compositionsenior
- CDN: операции и observabilitysenior
- WebSocket: HTTP-апгрейд до постоянного соединенияjunior
- WebSocket vs SSE vs long-polling: выбор правильного транспортаmiddle
- Backpressure в WebSocket: когда клиенты не успеваютmiddle
- Реконнект: jittered backoff, thundering herd, восстановление сообщенийsenior
- WebSocket в масштабе: HTTP/2 мультиплексирование, permessage-deflate, C10Msenior
- WebSocket в production: прокси, безопасность и распределённая архитектураsenior
- Что делают обратные проксиjunior
- Алгоритмы балансировки: от round-robin до power-of-two-choicesmiddle
- L4 vs L7 балансировка и сохранение IP клиентаmiddle
- Health checks, connection draining и slow startmiddle
- Retry-бури, circuit breakers и load sheddingsenior
- Устойчивая архитектура LB: anycast, zone-aware маршрутизация и observabilitysenior
- Почему QUIC, а не TCP+TLSjunior
- QUIC-потоки и head-of-line blockingjunior
- Объединённое рукопожатие и 1-RTTmiddle
- Connection ID и миграция сетиmiddle
- Обнаружение потерь и управление перегрузкойmiddle
- Возобновление 0-RTT и шифрование пакетовsenior
- Развёртывание и стоимость CPUsenior
- DDoS: что это и почему работаетjunior
- Атаки усиления и истощение состоянияmiddle
- Ограничение скорости: алгоритмы и архитектураmiddle
- WAF, межсетевые экраны, mTLS и HSTSmiddle
- Отравление DNS-кэша и BGP-перехватsenior
- Эшелонированная защита и экономика атакsenior
- Двенадцать слоёв: один URL, семь действующих лицjunior
- DNS, TCP, TLS по очереди: куда уходят миллисекундыmiddle
- Критический путь рендеринга и Core Web Vitalsmiddle
- Перехват прокси и шлюзы безопасности: rate limiter, WAF, mTLSmiddle
- Альтернативные пути: QUIC 0-RTT, WebSocket upgrade, миграция соединенияmiddle
- Наблюдаемость: распределённые трейсы, USE/RED и семплированиеsenior
- Устойчивость: каскадные повторы, circuit breakers и error budgetsenior
- Сначала профиль: измерь куда реально уходит времяjunior
- Закон Амдала и self-time: потолок любого ускорения, которое ты можешь выпуститьmiddle
- Измерительный цикл: микробенч, макробенч, prod-профиль, эффект наблюдателяmiddle
- Чтение флейм-графов: формы, профайлеры по языкам и 60-секундный сканmiddle
- Статистические baseline''''ы: почему один запуск — не измерениеmiddle
- История профайлеров и ловушки микробенчей: от Кнута до GWPsenior
- Hardware counters, профили холодного старта и безопасность профилейsenior
- Непрерывное профилирование в масштабе: затраты, CI-гейты, корреляция с трейсами и антипаттерныsenior
- Что делает путь горячим: симптом против причиныjunior
- Пять форм hotspot''''а: CPU, аллокации, кэш, лок, syscallmiddle
- Чтение parent и child chains: где применять правкуmiddle
- JIT deopt, цикл fix-and-verify и PR-time профилированиеmiddle
- Аппаратные счётчики и Intel TMA: диагностика подкатегорийsenior
- False sharing и горячие пути нативных мостовsenior
- Горячие пути в production: безопасность, хвостовая латентность и происхождение инструментовsenior
- Иерархия памяти: почему расстояние важнее числа операцийjunior
- Row-major vs column-major: порядок доступа и разрыв в 9xjunior
- Branch prediction: 10–30 циклов штрафа за неожиданный ifmiddle
- Hardware prefetcher, TLB и memory-level parallelismsenior
- Основы GC: за что рантайм берёт налогjunior
- Алгоритмы GC: поколенческая гипотеза, concurrent marking и write barriermiddle
- GC tradeoffs: пауза, throughput, память и давление аллокацийmiddle
- Настройка GC: пейсинг, форма кучи и наблюдаемость аллокацийmiddle
- Внутреннее устройство GC: tri-color инвариант, write barriers и глубокое погружение в рантаймыsenior
- GC в production: наблюдаемость, безопасность, edge cases и управление флотомsenior
- N+1: одна логическая операция, много round-trip''''овjunior
- Семейства фиксов: JOIN, IN, preload и DataLoadermiddle
- Обнаружение N+1: query logs, APM traces и CI gatesmiddle
- DataLoader: батчинг по дереву резолверовmiddle
- Кросс-протокольный N+1: HTTP fan-out и Redis MGETmiddle
- N+1 в масштабе: исчерпание пула, изменения планов и денормализацияsenior
- Batching: амортизируй фиксированную цену каждой операцииjunior
- Окно батчинга: размер и время ожиданияmiddle
- Batching в Kafka и Postgresmiddle
- io_uring и наблюдаемость пакетированияmiddle
- От Nagle до io_uring: эволюция пакетированияmiddle
- Backpressure, изоляция сбоев и безопасность батчей в продакшенеsenior
- Что на самом деле стоит bundle: download, parse, compile, executejunior
- Core Web Vitals: LCP, INP и CLSmiddle
- Code splitting: route-level, component-level, vendor splittingmiddle
- Tree shaking и compression: удаляем то, что не используемmiddle
- Third-party scripts: тихий убийца бюджетаmiddle
- CI enforcement и RUM: делаем бюджеты рабочимиmiddle
- V8 JIT-пайплайн, HTTP-приоритеты и безопасность bundlesenior
- Цикл performance: дисциплина, а не проектjunior
- Классификация и исправление: сопоставление family bottleneck с методамиmiddle
- Observability-стек и CI gates: ловить регрессии до выпускаmiddle
- От инцидента к enforcement: SLO burn до верифицированного исправления за 35 минутmiddle
- Культура, экономика и масштаб performancesenior
- At-most-once, at-least-once, exactly-once: три контракта доставкиjunior
- Consumer-side dedup: самый дешёвый путь к exactly-once processingmiddle
- Exactly-once в production: impossibility-доказательство, гибридные паттерны и реальные инцидентыsenior
- Что такое OAuth и почему пароли — не ответjunior
- Authorization code flow с PKCEmiddle
- Sender-constrained токены: DPoP и mTLSsenior
- OAuth в production: audience атаки, observability и реальные провалыsenior