Распределённые системы: API, данные, надёжность и развёртывание
32 карточки для углублённого повторения проектирования систем: API, кэширование, репликация, обмен сообщениями, хранение, наблюдаемость, развёртывание и шаблоны распределённых сервисов. Предполагаются практические знания программирования, баз данных и основ сетей.
- Category
- Computer Science
- Level
- advanced
- Languages
- ru → ru
- Cards
- 32
- Markdown
- Распределённые системы: API, данные, надёжность и развёртывание (.md)
Flashcards (32)
| # | Front (Term / Question) | Back (Definition / Answer) | Example | Multiple-Choice Options |
|---|---|---|---|---|
| 1 | Чем вертикальное масштабирование отличается от горизонтального? | Вертикальное добавляет ресурсы машине или экземпляру. Горизонтальное добавляет экземпляры или узлы и распределяет между ними работу либо данные. Обработчики без состояния удобны, но системы с состоянием тоже масштабируются горизонтально через разбиение, репликацию и координацию. Ни один подход сам по себе не гарантирует доступность или линейное ускорение. | ||
| 2 | Какую проблему решает transactional outbox и какое ограничение остаётся? | Сервис записывает бизнес-изменение и исходящее событие в одной локальной транзакции базы данных. Позже передатчик публикует зафиксированные записи, устраняя небезопасную раздельную запись в базу и систему сообщений. Повторы передачи могут создавать дубликаты, поэтому потребителям или последующим эффектам нужна дедупликация либо идемпотентность. | ||
| 3 | Чем репликация с одним лидером отличается от репликации с несколькими лидерами? | Для реплицируемого набора данных один лидер принимает записи и передаёт их ведомым репликам. Несколько лидеров принимают записи в нескольких местах, что требует обработки конфликтов или разного порядка обновлений. Репликация бывает синхронной и асинхронной; асинхронные реплики могут выдавать устаревшие данные. | ||
| 4 | Чем GraphQL и gRPC отличаются от REST как подходы к API? | GraphQL позволяет клиенту выбирать поля из типизированной схемы. gRPC определяет удалённые методы сервисов и поддерживает одиночные и потоковые вызовы, обычно через HTTP/2 и по умолчанию с Protocol Buffers. REST строит взаимодействие вокруг ресурсов и единообразного интерфейса. Эти подходы не определяются числом конечных точек или универсальным преимуществом по задержке. | ||
| 5 | Чем отличаются event sourcing и CQRS и обязательно ли применять их вместе? | Event sourcing записывает изменения последовательностью событий, из которой можно восстановить состояние. CQRS разделяет модели команд/записи и запросов/чтения. Их можно сочетать, но каждый подход применим отдельно; CQRS сам по себе не требует отдельных баз данных или event sourcing. | ||
| 6 | Чем различаются cache-aside, write-through и write-back? | Cache-aside загружает данные из основного хранилища при промахе кэша; приложение управляет обновлением или инвалидированием кэша. Write-through синхронно обновляет основное хранилище при записи в кэш. Write-back подтверждает запись в кэш до асинхронного сохранения, поэтому ещё не сохранённые данные нужно защищать от сбоя. | ||
| 7 | Как WebSockets, события от сервера и long polling обеспечивают обновления? | WebSockets передаёт сообщения в обоих направлениях по долгоживущему соединению. SSE отправляет поток событий от сервера клиенту через HTTP. Long polling удерживает запрос до данных или тайм-аута, после чего клиент отправляет следующий. Эти способы различаются направлением передачи и поведением соединений и запросов. | ||
| 8 | Как автоматический выключатель помогает ограничивать сбои сервисов? | Замкнут: вызовы проходят, ошибки отслеживаются. Разомкнут: вызовы отклоняются или перенаправляются без обращения к неисправной зависимости. Полуразомкнут: ограниченные пробные вызовы проверяют восстановление. Пороги и правила восстановления управляют переходами; шаблон уменьшает каскадную перегрузку, но сам не исправляет зависимость. | ||
| 9 | Какие ограничения определяют REST помимо адресов ресурсов и названий методов HTTP? | Разделение клиента и сервера, запросы без состояния сеанса на сервере, правила кэширования, единообразный интерфейс и многоуровневая система; код по требованию необязателен. Единообразный интерфейс включает идентификацию ресурсов, работу через представления, самоописываемые сообщения и управление состоянием приложения через гипермедиа. REST — архитектурный стиль, а не просто CRUD поверх HTTP. | ||
| 10 | Чем различаются гарантии обработки «не более одного раза», «не менее одного раза» и «ровно один раз»? | «Не более одного раза» исключает повторную обработку, но допускает потерю работы; при «не менее одного раза» повторы могут повторить работу. Эффекты «ровно один раз» требуют координации или дедупликации в определённых границах, например атомарной фиксации результата и прочитанных смещений. Одни транзакции производителя не обеспечивают однократность произвольных внешних побочных эффектов. | ||
| 11 | Что означает согласованность чтения собственных записей и почему одного фиксированного периода маршрутизации к лидеру недостаточно? | Последующие чтения в сеансе клиента должны учитывать его подтверждённые записи или более поздние обновления. Чтения направляют к достаточно актуальному лидеру либо требуют, чтобы реплика достигла сохранённой версии или позиции журнала. Один фиксированный тайм-аут не гарантирует это при неограниченном отставании репликации. | ||
| 12 | Что делает хаос-инжиниринг контролируемым экспериментом, а не произвольным внесением сбоев? | Нужно сформулировать гипотезу об устойчивом состоянии, внести реалистичное нарушение, наблюдать результат и применять защитные ограничения. Примеры — потеря экземпляра или задержка сети. Эксперименты возможны в тестовом или рабочем окружении; в рабочем нужны намеренно ограниченная область воздействия и условия остановки. | ||
| 13 | Чем балансировка нагрузки уровня 4 отличается от уровня 7? | L4 распределяет соединения или датаграммы по транспортным и сетевым данным, например адресам и портам. L7 может направлять трафик по данным приложения: путям HTTP, заголовкам или cookie. Анализ зашифрованного содержимого HTTP требует расшифровки TLS где-либо на пути; не каждое развёртывание L7 само завершает TLS. | ||
| 14 | Что такое обратное давление и почему неограниченный буфер не решает перегрузку? | Обратное давление позволяет пропускной способности или спросу нижележащего потребителя ограничивать производство или отправку вышележащим источником. Reactive Streams сигнализирует спрос для ограниченной асинхронной обработки. Неограниченный буфер лишь превращает перегрузку в рост памяти; для источников, которые нельзя замедлить, нужна явная политика ограниченного буфера, отбрасывания или ошибки. | ||
| 15 | Какую роль играют периферийное кэширование CDN и anycast в доставке содержимого? | Периферийные кэши обслуживают подходящее для кэширования содержимое близко к пользователям, снижая нагрузку на источник и часто задержку. Anycast объявляет один адрес из нескольких мест; политика маршрутизации и топология сети выбирают назначение, не обязательно ближайшее географически. Anycast DNS направляет запросы DNS к серверам имён и отличается от выбора или кэширования содержимого. | ||
| 16 | Что такое шардинг базы данных и какие проектные сложности он создаёт? | Шардинг горизонтально делит данные, обычно по ключу шардинга, на независимо управляемые разделы, которые могут размещаться на нескольких серверах. Выбор ключа влияет на горячие точки, локальность запросов и перебалансировку. Межшардовые запросы, соединения и транзакции требуют дополнительной координации; шарды не обязаны соответствовать физическим серверам один к одному. | ||
| 17 | Чем двухфазная фиксация отличается от саги при координации работы сервисов? | 2PC просит участников подготовиться, затем сообщает решение о фиксации или отмене; подготовленные участники могут блокироваться, пока решение недоступно. Сага фиксирует локальные транзакции и при необходимости выполняет компенсирующие действия. Компенсация — восстановление на уровне бизнес-логики, а не автоматический глобальный откат или изоляция; ни один подход не лучше во всех случаях. | ||
| 18 | Чем отличаются сине-зелёное и канареечное развёртывания? | Сине-зелёное готовит отдельное окружение-кандидат и переключает на него трафик с текущего. Канареечное сначала направляет к новой версии ограниченную часть трафика или пользователей, расширяя охват по результатам наблюдения. Совместимость баз данных и состояния всё равно нужно планировать; ни один подход не гарантирует простого отката. | ||
| 19 | Каковы роли Pod, Deployment и Service в Kubernetes? | Pod объединяет один или несколько совместно планируемых контейнеров с общей сетью и указанными общими ресурсами. Deployment управляет желаемыми репликами Pod через ReplicaSets и обновления. Service предоставляет сетевой доступ к конечным точкам, обычно выбранным Pod; headless Service не выделяет виртуальный IP-адрес кластера. | ||
| 20 | Как согласованное хеширование на кольце уменьшает перераспределение при изменении узлов? | Ключи сопоставляются со следующими позициями на хеш-кольце, поэтому добавление или удаление узла меняет только затронутые диапазоны. При равномерном распределении K ключей по N узлам изменение одного узла обычно перемещает порядка K/N ключей; это не безусловная гарантия для худшего случая. Виртуальные узлы могут улучшить равномерность. | ||
| 21 | Чем обычные контейнеры Linux отличаются от аппаратных виртуальных машин? | Аппаратная ВМ запускает ядро гостевой ОС под гипервизором. Контейнеры Linux изолируют процессы, совместно используя ядро, обычно посредством пространств имён и cgroups. На настольной системе не на Linux это общее ядро Linux может работать внутри ВМ. Контейнер по определению не равнозначен отдельному ядру или полной границе безопасности. | ||
| 22 | Каковы три распространённых сигнала наблюдаемости и исчерпывают ли они её? | Метрики обобщают численные измерения; журналы фиксируют события; распределённые трассы связывают участки работы разных компонентов. Их сопоставление помогает объяснять поведение системы. Это распространённые сигналы, а не полное определение наблюдаемости; профили и другая телеметрия тоже могут быть важны. | ||
| 23 | Чем различаются SLI, SLO и SLA? | SLI измеряет поведение сервиса, например долю запросов, завершённых за 200 мс. SLO задаёт цель и окно измерения этого показателя. SLA — соглашение с обязательствами по сервису и последствиями их нарушения; это не просто ещё одна метрика и не обязательно то же самое, что внутренний SLO. | ||
| 24 | Каковы двенадцать факторов методологии 12-Factor App? | Одна кодовая база, явные зависимости, конфигурация через окружение, подключаемые вспомогательные сервисы, отдельные этапы сборки/выпуска/запуска, процессы без состояния, привязка портов, параллелизм через процессы, лёгкий запуск и завершение процессов, сходство разработки и эксплуатации, журналы как потоки событий и разовые административные задачи. Это рекомендации по проектированию, а не гарантия масштабируемости или надёжности. | ||
| 25 | Чем различаются token bucket, очередь leaky bucket и скользящее окно с двумя счётчиками? | Token bucket пополняет токены с заданной скоростью и допускает всплески в пределах ёмкости. Очередь leaky bucket выпускает работу с контролируемой скоростью и ограничивает переполнение. Окно с двумя счётчиками взвешивает предыдущий интервал и добавляет текущий счётчик, приближая движущееся окно; это не точный журнал временных меток. | ||
| 26 | Чем отличаются хранилища на основе B-деревьев и LSM и почему нельзя безусловно ранжировать их скорость? | B-деревья поддерживают упорядоченные страницы через обновления, разделения и балансировку. LSM обычно буферизует записи в памяти, журналирует для восстановления, выгружает отсортированные таблицы и уплотняет их. Усиление чтения, записи и расхода места зависит от нагрузки и реализации; ни один вариант не бывает быстрее во всех случаях, и не все B-деревья обновляют данные на месте. | ||
| 27 | Что такое ограниченный контекст в предметно-ориентированном проектировании? | DDD создаёт модели программ и общий словарь вокруг бизнес-области. Ограниченный контекст задаёт границы согласованного применения конкретной модели и терминов. В другом контексте тот же термин может означать другое; связи и преобразования между контекстами следует определять явно. | ||
| 28 | Что означает задержка p99 и зачем рассматривать её вместе со средним? | Для измеряемой совокупности запросов p99 — порог задержки, не превышаемый примерно в 99% наблюдений. Это не максимум и не среднее самых медленных 1%. Хвостовые процентили выявляют задержки, скрываемые средним, особенно при разветвлённых запросах; нужно указывать окно и совокупность измерений. | ||
| 29 | Какие решения Kafka обеспечивают пропускную способность и параллельное потребление? | Разделённые на партиции журналы с дописыванием, пакетная обработка, последовательный ввод-вывод и кэш страниц ОС повышают пропускную способность. Партиции дают параллелизм; при назначении целых партиций у каждой одновременно не более одного активного потребителя в каждой группе. Передача zero-copy — оптимизация там, где она поддерживается, а не универсальный путь, особенно при TLS. | ||
| 30 | Какие стандартные методы HTTP идемпотентны и что это гарантирует? | GET, HEAD, OPTIONS, TRACE, PUT и DELETE идемпотентны согласно их семантике: повтор запроса имеет тот же предполагаемый эффект на сервере, что и однократное выполнение. Ответы и сопутствующие записи в журнале могут различаться. POST и PATCH не идемпотентны по определению, но приложение может сделать отдельные операции безопасными для повторения. | ||
| 31 | Что стандартный фильтр Блума только со вставками может заключить о принадлежности элемента? | При неизменном хешировании и неповреждённом состоянии вставленный элемент никогда не объявляется отсутствующим, но отсутствующий может быть объявлен возможно присутствующим. Память, число хеш-функций и число вставок влияют на ложные срабатывания. Отрицательный результат позволяет движку пропустить поиск в SSTable; положительный всё равно требует проверки. | ||
| 32 | Что вызывает лавину обращений при промахах кэша и как её ограничить? | Много запросов одновременно не находят один популярный элемент или набор истёкших записей и перегружают основной сервис. Объединение запросов и управляемое фоновое обновление уменьшают повторную работу. Случайный разброс времени истечения уменьшает одновременное истечение разных записей, но сам по себе не гарантирует защиту одного популярного ключа. |