Вопросы на собеседовании: Data Engineer
Характерные вопросы на собеседовании для Data Engineer из наших гайдов по компаниям, сгруппированные по тому, что они проверяют. Это примеры для подготовки, а не подтверждённый банк вопросов какой-либо компании.
Поведенческие (23)
Расскажите о случае, когда вы отвечали за решение проблемы с качеством данных, от которых зависели другие команды.
Из гайда Google · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Расскажите о случае, когда вы отвечали за конвейер данных, отказавший в рабочей среде. Что вы сделали и что после этого изменилось?
Из гайда Amazon · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Опишите случай, когда вы не согласились с заинтересованным лицом по поводу модели данных, и расскажите, как разрешилась ситуация.
Из гайда Amazon · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Как обеспечить безопасный повторный запуск ежедневного задания после частичного сбоя?
Из гайда Meta · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Расскажите о спроектированной вами модели данных, которую пришлось изменить после запуска.
Из гайда Meta · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Расскажите о спроектированной вами модели данных, которую пришлось изменить после запуска. В чем вы ошиблись?
Из гайда Microsoft · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Напишите запрос, который находит первое событие сбоя для каждого устройства в скользящем окне, и объясните, как вы будете его тестировать.
Из гайда NVIDIA · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Расскажите о модели данных, которую пришлось изменить после запуска, и о том, что вы спроектировали бы иначе.
Из гайда NVIDIA · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Спроектируйте пайплайн, превращающий сырые логи запросов в почасовую таблицу использования для биллинга. Как сделать его безопасным для повторного запуска после частичного сбоя и как выполнить бэкфилл?
Из гайда OpenAI · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Расскажите о проблеме качества данных, за которую вы отвечали и которая затронула другую команду. Как вы её обнаружили и что изменилось после этого?
Из гайда OpenAI · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Расскажите о случае, когда вы отвечали за проблему с качеством данных, от которой зависели другие команды. Что вы изменили после этого?
Из гайда Anthropic · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Спроектируйте ежедневный пайплайн, агрегирующий события воспроизведения в отчётную таблицу. Как сделать его безопасным для повторного запуска после частичного сбоя и как бы вы выполнили бэкфилл?
Из гайда Netflix · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Расскажите о случае, когда проблема качества данных, за которую вы отвечали, затронула другую команду. Как вы её нашли и что изменилось после?
Из гайда Netflix · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Как обеспечить безопасный повторный запуск ночного задания после частичного сбоя?
Из гайда LinkedIn · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Расскажите о спроектированной вами модели данных, которую пришлось изменить после запуска.
Из гайда LinkedIn · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Напишите запрос, который находит первый сбой каждого устройства в пределах заданного окна, и объясните, как вы будете его тестировать.
Из гайда Apple · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Почему вы хотите работать именно над задачами этой команды, связанными с данными?
Из гайда Apple · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Расскажите о модели данных, которую пришлось изменить после запуска, и о том, что вы спроектировали бы иначе.
Из гайда Apple · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Расскажите о модели данных, которую пришлось изменить после запуска, и о том, что вы спроектировали бы иначе.
Из гайда Tesla · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Почему вы хотите работать над задачами команды, связанными с данными?
Из гайда Tesla · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Напишите запрос, который находит счета, где итоговые суммы расчётов не совпадают с итоговыми суммами транзакций, и объясните, как вы будете его тестировать.
Из гайда Stripe · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Расскажите о проблеме качества данных, за решение которой вы отвечали и от которой зависели другие команды.
Из гайда Stripe · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Расскажите о модели данных, которую пришлось изменить после запуска, и о том, что вы спроектировали бы иначе.
Из гайда Intel · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Кодинг (14)
Напишите запрос, определяющий клиентов, чьи заказы отправлялись с опозданием несколько месяцев подряд, и объясните, как вы проверите его правильность.
Из гайда Amazon · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Напишите запрос, который находит пользователей, активных в последовательные дни, и объясните, как вы будете его тестировать.
Из гайда Meta · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Напишите запрос, который находит клиентов, чьи расходы растут от месяца к месяцу, и объясните, как вы проверите результат.
Из гайда Microsoft · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Напишите SQL-запрос, который возвращает дату первого и самого последнего API-запроса для каждого аккаунта и помечает аккаунты, у которых нет запросов с заданной даты отсечения.
Из гайда OpenAI · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Напишите функцию на Python, которая разбирает вложенные JSON-записи, пропускает некорректные с записью причины в лог и выдаёт плоские строки. Как бы вы её протестировали?
Из гайда OpenAI · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Вам дали необработанные логи использования API. Спроектируйте схему отчётного слоя, отвечающего на вопрос об использовании по клиентам по дням, а затем напишите запрос, который его наполняет.
Из гайда Anthropic · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Напишите SQL-запрос, находящий самую длинную серию подряд идущих активных дней каждого клиента, и объясните, как вы обрабатываете дни с дублирующимися событиями.
Из гайда Anthropic · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Напишите функцию на Python, используя только стандартную библиотеку, которая читает события JSON, разделённые переводами строк, пропускает некорректные строки, подсчитывая причины, и возвращает итоги по типам событий.
Из гайда Anthropic · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Напишите SQL-запрос, возвращающий для каждого участника дату первого и последнего просмотра, и пометьте участников без активности с заданной даты отсечения.
Из гайда Netflix · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Напишите запрос, который находит участников, проявлявших активность несколько дней подряд, и объясните, как вы будете его тестировать.
Из гайда LinkedIn · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Напишите запрос, который находит первое событие неисправности для каждого автомобиля в скользящем окне, и объясните, как вы будете его тестировать.
Из гайда Tesla · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Напишите запрос, который находит первое неуспешное измерение для каждого устройства в пределах окна, и объясните, как вы будете его тестировать.
Из гайда Intel · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Что делает QUALIFY, и что вы написали бы без него?
Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Что такое slowly changing dimension и как вы реализуете тип два?
Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Системный дизайн (27)
Как бы вы спроектировали конвейер, который принимает события потока кликов и через несколько минут делает их доступными для запросов?
Из гайда Google · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Спроектируйте систему, которая принимает события о заказах из нескольких регионов и делает их доступными для ежедневной отчётности и оповещений почти в реальном времени.
Из гайда Amazon · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Спроектируйте конвейер, преобразующий необработанные события приложения в ежедневные метрики вовлеченности, и объясните, как вы будете обрабатывать события, поступившие на день позже.
Из гайда Meta · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
После изменения схемы в вышестоящей системе метрика снизилась. Как выяснить, действительно ли произошло снижение?
Из гайда Meta · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Спроектируйте конвейер, который ежедневно загружает файлы с данными о продажах из нескольких регионов в единую таблицу отчетности и обрабатывает опоздание одного региона, не блокируя остальные.
Из гайда Microsoft · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
На нижестоящей панели мониторинга отображаются числа, не совпадающие с исходной системой. Как определить, на каком этапе возникло расхождение?
Из гайда Microsoft · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Когда вы выберете потоковую архитектуру вместо пакетной обработки по расписанию и какова цена такого решения?
Из гайда Microsoft · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Спроектируйте конвейер, который собирает телеметрию с тысяч устройств и позволяет выполнять запросы как для ежедневных отчётов, так и для ситуативного анализа.
Из гайда NVIDIA · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Команда-потребитель сообщает, что вчерашние итоговые значения неверны. Как вы найдёте место, где конвейер внёс ошибку?
Из гайда NVIDIA · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Когда вы выбрали бы потоковую обработку вместо пакетной по расписанию и какова цена такого решения с точки зрения сложности?
Из гайда NVIDIA · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Спроектируйте пайплайн, который загружает события использования из нескольких сервисов в таблицу хранилища, применяемую для биллинга. Как сделать его идемпотентным и как выполнить бэкфилл пропущенного дня?
Из гайда Anthropic · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Метрика на дашборде резко упала за ночь. Расскажите, как вы решаете, реальное это изменение или проблема пайплайна.
Из гайда Anthropic · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
События могут приходить с задержкой в несколько часов с устройств, которые были офлайн. Как бы вы обрабатывали запоздавшие данные в пайплайне, публикующем почасовые метрики?
Из гайда Netflix · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Спроектируйте конвейер, который преобразует события активности участников в ежедневные метрики вовлечённости и обрабатывает события, поступившие на день позже.
Из гайда LinkedIn · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Панель показывает снижение, которого нет в исходной системе. Как определить, на каком этапе возникло расхождение?
Из гайда LinkedIn · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Спроектируйте конвейер, который получает диагностические данные от миллионов устройств и делает их доступными для запросов при подготовке ежедневных отчетов и анализа с защитой конфиденциальности.
Из гайда Apple · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
После изменения схемы вышестоящего источника снизился ежедневный показатель. Как определить, действительно ли произошло снижение?
Из гайда Apple · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Спроектируйте конвейер, который принимает телеметрию большого парка автомобилей и делает ее доступной для запросов при подготовке ежедневных отчетов и оповещений почти в реальном времени.
Из гайда Tesla · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Панель управления завода показывает итоговые значения, не совпадающие с исходной системой. Как определить, на каком этапе появилось расхождение?
Из гайда Tesla · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Спроектируйте конвейер, который сверяет события платежей из нескольких источников в ежедневном реестре, где ни одна запись не должна учитываться дважды.
Из гайда Stripe · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Перед вами незнакомый конвейер и задание, завершившееся ошибкой. Найдите причину.
Из гайда Stripe · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Спроектируйте конвейер, который собирает результаты тестирования со множества производственных линий и делает их доступными для запросов при подготовке ежедневных отчётов о выходе годной продукции и специального анализа.
Из гайда Intel · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Дневной агрегат не совпадает с исходной системой. Как определить, на каком участке конвейера возникло расхождение?
Из гайда Intel · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Спроектируйте таблицы для истории заказов онлайн-маркетплейса. Какая гранулярность у вашей fact-таблицы?
Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Объясните star schema и когда вы намеренно денормализовали бы её ещё сильнее.
Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Как сделать пайплайн идемпотентным и почему это важно для повторных запусков?
Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Как бы вы обнаружили, что пайплайн отработал успешно, но выдал неверные данные?
Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Технические (38)
Пошагово опишите модель данных для бизнеса по подписке и объясните, как вы будете учитывать изменения тарифов со временем.
Из гайда Google · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Ночное задание начало создавать дублирующиеся строки. Как вы найдёте причину и предотвратите повторение проблемы?
Из гайда Google · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Как бы вы выбирали между пакетной и потоковой обработкой для задачи подготовки отчётности?
Из гайда Google · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Как вы решаете, по каким признакам партиционировать, кластеризовать или индексировать большую аналитическую таблицу?
Из гайда Google · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Как обеспечить безопасный повторный запуск загрузки исторических данных без двойного учёта?
Из гайда Amazon · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Когда следует предпочесть колоночный формат построчному хранению и каковы издержки такого решения?
Из гайда Amazon · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Когда для продуктовой метрики следует выбрать потоковую обработку вместо пакетной и какова будет ее стоимость?
Из гайда Meta · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Как сделать повторный запуск ночного пакетного задания безопасным?
Из гайда Microsoft · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Как обеспечить безопасный повторный запуск масштабной загрузки исторических данных без двойного учёта?
Из гайда NVIDIA · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Дана таблица событий использования, которая может содержать дубликаты: рассчитайте ежедневное использование по аккаунтам и объясните, как вы выбираете ключ дедупликации.
Из гайда OpenAI · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Смоделируйте данные для отслеживания того, какие наборы данных питают какие нижестоящие таблицы. Какова гранулярность каждой таблицы и как вы обнаружите нарушенную зависимость?
Из гайда OpenAI · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Исходный источник за ночь переименовал столбец, и дашборд опустел. Расскажите, как вы найдёте причину, исправите её и предотвратите повторение.
Из гайда OpenAI · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Как бы вы смоделировали медленно меняющиеся атрибуты клиента, например тарифный план, чтобы исторические отчёты оставались верными?
Из гайда Anthropic · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
По таблице событий начала и отмены подписки найдите аккаунты, которые отменили, а затем снова оформили подписку, и объясните, как вы обрабатываете дублирующиеся события.
Из гайда Netflix · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Смоделируйте данные для отслеживания того, какие тайтлы участник начал, поставил на паузу и досмотрел. Какова гранулярность вашей таблицы фактов и какие атрибуты относятся к измерениям?
Из гайда Netflix · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Какая работа с данными увлекает вас больше всего и какой недавний проект это показывает?
Из гайда Netflix · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Когда для продуктовой метрики вы выберете потоковую обработку вместо пакетной и какова цена такого решения?
Из гайда LinkedIn · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Как обеспечить безопасный повторный запуск загрузки исторических данных без двойного подсчета?
Из гайда Apple · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Как обеспечить безопасный повторный запуск масштабной дозагрузки исторических данных без двойного учета?
Из гайда Tesla · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Имея только документацию незнакомого API, как вы создадите рабочее задание для загрузки данных за час?
Из гайда Stripe · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Когда для финансового отчёта вы выберете потоковую обработку вместо пакетной и чем это обойдётся с точки зрения корректности?
Из гайда Stripe · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Как обеспечить безопасный повторный запуск масштабной загрузки исторических данных без двойного учёта?
Из гайда Intel · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Когда для мониторинга вы выбрали бы потоковую обработку вместо пакетной и какова её стоимость?
Из гайда Intel · Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Этот запрос сканирует миллиард строк и занимает двадцать минут. Как вы будете это диагностировать?
Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Объясните разницу между партиционированием и кластеризацией и когда что помогает.
Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Стейкхолдер хочет, чтобы исторические отчёты отражали текущий регион клиента. Что сломается?
Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Как бы вы смоделировали поток событий, приходящих не по порядку?
Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Когда вы выберете широкую таблицу вместо нормализованной модели?
Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Источник upstream снова присылает вчерашние данные. Что происходит с вашей задачей?
Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Как бы вы сделали backfill за два года истории, не нарушив ежедневную загрузку?
Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Опоздавшие данные появляются через три дня после закрытия партиции. Что вы делаете?
Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Что вы мониторите и что будит кого-то в три часа ночи?
Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Что вызывает shuffle и почему он дорогой?
Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Ваша задача выполняется медленно, и одна таска занимает намного дольше остальных. Что происходит?
Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Объясните data skew и два способа с ним справиться.
Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Когда вы выберете стриминг вместо запланированной batch-задачи?
Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Что на самом деле гарантирует exactly once обработка и где эта гарантия не действует?
Отработать его на пробном собеседовании · Составить мой ответ по моему резюме
Как watermark обрабатывают события не по порядку в оконной агрегации?
Отработать его на пробном собеседовании · Составить мой ответ по моему резюме