Банк вопросов из реальных собеседований

Модели стоимости доставки нужен свежий признак нагрузки курьеров. Из каких событий и состояний его рассчитывать, чтобы использовать непосредственно в момент принятия решения?

Как искать узкие места и оптимизировать LLM inference pipeline: batching, latency, throughput, память и стоимость?

A neural network inference pipeline is too slow. What optimizations would you consider before changing the model architecture?

The call-processing pipeline works but inference is too expensive. What would you optimize first?

What main architecture families are used for generative models, and where are they commonly applied?

Что должен сделать ML-инженер, чтобы довести модель до production-сервиса: интерфейс, артефакт, Docker, мониторинг и обновления?

Your punctuation model has good validation metrics, but users complain that some outputs are strange. What could be happening and how would you debug it?

Чем отличаются recall@K, precision@K, coverage и NDCG в оценке рекомендаций? Как они ведут себя при изменении K?

Чем отличаются recall@K, precision@K, coverage и NDCG в оценке рекомендаций? Как они ведут себя при изменении K?

Чем отличаются recall@K, precision@K, coverage и NDCG в оценке рекомендаций? Как они ведут себя при изменении K?

How would you evaluate the full search pipeline and its individual components offline and online?

Каталог и фотографии постоянно меняются. Как организовать переобучение модели и обновление ANN-индекса визуального поиска?

После запуска рекомендательной ленты как определить, когда и каким образом переобучать её модели?

How would you define requirements for a platform that trains large models on temporarily idle GPUs in multiple data centers?

A vector search returns top-k nearest items, but all results are too similar to each other. How can you keep relevance while increasing diversity?

A deployed LTV model works acceptably on average but badly for some apps. How would you find where and why it fails?

A video-analytics platform wants an assistant that answers support requests using documentation and prior tickets. How would you design the RAG system?

Как выбрать thresholds для предупреждения о phishing и какие метрики мониторить в production?

Нужно спроектировать ML-систему, которая персонализирует минимальную сумму заказа или стоимость доставки ниже порога. Как определить цель, границы решения и план первой версии?

Нужно сделать блок рекомендаций в корзине для 10 млн пользователей и 100 тыс. товаров. Как определить цель, ограничения и состав первой версии?

Компания дала годовой guidance роста добычи. Почему опасно равномерно размазать его по кварталам?

Нужно сделать поиск/подсказки по базе статей или банковских ответов. Почему разумно начать с BM25/TF-IDF, а не сразу с embeddings/RAG?

От чего зависит высокая доля принятия предварительных токенов и почему среднее значение нужно разбирать по позициям и типам запросов?

Нужно оценивать или подсказывать цену объявления о продаже подержанного товара. Какие признаки и базовый вариант предложить?