Квиз по AI & Machine Learning: Transformer Architecture

The transformer is the architecture behind modern language models. This hard, interview-style quiz checks how the pieces fit together, from encoder-only and decoder-only models to positional encoding, causal masking, multi-head attention and the blocks around it.

Сложный 10 вопроса ~8 минуты Проходной балл: 80%

Выберите режим

Вы играете как гость: войдите, чтобы сохранить XP и серию.

Пример вопроса

Вопрос 1 из 10

Which pairing of model family and architecture is right?

Показать ответ

C. BERT: encoder-only; GPT-style models: decoder-only BERT stacks encoder blocks that see the whole input in both directions, which suits understanding tasks. GPT-style models stack decoder blocks with a causal mask, which suits generating text left to right; the original transformer for translation used both.

Что проверяет этот квиз

  • Encoder-only, decoder-only and encoder-decoder models
  • Positional encodings, including rotary embeddings (RoPE)
  • Causal masking and why training can run in parallel
  • Multi-head attention and head sizes
  • Residual connections, layer norm and the feed-forward block

Частые вопросы

Нужен ли аккаунт?

Нет. Играть может любой. Войдите, чтобы сохранять XP, серию, значки и историю.

Можно пройти ещё раз?

Да. Лучший результат сохраняется, а вопросы и ответы каждый раз перемешиваются.