Quizzes de NLP, transformers y LLM

Cómo convierten los modelos de lenguaje el texto en tokens y vectores, cómo funcionan la atención y el transformer, y cómo los grandes modelos de lenguaje generan texto, se ajustan con fine-tuning y usan recuperación de información.

Intermedio 5 quizzes · 50 preguntas alrededor de 34 minutos
0/5aprobados Examen de categoría 20 preguntas variadas. Con un 80% consigues un certificado.
Etiquetas:
1 Tokenización y embeddings Media Aprende cómo el texto se convierte en tokens y los tokens en vectores que capturan el significado. #nlp#tokenization 10 preguntas · ~6 min Sin empezar Empezar
2 El mecanismo de atención Difícil Queries, keys, values, softmax y el escalado por sqrt(d), el corazón de todo transformer. #attention#transformers 10 preguntas · ~8 min Sin empezar Empezar
3 La arquitectura transformer Difícil Encoders, decoders, codificación posicional, máscaras causales y multi-head attention, al estilo de una entrevista. #transformers#interview 10 preguntas · ~8 min Sin empezar Empezar
4 Cómo generan texto los LLM Media Predicción del siguiente token, logits, ventanas de contexto y la diferencia entre el decoding voraz y el muestreo. #llm#text-generation 10 preguntas · ~6 min Sin empezar Empezar
5 Fine-tuning y RAG Media Cuándo hacer fine-tuning, cuándo recuperar información y los detalles que hacen funcionar la generación aumentada por recuperación. #llm#rag 10 preguntas · ~6 min Sin empezar Empezar