Definition
Los transformadores de oraciones son extensiones de los modelos Transformer tradicionales (como BERT), ajustados finamente para producir representaciones vectoriales densas y significativas para oraciones completas. A diferencia de los modelos estándar a nivel de token, estos generan una única representación para toda la oración.
Summary
Arquitecturas de redes neuronales diseñadas específicamente para generar incrustaciones vectoriales de tamaño fijo para oraciones de texto arbitrarias.
Key Concepts
- Capas de agrupamiento (Pooling layers)
- Aprendizaje contrastivo
- Incrustaciones densas
- Arquitectura Transformer
Use Cases
- Motores de búsqueda semántica
- Agrupamiento de datos textuales
- Pipelines de Generación Aumentada por Recuperación (RAG)