← Todas las etiquetas

#huggingface

Modelos Open Source: HuggingFace Ecosystem

El Hub y el pipeline de una línea

pipeline() no es una función de análisis: es un resolutor que elige modelo, monta el tokenizador y decodifica la salida. Las cuatro etapas ocultas, la decisión sin dueño del modelo por defecto, y cuándo bajar a las clases Auto.

  • huggingface
  • pipeline
  • hub
  • transformers
  • cache

Modelos Open Source: HuggingFace Ecosystem

Elegir modelo: modalidad, tarea y licencia

Elegir modelo empieza por qué entra y qué sale, no por cuál es el mejor. El árbol de decisión completo, dónde cae de verdad el fine-tuning, cómo se lee una model card y por qué «open source» no es una sola cosa.

  • huggingface
  • model-card
  • licencias
  • modalidad
  • seleccion-modelo

Modelos Open Source: HuggingFace Ecosystem

La plantilla de chat y los tokens especiales

Un modelo de chat sigue siendo un completador de texto: la lista de mensajes con roles se traduce a una cadena con delimitadores propios de ese modelo. apply_chat_template, add_generation_prompt y por qué ningún split escrito a mano sobrevive a un cambio de modelo.

  • chat-template
  • tokenizador
  • tokens-especiales
  • generacion
  • huggingface