Ir al contenido

Entrenar

Ejecute fine-tuning indicando un conjunto preprocesado, un modelo base y un método de entrenamiento (STAGE).


1. Elegir los datos

Seleccione una carpeta ya preparada, no la carpeta de origen. Elija Team AppData Training Set, Personal AppData Training Set o introduzca una ruta Custom.... Al seleccionarla, se valida y muestra la cantidad de archivos disponibles.

Elegir datos

Formato de datos

Elija Auto-detect, Alpaca, ShareGPT, Pairwise o Plain Text.

  • SFT usa JSON/JSONL con instruction/input/output.
  • DPO/ORPO usa JSON/JSONL con chosen/rejected.
  • El texto .txt/.md es exclusivo de Plain Text (preentrenamiento PT); al elegirlo, STAGE cambia a PT.

Extensiones y directorio de salida

Seleccione las extensiones (.md, .txt, .json, .jsonl) y el directorio donde se guardarán los resultados. Cada ejecución crea una subcarpeta numerada.

2. Elegir un modelo

Introduzca un HUGGINGFACE MODEL ID o use la búsqueda. También puede elegir Qwen2.5-7B-Instruct, Qwen2.5-14B-Instruct, Gemma-2-9B-It, Llama-3.1-8B-Instruct, DeepSeek-R1-14B o DeepSeek-R1-8B.

CHAT TEMPLATE detecta el formato por el nombre del modelo de forma predeterminada (recomendado). Selecciónelo manualmente solo si no funciona.

Elegir modelo y método

3. Elegir STAGE y el tipo de fine-tuning

STAGEDescripción
SFT (Supervised Fine-Tuning)Enseña una tarea con datos instruction/input/output
DPOEntrena preferencias con datos chosen/rejected
ORPOMétodo de alineación por preferencias similar a DPO
PT (Pre-Training)Continued Pre-Training con conocimiento de dominio en texto plano

En FINETUNING TYPE, elija LoRA, QLoRA (cuantización de 4 bits), Full o Freeze. También puede ajustar LoRA RANK, LORA ALPHA y DROPOUT.

4. Iniciar el entrenamiento

Seleccione Start Training. El panel derecho muestra en tiempo real el estado, modelo, RUN ID, ruta del resultado, progreso y logs. Para detenerlo, seleccione Stop.

Información útil

  • Si el formato no coincide con STAGE, es posible que el entrenamiento no comience.
  • No puede cambiar la configuración de una ejecución mientras se entrena.

Documentos relacionados