(R) Meta Sorties Kit de données synthétiques !!

Le kit de données synthétique est un outil CLI qui rationalise l’étape de préparation des données souvent négligée du réglage fin LLM. Bien qu’il existe de nombreux outils pour le processus de réglage fin réel, ce kit se concentre sur la génération de données de formation synthétique de haute qualité via un simple flux de travail à quatre commands:

1. ingérer – Importer divers formats de fichiers
2. créer – Générez des paires d’AQ avec / sans traces de raisonnement
3. vicaire – Utilisez Llama comme juge pour sélectionner des exemples de qualité
4. sauvegarde comme – Exporter vers des formats de réglage fin compatibles

L’outil exploite les LLM locaux via VLLM pour créer des ensembles de données synthétiques, particulièrement utiles pour déverrouiller le raisonnement spécifique à la tâche dans les modèles LLAMA-3 lorsque vos données existantes ne sont pas formatées correctement pour les flux de travail fins.

https://preview.redd.it/i7rbjc8hy8ye1.png?width=1770&format=png&auto=webp&s=1069fec9e67d36e23b0e2d9da7c593d083277088