Découvrez PromptWizard, un framework open-source sous licence MIT développé par Microsoft, conçu pour automatiser l'optimisation orientée tâche des prompts de LLM.
L'outil s'attaque à la complexité du prompting itératif en orchestrant une boucle d'évaluation où un LLM pilote la génération, la critique et l'affinage simultanés des instructions et des exemples contextuels.
Fonctionnalités clés :
-Affinage des instructions : Mutation des consignes candidates et sélection par benchmark de performance.
-Optimisation des exemples (In-Context Learning) : Sélection de jeux d'entraînement diversifiés intégrant des cas positifs et négatifs.
-Génération d'exemples synthétiques : Synthèse automatique de données palliant les faiblesses structurelles détectées lors de l'évaluation.
-Parcours d'utilisation modulaires : Prise en charge découplée ou combinée de l'optimisation des prompts, de la génération synthétique et du raffinage des données d'entraînement.
-Orchestration YAML : Paramétrage granulaire des mécanismes de mutation, de l'évaluation et des stratégies few-shot.
Lien du repo : PromptWizard
Par Aghilas AZZOUG