Agenda

• Méthodologie v0 et améliorations
  • Data et notebooks sur le repo methodo
    • ml.energy : leaderboard | repo
    • llm-perf : leaderboard | repo / backend | dataset
  • Analyse de sensibilité :
    • hardware : issue #1
    • mixed precision : issue #2
    • optimizations (llm-perf)
    • quantization
• Périmètre test bench
  • Intégrer un nouveau backend
  • Tester avec des modèles plus gros
• Ambassadeur avec le chantier sensibilisation

Notes

Accès GitHub pour avance sur l’analyse de sensibilité :

• Fabrice Gentot
• Flavien Henrion

Cyril Deblois peut aider contact HF

Ambassadeur méthodo:

• Flavien Henrion
• Samuel Rincé