ScarfBench mesure la migration Java avec des agents IA

HuggingFace présente ScarfBench, un benchmark qui évalue la capacité des agents IA à migrer des frameworks Java legacy vers des versions modernes. Le test porte sur des tâches réelles : refactoring de code, gestion des dépendances, adaptation des APIs. Selon les résultats préliminaires, les agents réussissent à traiter 60–75 % des migrations simples, mais échouent sur les architectures complexes ou les patterns métier spécifiques. C'est un benchmark ouvert : les équipes peuvent le reproduire, soumettre leurs agents et comparer les performances. Enjeu concret : évaluer si l'IA peut vraiment automatiser la maintenance de code legacy, qui coûte cher aux entreprises.