Skip to content

Fork du code de LMSYS (FastChat) pour l'arène de comparaison de LLM francophones Compar:IA

License

Notifications You must be signed in to change notification settings

betagouv/ComparIA

Repository files navigation


compar:IA logo

Comparateur d’IA conversationnelles

Compar:IA est un outil permettant de comparer à l’aveugle différents modèles d'IA conversationnelle pour sensibiliser aux enjeux de l'IA générative (biais, impact environmental) et constituer des jeux de données de préférence en français.

🌐 comparia.beta.gouv.fr · 📚 À propos · 🚀 Description de la startup d'Etat

Cliquez sur l'image ci-dessus pour consulter le site (s'ouvre dans un nouvel onglet)

Le comparateur est basé sur Gradio et FastChat, le code de l'arène Chatbot Arena par LMSYS.

Lancer l'arène

  1. Personnaliser le fichier register-api-endpoint-file.json avec des clés d'API valide

Avec Docker

cd docker/; docker compose up -d

Sans Docker

pip install -r requirements.txt
cd custom_components/frinput
gradio cc install;gradio cc build --no-generate-docs
cd ../../custom_components/customradiocard
gradio cc install;gradio cc build --no-generate-docs
cd ../..

puis export LANGUIA_DEBUG=True; uvicorn main:app --reload --timeout-graceful-shutdown 1 ou simplement uvicorn main:app