SaaS Tech StudioSaaS Tech Studio
← Catalogue
🧠 Modèle IAai_modelUS

Orca 2

Suite de modèles de Microsoft conçue pour le raisonnement et l'apprentissage de petits modèles avec des données synthétiques.

À propos

Orca 2 est une série de petits modèles linguistiques (Small Language Models - SLMs) développée par Microsoft Research. L'objectif principal d'Orca 2 est de démontrer que des SLMs peuvent atteindre des capacités de raisonnement remarquables en utilisant des techniques d'enseignement sophistiquées provenant de grands modèles existants. Il se concentre sur l'apprentissage expliquant, le raisonnement pas à pas et l'imitation de la progression du raisonnement des LLMs plus grands, plutôt que de simplement imiter leur comportement final.

Fonctionnalités clés

  • Apprentissage d'explications
  • Raisonnement pas à pas
  • Performances améliorées pour les SLMs
  • Données d'entraînement synthétiques

Tarification

Open Source

Avantages

  • Excellent raisonnement pour sa taille
  • Alternative efficace aux grands LLMs
  • Contribue à la démocratisation des IA performantes

Inconvénients

  • Performances encore inférieures aux LLMs géants sur certaines tâches complexes

Alternatives

Phi-2TinyLlama