OpenAI développe de nouvelles stratégies face au ralentissement de l’IA
Et si l'âge d'or de l'intelligence artificielle touchait déjà à sa fin ? C'est ce que semble craindre OpenAI, le célèbre laboratoire à l'origine des modèles révolutionnaires GPT. Selon un récent rapport de The Information, les derniers tests internes de leur prochain fleuron, baptisé Orion, révèlent un progrès moins spectaculaire qu'espéré par rapport à ses prédécesseurs.
Orion, un géant aux pieds d'argile ?
Malgré des performances supérieures aux modèles actuels d'OpenAI, le bond qualitatif entre Orion et GPT-4 serait nettement moins impressionnant que celui observé précédemment entre GPT-3 et GPT-4. Certains domaines, comme la programmation informatique, ne montreraient même aucune amélioration fiable. Un constat qui fait l'effet d'une douche froide.
Le rythme d'amélioration semble ralentir. Orion pourrait ne pas être systématiquement meilleur que les modèles précédents dans certains domaines, comme le codage.
The Information
Cap sur de nouvelles stratégies
Pour contrer cette tendance inquiétante, OpenAI ne compte pas rester les bras croisés. L'entreprise vient de créer une équipe dédiée, chargée d'imaginer comment continuer à perfectionner ses modèles malgré la raréfaction des données d'entraînement disponibles. Parmi les pistes explorées :
- Entraîner Orion sur des données synthétiques générées par des modèles d'IA
- Optimiser davantage les modèles lors de la phase de post-entraînement
Vers une nouvelle ère de l'IA ?
Si ces approches innovantes portent leurs fruits, elles pourraient bien ouvrir un nouveau chapitre dans l'histoire de l'IA. Plutôt que de dépendre de quantités toujours plus colossales de données réelles, les futures avancées reposeront peut-être davantage sur l'ingéniosité des chercheurs à exploiter au mieux les ressources existantes.
Une chose est sûre : malgré les embûches, la quête d'une intelligence artificielle toujours plus performante est loin d'être terminée. Et OpenAI compte bien rester à la pointe de cette révolution technologique, quitte à devoir réinventer ses méthodes. Reste à savoir si ses concurrents, comme Google ou Facebook, parviendront à tirer leur épingle du jeu dans cette nouvelle donne. Les paris sont ouverts !
