Une équipe de recherche a recréé la technologie de base de Deepseek pour seulement 30 $. Un exploit qui remet en question les coûts associés à ce nouveau secteur technologique.
Après avoir tremblé l’industrie avec des coûts radicalement inférieurs à ceux de son concurrent américain Openai et a déclenché la colère de ce dernier, le modèle open source de En profondeur Cette fois attire l’attention des chercheurs. Une équipe de l’Université de Berkeley a récemment annoncé qu’elle avait recréé le cœur de la technologie Deepseek Pour seulement 30 $.
Un modèle d’apprentissage
C’est sur X (anciennement Twitter) que Jiayi PanUn doctorant à l’Université de Berkeley, a dévoilé cet exploit. Dans une série de publications, il explique comment son équipe a conçu une IA basée sur le modèle Deepseek R1-zéro en le configurant dans une adaptation du jeu Chiffres et lettres. Contrairement au modèle Premium Deepseek, qui a 671 milliards de paramètres, leur version initiale ne possédait initialement que 500 millions. Si elle a produit des réponses erronées pour la première fois, les chercheurs ont progressivement augmenté sa capacité à obtenir bons résultats depuis Trois milliards de paramètresL’IA a réussi à trouver les bonnes réponses en moins d’étapes et surtout en réussissant à se corriger.
Exemple de raisonnement du modèle de l’équipe de Jiayi Pan // Source: X (Twitter)
Ce qui est d’autant plus impressionnant, c’est que l’équipe PAN prétend avoir accompli cela un coût d’environ 30 dollars. Actuellement, les API OpenAI coûtent 15 $ par million de jetons d’entrée, plus de 27 fois le prix de 0,55 $ par million de jouets d’entrée Deepseek-R1, rapporte Matériel de Tom.
Aller plus loin
Qu’est-ce qu’un LLM? Comment fonctionnent Chatgpt, Gemini et d’autres?
Cependant, ces coûts restent à qualifier, car ils ne prennent en compte que les coûts techniques associés à l’étude et mettent de côté les coûts de recherche humaine et structurelle. Pour le plus curieux et le plus désireux de reproduire cet exploit, Jiayi Pan détaillé Sa méthodologie complète et l’a rendu accessible sur Girub.
Notre spectacle de twitch à haut couvertC’est un mercredi sur deux de 18 h à 20 h: Trouvez-nous pour parler de voiture électrique ou de vélo électrique, autour des débats, des interviews, des analyses et des jeux!
#Ces #chercheurs #ont #reproduit #une #version #Deepseek #pour #dollars