En tant qu'académique, je suis compréhensif car la publication prend du temps et il est difficile de suivre les modèles de pointe, mais... ...surtout si votre argument est "l'IA est mauvaise à X", vous devez expliquer pourquoi vous pensez que cela ne changera pas, tracer toute tendance à mesure que les modèles s'améliorent et se mettent à jour avant la publication.
Kevin Roose
Kevin Rooseil y a 8 heures
je supplie les universitaires d'étudier les capacités de l'IA en utilisant des modèles de pointe. les modèles utilisés dans cette étude (qui sera citée pendant des années comme preuve que "l'IA est mauvaise en conseils de santé") sont GPT-4o, Llama 3 et Command R+, deux modèles obsolètes et un que je n'ai jamais entendu parler.
Le document a en fait deux grands points réels, cependant : (1) Les humains étaient mauvais pour inciter (obsolète) l'IA à obtenir des conseils médicaux - je soupçonne que ce n'est plus aussi vrai. (2) Les références de connaissances médicales ne signifient pas toujours la réalité dans le service aux patients. Le point 1 a changé, je pense, le point 2 ne l'a pas fait.
192