Wissenschaftler bevorzugen die Meinung der künstlichen Intelligenz gegenüber der ihrer menschlichen Kollegen: Umfrage

Zu den Chatbot-Programmen, die künstliche Intelligenz nutzen, gehört ChatGPT, das laut einer Umfrage sogar die menschliche Meinung bei der Analyse wissenschaftlicher Arbeiten ersetzen kann.

ChatGPT: was es ist und wofür es verwendet wird

Freepik

ChatGPT ist ein Sprachmodell, das von OpenAI im November 2022 auf den Markt gebracht wurde und das eine unglaubliche Menge an Daten zur Verarbeitung seiner Antworten nutzt, was es am Arbeitsplatz äußerst nützlich macht. Im Grunde braucht man nur eine Frage zu stellen, um detaillierte Informationen zu praktisch jedem Thema zu erhalten, mit Ausnahme von besonders sensiblen Themen: Diese fortschrittliche Technologie ist in der Lage, Wörter und Phrasen durch Statistiken, überwachtes und verstärkendes Lernen zu indizieren. Natürlich verfügt sie nicht über die gleiche Intelligenz wie ein menschliches Gehirn, aber sie ist in der Lage, Wörter auf erstaunliche Weise zusammenzusetzen und nicht nur sinnvolle, sondern auch wohlformulierte Sprache zu erzeugen.

Im akademischen und wissenschaftlichen Bereich ist es besonders nützlich, nicht nur Artikel zu verfassen, sondern auch um Vorschläge für Titel und Begriffe zu bitten, bis hin zur Erstellung eines ganzen Dokuments: Das gilt selbst für die einfachsten Schulaufsätze und Hausarbeiten bis hin zu populärwissenschaftlichen Texten. Aus diesem Grund sind zahlreiche Debatten und Verwirrungen über ihre Verwendung entstanden, die von einer einfachen Unterstützung zu einem echten Ersatz für bestimmte menschliche Tätigkeiten werden kann. Wie zum Beispiel im Fall der wissenschaftlichen Gutachter.

ChatGPT und wissenschaftliche Begutachtung: das Experiment

Pexels

Offensichtlich ziehen es Forscher vor, die Meinung von ChatGPT zu ihrer Arbeit zu erhalten, anstatt ihre Kollegen um Vorschläge, Kritik und Korrekturen zu bitten. Bevor sie ihre Arbeiten in wissenschaftlichen Zeitschriften veröffentlichen, müssen Akademiker ihre Arbeit einem Peer-Review unterziehen, d.h. der Meinung ihrer Kollegen auf dem Gebiet. Das bedeutet, dass andere Forscher desselben Fachgebiets ihre Arbeit bewerten und sie mit bereits veröffentlichten Artikeln vergleichen, um ihre Ergebnisse zu bestätigen oder zu widerlegen. Dieses System soll dafür sorgen, dass die Arbeit originell ist und eine solide Grundlage hat, aber es scheint, dass die Zahl der "menschlichen" Gutachter zurückgegangen ist.

Viele angesehene Zeitschriften verlassen sich bei dieser Arbeit auf freiwillige Gutachter, was bedeutet, dass sich nur noch Forscher zur Verfügung stellen, die sich bereit erklären, unentgeltlich begutachtete Arbeiten zu prüfen, so dass ihre Zahl immer geringer wird. Diese Art von Ressource ist immer schwieriger zu finden, sowohl wegen der Notwendigkeit, eine Person auf demselben Gebiet zu finden, als auch wegen fehlender Anreize. Diese Erkenntnis veranlasste James Zou, Assistenzprofessor für biomedizinische Datenwissenschaft an der Stanford University, USA, zu testen, ob Chatbots wie ChatGPT die Peer-Review effektiv ersetzen könnten. Zusammen mit seinen Kollegen nahm er eine Stichprobe von 5.000 Arbeiten, die zuvor von der Nature-Redaktion und der ICLR (International Conference on Learning Representations) begutachtet worden waren, schickte die PDF-Dateien an ChatGPT und verglich die Begutachtung durch die künstliche Intelligenz mit der durch Forscher.

Umfrage: Die Meinung der Forscher zur ChatGPT-Überprüfung

Pixabay

Das Ergebnis zeigte, dass etwa ein Drittel der vom Programm gemachten Beobachtungen mit denen von Menschen übereinstimmten. An diesem Punkt nahm Zou Kontakt mit den Forschern auf, die die an seiner Studie beteiligten Arbeiten verfasst hatten: 57,4 Prozent fanden die Überprüfung durch ChatGPT sehr nützlich, während sogar 82,4 Prozent sagten, dass die Arbeit des Chatbots besser war als die einiger menschlicher Kollegen. Allerdings wurde bei Zous Experiment ein wichtiger Aspekt nicht berücksichtigt: einige Fehler im ChatGPT-Feedback aufgrund des Problems der Chatbot-Fehlinformationen, die verwirrend sein können. Die Studie von Zou wurde noch nicht veröffentlicht, da sie noch auf die Begutachtung durch Fachkollegen wartet, aber sie zeigte dennoch, dass die meisten Autoren ChatGPT für effizienter halten als die Analyse ihrer Kollegen. Ein Fragezeichen bleibt: Ist dies wirklich der Fall?

Auf jeden Fall können Sie diese Technologie auf funktionale und nützliche Weise nutzen, wenn Sie die folgenden Aspekte berücksichtigen:

• Formulieren Sie die Sätze einfach und klar, so dass die Antworten ebenso einfach, aber detailliert sind.
• Je detaillierter Sie antworten, desto mehr "Verständnis" wird ChatGPT haben, um Ihnen eine effektive Antwort zu geben
• Wenn Sie Inspiration für das Schreiben eines Textes brauchen, fragen Sie die Technik, welche Themen Sie ansprechen könnten
• Wenn Sie eine Rede vorbereiten müssen, können Sie das Programm bitten, Ihnen einige Ideen zu geben
• Gehen Sie auf eine Reise? Wenn Sie Ihr Reiseziel angeben und Ihre Bedürfnisse beschreiben, kann ChatGPT Ihnen eine maßgeschneiderte Reiseroute erstellen.

Kurzum, es gibt viele Anwendungsmöglichkeiten, aber der menschliche Beitrag zur künstlichen Intelligenz sollte nie fehlen. Was meinen Sie dazu?