Frage an BingChat: Wer war Hermann Stoll? - aber eigentlich geht es um Grundsätzliches!

Nach dem Fiasko mit ChatGPT (Archaeologik 9.3.2023), habe ich diese Frage auch im neuen KI-gestützten Chat-Modus von Microsoft Bing gestellt. Die erste Antwort lautet:

Hermann Stoll war ein deutscher Geologe und Prähistoriker, der von 1904 bis 1944 lebte. Er war vor allem für seine Forschungen zur Siedlungsgeschichte des Oberen Gäus und zur frühmittelalterlichen Archäologie bekannt. Er arbeitete an verschiedenen Instituten und Museen in Tübingen, Bonn und Freiburg und führte zahlreiche Grabungen durch. Er starb nach einer Kriegsverletzung in sowjetischer Gefangenschaft12.

1: Hermann Stoll – Wikipedia https://de.wikipedia.org/wiki/Hermann_Stoll 2: Hermann Stoll - Wikipedia https://en.wikipedia.org/wiki/Hermann_Stoll

Im Unterschied zu ChatGPT stimmen hier grundsätzliche Fakten. Als weitere mögliche Fragen gibt Bing vor: "Wie hat er zur Archäologie beigetragen?" und antwortet darauf:

Er hat zur Archäologie beigetragen, indem er neue Methoden und Fragestellungen für die Erforschung von Siedlungen und Gräberfeldern entwickelte. Er gilt als einer der Wegbereiter der modernen Siedlungsarchäologie, die sich für die Zusammenhänge zwischen Besiedlung und natürlichen Bedingungen interessiert. Er führte auch interdisziplinäre Ansätze und Diskussionen mit anderen Wissenschaften ein. Er war einer der wenigen Archäologen seiner Zeit, die sich nicht von nationalistischen Ideologien beeinflussen ließen12. Er publizierte zahlreiche Arbeiten zu verschiedenen Themen der Ur- und Frühgeschichte, vor allem in Süddeutschland3.

1: Hermann Stoll – Wikipedia https://de.wikipedia.org/wiki/Hermann_Stoll 2: Siedlungsarchäologie – Wikipedia https://de.wikipedia.org/wiki/Siedlungsarch%C3%A4ologie 3: Liste bekannter Prähistoriker – Wikipedia https://de.wikipedia.org/wiki/Liste_bekannter_Pr%C3%A4historiker

Die Links, die Bing gibt, führen jedoch nicht zur angegebenen Quelle, sondern wiederum auf die Bing-Suche. angezeigten Links sind indes soweit korrekt.

Folgen wir wiederum der vorgegebenen Frage "Was sind die wichtigsten Entdeckungen von Hermann Stoll?" erhalten wir die folgende Antwort, die nun merklich dünner wird:

Einige der wichtigsten Entdeckungen von Hermann Stoll sind:

• Die Erforschung der vorgeschichtlichen Höhensiedlung auf dem Kirchberg bei Reusten, die er als eine der ältesten befestigten Siedlungen in Süddeutschland identifizierte¹.
• Die Ausgrabung des alamannischen Gräberfelds von Hailfingen, das er als eines der reichsten und vielfältigsten seiner Zeit beschrieb und mit zahlreichen Funden dokumentierte¹².
• Die Erarbeitung des Frankenkatalogs, einer systematischen Übersicht über die fränkischen Funde aus dem Rheinland und Westfalen, die er nach chronologischen und regionalen Kriterien ordnete¹³.
• Die Grabungen in der Colonia Ulpia Traiana bei Xanten, einer römischen Stadt, die er teilweise freilegte und deren Geschichte und Struktur er erforschte¹ .

¹: Hermann Stoll – Wikipedia https://de.wikipedia.org/wiki/Hermann_Stoll ²: Geschichtliches lesebuch - Hermann Stoll - Google Books https://books.google.com/books/about/Geschichtliches_lesebuch.html?id=jRc2AAAAMAAJ ³: Siedlungsarchäologie – Wikipedia https://de.wikipedia.org/wiki/Siedlungsarch%C3%A4ologie : Hermann Stoll - Wikipedia https://en.wikipedia.org/wiki/Hermann_Stoll

Vergleicht man die Angaben mit dem Wikipedia-Artikel, der immer wieder als Quelle benannt wird, so wird deutlich, dass sich bei der Umformulierung des Wikipedia-Textes Ungenauigkeiten ergeben haben.

Ich fragte nun "Nenne mir einige wissenschaftliche Aufsätze über Hermann Stoll." Hier beginnt nun auch bei der Bing-KI das Fiasko. Die Titel, die das Sprachmodell generiert, gibt es nicht:

Hier sind einige wissenschaftliche Aufsätze über Hermann Stoll, die ich gefunden habe:

• Hermann Stoll (1904 - 1944) von Rainer Christlein, in: Archäologenbildnisse. Porträts und Kurzbiographien von Klassischen Archäologen deutscher Sprache, hrsg. von Reinhard Lullies und Wolfgang Schiering, Mainz 1988, S. 170-171. Dieser Aufsatz gibt einen kurzen Überblick über das Leben und Werk von Stoll und enthält ein Porträt von ihm¹.
• Hermann Stoll als Siedlungsarchäologe von Hans Ulrich Nuber, in: Archäologische Informationen 9/10, 1986/87, S. 7-14. Dieser Aufsatz würdigt die Leistungen von Stoll für die Siedlungsarchäologie und analysiert seine Methoden und Fragestellungen anhand seiner wichtigsten Publikationen².
• Hermann Stoll und die Erforschung der Alamannen von Dieter Geuenich, in: Alamannien und Rom. Römer und Alamannen im Konflikt, hrsg. von Dieter Geuenich und Hans Ulrich Nuber, Stuttgart 2001, S. 9-18. Dieser Aufsatz beschäftigt sich mit den Beiträgen von Stoll zur Erforschung der Alamannen im Frühmittelalter und seiner Rolle in der damaligen Forschungsgemeinschaft³.

¹: 17: Hermann Stoll (1904 - 1944) - Deutsche Digitale Bibliothek https://www.deutsche-digitale-bibliothek.de/item/Z7PNV6U5E3OGAUYETXUGKXGL32A7CWQ7 ²: Hermann Stoll als Siedlungsarchäologe - JSTOR https://www.jstor.org/stable/41231764 ³: Hermann Stoll und die Erforschung der Alamannen - Google Books https://books.google.com/books?id=0ZxqAAAAMAAJ&q=Hermann+Stoll+und+die+Erforschung+der+Alamannen&dq=Hermann+Stoll+und+die+Erforschung+der+Alamannen&hl=en&sa=X&ved=2ahUKEwjOyZjM0Pf0AhWJF1kFHcYwBvIQ6AEwAHoECAEQAg

Bei dem angeblichen Aufsatz von Rainer Christlein ist über die Deutsche Nationalbibliothek der Nachruf aus den Badischen Fundberichten 17, 1941-47 zu erreichen, nicht der erfundene Artikel. Der angebliche Artikel von H.U. Nuber, der auf jstor stehen soll führt unter dem angegebenen Link zu "404 We can’t find the page you’re looking for".

Fazit: Durch den Einbezug von Wikipedia besser als der vorige Test in ChatGPT, aber wissenschaftliche Artikel werden samt Inhaltsangabe immer noch erfunden und die tatsächlichen nicht verwendet.

Aktuell ist an den Universitäten eine Diskussion ausgebrochen, wie man mit dem kaum zu verhindernden KI-Einsatz in Hausarbeiten etc. umgehen soll. Das Hauptproblem, dass aktuell die KI auf Sprachmodelle rekurriert und eben nicht auf wissenschaftlichen Fakten - und damit die Grundlagen einer modernen technik- und wissensbasierten Gesellschaft aushöhlt, wird ob all der Technikbegeisterung und teils auch trotz einer gewissen Technikskepsis erstaunlich selten angesprochen. Die Diskussion um KI müsste hier viel grundlegender sein und gehört eigentlich nicht in die Hände von Informatiker*innen, sondern bräuchte eine grundlegende geistes- und kulturwissenschaftliche Reflektion und eine gesellschaftliche Diskussion, die sich ganz grundlegend mit den Auswirkungen der Verschiebung von Fakten auf häufigkeitsbasierte Aussagewahrscheinlichkeiten befasst. Mittelfristig wird das KI-Halbwissen wieder auf Wikipedia und auch wissenschaftliche Artikel (insbesondere bei Fehlen einer Qualitätssicherung) zurückwirken, was eine Unterscheidung von Fakten und KI-Fiktion erschweren wird. Eine Referenz auf Originalquellen und deren digitale Bereitstellung via qualifizierter Portale wird noch wichtiger.

Und es stellt sich überhaupt die Frage, warum KI auf Sprachmodelle setzt, die durch irgendwelche Social Media oder Texte fiktiver Literatur trainiert werden, anstatt dass qualifiziertes Wissen angezapft wird? Das mag auch was damit zu tun haben, dass Social-Media Texte und fiktive Literatur im Pool untergehen und daher urheberrechtlich kaum rückverfolgbar sind, wissenschaftliche Texte aber noch viel zu oft mit exklusiven Nutzungsrechten bei kommerziellen Verlagen publiziert werden. Anonyme Quantität geht hier vermutlich vor renommierter Qualität, weil sie juristisch einfacher und kommerziell günstiger umzusetzen ist.