{"id":19645,"date":"2023-07-10T16:04:19","date_gmt":"2023-07-10T14:04:19","guid":{"rendered":"https:\/\/dhd-blog.org\/?p=19645"},"modified":"2023-07-10T16:04:19","modified_gmt":"2023-07-10T14:04:19","slug":"hallo-chatgpt-ist-das-komma-in-folgendem-satz-richtig-koennen-leistungsstarke-chatbots-traditionelle-sprachberatung-ersetzen","status":"publish","type":"post","link":"https:\/\/dhd-blog.org\/?p=19645","title":{"rendered":"\u201eHallo ChatGPT, ist das Komma in folgendem Satz richtig?\u201c \u2013 K\u00f6nnen leistungsstarke Chatbots traditionelle Sprachberatung ersetzen?"},"content":{"rendered":"<h3><strong>Motivation<\/strong><\/h3>\n<p>Viele Forschende kennen die Situation: Die Deadline ist in wenigen Minuten und man liest noch einmal das Paper Korrektur. Man st\u00f6\u00dft auf einen Satz, bei dem man sich nicht sicher ist, ob das Komma bei diesem richtig gesetzt ist. Einen Sprachberatungsservice anzufragen w\u00fcrde zu lange dauern, eine Google-Suchanfrage zu formulieren mit dem man die passenden Treffer bekommt w\u00e4re zu aufwendig \u2013 warum also nicht einfach ChatGPT fragen?<\/p>\n\n\n<p><\/p>\n\n\n\n<h3 class=\"wp-block-heading\"><strong>Forschungsstand<\/strong><\/h3>\n\n\n\n<p>F\u00fcr viele Fragestellungen unterschiedlicher Themenbereiche wurde die Qualit\u00e4t der Antworten von ChatGPT evaluiert. Einen \u00dcberblick \u00fcber verschiedene Untersuchungen geben Shahriar and Hayawi, 2023: Beispielsweise lassen Kung et al., 2023 ChatGPT Fragen aus der amerikanischen Zulassungspr\u00fcfung f\u00fcr Medizin beantworten, die aus 3 Pr\u00fcfungen besteht. Der Chatbot schneidet bei diesen an oder nahe an der Bestehensgrenze ab. Jalil et al., 2023 lassen ChatGPT Lehrbuchaufgaben zu Softwaretesten l\u00f6sen. Von 77,5 % der Fragen, die der Chatbot beantworten kann, sind 55,6 % korrekt oder teilweise korrekt beantwortet, wobei in 53 % der Antworten richtige Erkl\u00e4rungen gegeben werden. Hinzukommend arbeiten sie heraus, dass durch bestimmte Fragestellungen (\u201ePrompts\u201c, siehe dazu auch \u201ePrompt Engineering\u201c, u. a. Hariri, 2023; White et al., 2023) die Wahrscheinlichkeit leicht erh\u00f6ht wird, dass die Aufgabe korrekt gel\u00f6st wird.<\/p>\n\n\n\n<p><\/p>\n\n\n\n<h3 class=\"wp-block-heading\"><strong>Fragestellung und Konzeption<\/strong><\/h3>\n\n\n\n<p>In der vorliegenden Untersuchung soll evaluiert werden, wie gut ChatGPT bei Fragen zur (deutschen) Grammatik am Beispiel der Kommasetzung abschneidet. Damit wird gepr\u00fcft, ob eine Interaktion mit dem Chatbot einen konventionellen Sprachberatungsservice ersetzen kann. Daf\u00fcr wird ein Austausch zwischen einem linguistischen Laien und einem Chatbot-Experten (ChatGPT 3.5) simuliert.<\/p>\n\n\n\n<p><\/p>\n\n\n\n<h3 class=\"wp-block-heading\"><strong>Datengrundlage<\/strong><\/h3>\n\n\n\n<p>Die Datenbasis besteht aus konstruierten Anfragen zu 12 Komma-Regeln. Dabei besteht jede Anfrage aus einer Frage und einem Satz, in dem das \/ die Komma(s) in Frage gestellt werden, z. B. [Frage:] <em>Ist das Komma in folgendem Satz entbehrlich? <\/em>[Satz:] <em>&#8222;Ich reise gerne, vor allem in den Norden.&#8220; <\/em>F\u00fcr jede Komma-Regel wurden jeweils drei verschiedene S\u00e4tze konstruiert. Basierend auf einem Korpus des IDS-Projekts \u201e<a href=\"https:\/\/www.ids-mannheim.de\/gra\/projekte2\/sprachanfragen\/\">Sprachanfragen<\/a>\u201c, das sich aus authentischen E-Mail-Anfragen zur deutschen Sprache zusammensetzt, wurden folgende 6 Fragestellungen formuliert:<\/p>\n\n\n\n<p><em>Eher vage Fragestellung:<\/em><\/p>\n\n\n\n<ul class=\"wp-block-list\" type=\"1\">\n<li>Ist das Komma \/ Sind die Kommas in folgendem Satz entbehrlich?<\/li>\n\n\n\n<li>Ist das Komma \/ Sind die Kommas in folgendem Satz zu setzen?<\/li>\n\n\n\n<li>Ist kein Komma \/ Sind keine Kommas in folgendem Satz zu setzen?<\/li>\n\n\n\n<li>Ist das Komma \/ Sind die Kommas in folgendem Satz nicht zu setzen?<\/li>\n<\/ul>\n\n\n\n<p><em>Pr\u00e4zise Fragestellung:<\/em><\/p>\n\n\n\n<ul class=\"wp-block-list\">\n<li>Ist das Komma \/ Sind die Kommas in folgendem Satz richtig?<\/li>\n\n\n\n<li>Ist das Komma \/ Sind die Kommas in folgendem Satz falsch?<\/li>\n<\/ul>\n\n\n\n<p>F\u00fcr jede Anfrage werden zus\u00e4tzlich 2 weitere Antworten mit Hilfe der Funktion \u201eregenerate response\u201c generiert, da ChatGPT bisweilen dieselbe Frage unterschiedlich beantwortet (siehe <a href=\"https:\/\/openai.com\/blog\/chatgpt\">https:\/\/openai.com\/blog\/chatgpt<\/a> unter dem Abschnitt \u201eLimitations\u201c). Folglich stehen f\u00fcr die Untersuchung insgesamt 3 * 216 Antworten zur Verf\u00fcgung.<\/p>\n\n\n\n<h3 class=\"wp-block-heading\"><strong>Analyse<\/strong><\/h3>\n\n\n\n<p>Auf den ersten Blick machen die Antworten von ChatGPT einen professionellen Eindruck. Sie sind im Schnitt 53 Token lang und enthalten alle Elemente, die auch in den Antworten eines Sprachberatungsservice zu finden sind, wie in 1) ersichtlich wird: (i) Die L\u00f6sung des sprachlichen Problems, (ii) eine Beschreibung des Problems in einer an Fachsprache anmutenden Art und (iii) die Begr\u00fcndung der L\u00f6sung des Problems (vgl. Riegel, 2007). Dabei wird in 1) gem\u00e4\u00df \u00a7 77 (4) im Amtlichen Regelwerk des Rats f\u00fcr deutsche Rechtschreibung (ARW) ein Komma vor dem nachgestellten Zusatz <em>vor allem in den Norden <\/em>gesetzt.<\/p>\n\n\n\n<div class=\"wp-block-group has-background\" style=\"background-color:#f0f0f0\"><div class=\"wp-block-group__inner-container is-layout-constrained wp-block-group-is-layout-constrained\">\n<p>1) [Frage:] <em>Ist das Komma in folgendem Satz falsch? &#8222;Ich reise gerne, vor allem in den Norden.&#8220;<\/em> <br \/>[Antwort:] [i] Nein, das Komma in dem Satz &#8222;Ich reise gerne, vor allem in den Norden.&#8220; ist korrekt gesetzt. [ii] Es handelt sich um ein sogenanntes Komma der Erl\u00e4uterung oder Aufz\u00e4hlung, das den Hauptsatz &#8222;Ich reise gerne&#8220; von der Erl\u00e4uterung &#8222;vor allem in den Norden&#8220; trennt. [iii] Das Komma verdeutlicht, dass es sich um eine zus\u00e4tzliche Information handelt, die den Hauptgedanken erg\u00e4nzt.<\/p>\n<p>[ChatGPT 3.5 Abfrage vom 26.05.2023]<\/p>\n<\/div><\/div>\n\n\n\n<p><\/p>\n\n\n\n<h3 class=\"wp-block-heading\"><strong>Nutzung von Fachw\u00f6rtern<\/strong><\/h3>\n\n\n\n<p>U. a. finden sich mit <em>Komma der Erl\u00e4uterung<\/em> <em>oder Aufz\u00e4hlung<\/em> und <em>Hauptsatz <\/em>Fachw\u00f6rter in der Antwort in 1), die dieser einen seri\u00f6sen Eindruck verleihen. Um zu pr\u00fcfen, ob ChatGPT korrekte Termini gebraucht, werden im n\u00e4chsten Schritt die genutzten Fachw\u00f6rter in allen generierten Antworten automatisch getaggt (vgl. Lang et al., im Druck). Tabelle 1 listet alle Termini pro Antwortdurchgang, die eine Frequenz &gt; 10 haben.<\/p>\n\n\n\n<figure class=\"wp-block-table\"><table><tbody><tr><td><strong>Term<\/strong><\/td><td><strong>(1)<\/strong><\/td><td><strong>(2)<\/strong><\/td><td><strong>(3)<\/strong><\/td><\/tr><tr><td><em>Aufz\u00e4hlung<\/em><\/td><td>37<\/td><td>43<\/td><td>46<\/td><\/tr><tr><td><em>Konjunktion<\/em><\/td><td>29<\/td><td>17<\/td><td>17<\/td><\/tr><tr><td><em>Anrede<\/em><\/td><td>22<\/td><td>23<\/td><td>18<\/td><\/tr><tr><td><em>Infinitivsatz<\/em><\/td><td>20<\/td><td>22<\/td><td>23<\/td><\/tr><tr><td><em>Apposition<\/em><\/td><td>19<\/td><td>13<\/td><td>13<\/td><\/tr><\/tbody><\/table><figcaption class=\"wp-element-caption\">Tabelle 1: Die Termini, die pro Antwortdurchgang eine Frequenz &gt; 10 haben.<\/figcaption><\/figure>\n\n\n\n<p>Zwar stehen die Termini, die in Tabelle 1 gelistet sind, mit Kommasetzung in Zusammenhang, es stellt sich jedoch die Frage, ob das jeweilige Fachwort von ChatGPT auch im korrekten Kontext gebraucht wird. Da <em>Aufz\u00e4hlung <\/em>der von ChatGPT meistgenutzte Term ist, werden die Antworten, die dieses Fachwort enthalten, nun n\u00e4her analysiert. Im Folgenden werden einige davon pr\u00e4sentiert:<\/p>\n\n\n\n<p>In 2) liegen mit <em>\u00c4pfel<\/em>, <em>Birnen<\/em> und <em>Orangen <\/em>gleichrangige W\u00f6rter vor, die nach \u00a7 71 (2) im ARW \u201emit Komma voneinander ab[gegrenzt werden].\u201c Dabei wird das letzte Element der Aufz\u00e4hlung nicht mit einem Komma getrennt, da <em>Mandarinen<\/em> durch <em>und <\/em>mit den restlichen Elementen verbunden ist und gem\u00e4\u00df \u00a7 72 im ARW demnach kein Komma zu setzen ist.<\/p>\n\n\n\n<div class=\"wp-block-group has-background\" style=\"background-color:#f0f0f0\"><div class=\"wp-block-group__inner-container is-layout-constrained wp-block-group-is-layout-constrained\">\n<p>2) [Frage:]<em> Sind die Kommas in folgendem Satz entbehrlich? &#8222;An Zutaten ben\u00f6tigen wir \u00c4pfel, Birnen, Orangen und Mandarinen.&#8220;<\/em> <br \/>[Antwort:] Nein, die Kommas in dem Satz sind nicht entbehrlich. Die Kommas werden verwendet, um die einzelnen Elemente einer Aufz\u00e4hlung voneinander abzugrenzen. In diesem Fall werden die verschiedenen Fr\u00fcchte aufgelistet: \u00c4pfel, Birnen, Orangen und Mandarinen. Jedes Element der Aufz\u00e4hlung wird durch ein Komma getrennt, um die Klarheit und \u00dcbersichtlichkeit des Satzes zu gew\u00e4hrleisten.<\/p>\n<p>[ChatGPT 3.5 Abfrage vom 22.05.2022]<\/p>\n<\/div><\/div>\n\n\n\n<p>Die Antwort von ChatGPT ist unvollst\u00e4ndig, da nicht erw\u00e4hnt wird, dass das letzte Element der Aufz\u00e4hlung nicht durch ein Komma abgetrennt wird, sondern durch die Konjunktion <em>und<\/em>. Beispielsweise w\u00e4re im Englischen ein Komma an dieser Stelle optional, weshalb in der Antwort von ChatGPT hervorgehoben werden sollte, dass im Deutschen keines gesetzt wird. Das k\u00f6nnte z. B. f\u00fcr einen DaF-\/DaZ-Lernenden eine wichtige Information sein.<\/p>\n\n\n\n<p>\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0 Hingegen enth\u00e4lt 3) zwar eine Aufz\u00e4hlung, jedoch ist in diesem Fall, anders als in der von ChatGPT generierten Antwort erl\u00e4utert, kein Komma zwischen den aufgez\u00e4hlten Elementen zu setzen, da diese durch die Konjunktion <em>und<\/em> miteinander verbunden sind. Des Weiteren handelt es sich bei 3) um einen komplexeren Fall, der nicht explizit durch das ARW abgedeckt ist. Es kann \u00a7 72 E1 im ARW herangezogen werden, da die Vornamen <em>Hans <\/em>und <em>Julia <\/em>als Zus\u00e4tze zu den Nachnamen aufgefasst werden k\u00f6nnen. Somit werden diese durch ein paariges Komma abgetrennt, womit die von ChatGPT aufgef\u00fchrte Korrektur falsch ist.<\/p>\n\n\n\n<div class=\"wp-block-group has-background\" style=\"background-color:#f0f0f0\"><div class=\"wp-block-group__inner-container is-layout-constrained wp-block-group-is-layout-constrained\">\n<p class=\"has-text-align-left\" style=\"text-align: left\">3) [Frage:] <em>Sind die Kommas in folgendem Satz zu setzen? &#8222;M\u00fcller, Hans und Fischer, Julia werden morgen erscheinen.&#8220;<\/em><br \/>[Antwort:] Ja, die Kommas in dem Satz &#8222;M\u00fcller, Hans und Fischer, Julia werden morgen erscheinen&#8220; sollten gesetzt werden. Der Satz enth\u00e4lt eine Aufz\u00e4hlung von Namen, und zwischen den einzelnen Namen sollte jeweils ein Komma gesetzt werden. Die korrekte Formulierung w\u00e4re daher: &#8222;M\u00fcller, Hans, und Fischer, Julia werden morgen erscheinen.&#8220;<\/p>\n<p class=\"has-text-align-left\" style=\"text-align: left\">[ChatGPT 3.5 Abfrage vom 22.05.2023]<\/p>\n<\/div><\/div>\n\n\n\n<p><\/p>\n\n\n\n<p>\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0 Ebenfalls wird in 4) <em>Aufz\u00e4hlung <\/em>von ChatGPT f\u00e4lschlicherweise in Zusammenhang mit dem Beispielsatz gebracht, m\u00f6glicherweise auf Grund der beinahe unmittelbaren Folge zweier Nomen. In 4) handelt es sich mit <em>mein Kollege <\/em>jedoch um eine Apposition, die nach \u00a7 77 (2) im ARW durch ein Komma abgegrenzt wird.<\/p>\n\n\n\n<div class=\"wp-block-group has-background\" style=\"background-color:#f0f0f0\"><div class=\"wp-block-group__inner-container is-layout-constrained wp-block-group-is-layout-constrained\">\n<p> 4) [Frage:] <em>Ist das Komma in folgendem Satz entbehrlich? &#8222;Das ist Hans, mein Kollege.&#8220;<\/em> <br> [Antwort:] Ja, das Komma in diesem Satz ist entbehrlich. Der Satz &#8222;Das ist Hans, mein Kollege&#8220; ist eine Aufz\u00e4hlung, bei der &#8222;Hans&#8220; und &#8222;mein Kollege&#8220; dasselbe Subjekt bezeichnen. In diesem Fall wird das Komma zwischen den beiden Elementen weggelassen. Der Satz kann auch ohne Komma korrekt geschrieben werden: &#8222;Das ist Hans mein Kollege.&#8220; <\/p>\n\n\n\n<p>[ChatGPT 3.5 Abfrage vom 19.05.2023]<\/p>\n<\/div><\/div>\n\n\n\n<p><\/p>\n\n\n\n<h3 class=\"wp-block-heading\"><strong>ChatGPTs Regeln zur Kommasetzung<\/strong><\/h3>\n\n\n\n<p>Die Inkonsistenz der in 2)-4) aufgef\u00fchrten Antworten und der darin enthaltenen Regeln kann als Folge des Umstandes betrachtet werden, dass die Antworten nicht erzeugt werden, indem eine Datenbasis abgerufen wird, sondern statistisch zusammengesetzt werden. Dadurch werden von dem Chatbot Regeln zur Kommasetzung aufgef\u00fchrt, die so nicht existieren wie beispielsweise in 4) oder unlogisch sind wie in a) und b). Bei a) und b) handelt es sich um einen Ausschnitt aus allen Regeln, die ChatGPT in seinen Antworten zur Kommasetzung auff\u00fchrt.<\/p>\n\n\n\n<p><strong>Aufz\u00e4hlung von Nomen:<\/strong><\/p>\n\n\n\n<p><strong>a) Aufz\u00e4hlung von zwei Nomen <\/strong>(ohne Konjunktion)<strong>:<\/strong><\/p>\n\n\n\n<p><span style=\"text-decoration: underline\">Regel<\/span>: Um diese beiden Elemente [<em>&#8222;einem Geb\u00e4ude<\/em>, <em>einer Fabrik&#8220;<\/em>] voneinander abzugrenzen, wird ein Komma verwendet.<\/p>\n\n\n\n<p><span style=\"text-decoration: underline\">Funktion<\/span>: Das Komma zeigt an, dass die Aufz\u00e4hlung hier endet und ein neuer Teil des Satzes [<em>&#8222;Sie befinden sich in einem Geb\u00e4ude, einer Fabrik.&#8220;<\/em>] folgt. [ChatGPT 3.5 Abfrage vom 26.05.2023]<\/p>\n\n\n\n<p>Die aufgef\u00fchrte Funktion ergibt keinen Sinn, da der Beispielsatz nach der Aufz\u00e4hlung endet.<\/p>\n\n\n\n<p><strong>b) Aufz\u00e4hlung von zwei Nomen<\/strong> (mit Konjunktion <em>und<\/em>):<\/p>\n\n\n\n<p><span style=\"text-decoration: underline\">Regel<\/span>: Hier [<em>&#8222;Sie befinden sich in einem Geb\u00e4ude, einer Fabrik.&#8220;<\/em>] handelt es sich um eine Aufz\u00e4hlung von zwei Substantiven (&#8222;einem Geb\u00e4ude&#8220; und &#8222;einer Fabrik&#8220;), die durch das Wort &#8222;und&#8220; verbunden sind. Bei einer Aufz\u00e4hlung von zwei Elementen ist es \u00fcblich, kein Komma vor dem &#8222;und&#8220; zu setzen. Das Komma vor &#8222;einer Fabrik&#8220; w\u00fcrde den Satz unn\u00f6tig unterbrechen und w\u00e4re daher in diesem Fall nicht angebracht. [ChatGPT 3.5 Abfrage vom 19.05.2023]<\/p>\n\n\n\n<p>Der Satz <em>&#8222;Sie befinden sich in einem Geb\u00e4ude, einer Fabrik.&#8220;<\/em> enth\u00e4lt gar nicht die Konjunktion <em>und<\/em>.<\/p>\n\n\n\n<p><\/p>\n\n\n\n<h3 class=\"wp-block-heading\"><strong>Inkonsistenzen bei den Antworten f\u00fcr denselben Satz<\/strong><\/h3>\n\n\n\n<p>Des Weiteren fallen die Antworten f\u00fcr denselben Beispielsatz bei verschiedenen Fragestellungen unterschiedlich aus. Dabei sind sowohl die L\u00f6sung (ja\/nein) als auch die Begr\u00fcndung (Regelnennung) inkonsistent. Dieser Umstand wird anhand 5) [Frage:] <em>Sie l\u00e4uft, anstatt auf die Stra\u00dfenbahn zu warten <\/em>demonstriert. Bei <em>anstatt auf die Stra\u00dfenbahn zu warten<\/em> handelt es sich um einen infiniten Nebensatz. Dieser wird gem\u00e4\u00df \u00a7 75 (1) im ARW mit Komma abgetrennt. Zudem kann <em>anstatt <\/em>sowohl Pr\u00e4position sein (wie z. B. in <em>anstatt einem Komma ist ein Punkt zu setzen<\/em>) oder, wie in 5), als Einleiter f\u00fcr den infiniten Nebensatz fungieren. In 5 von 6 Anfragen gibt der Chatbot eine falsche L\u00f6sung an: i) <em>Ja, das Komma in dem Satz &#8222;Sie l\u00e4uft, anstatt auf die Stra\u00dfenbahn zu warten&#8220; ist entbehrlich<\/em>, ii) <em>Nein, das Komma in dem Satz &#8222;Sie l\u00e4uft, anstatt auf die Stra\u00dfenbahn zu warten&#8220; ist nicht korrekt gesetzt.<\/em>, iii) <em>Ja, das Komma in diesem Satz sollte nicht gesetzt werden.<\/em>, iv) <em>Nein, das Komma in diesem Satz ist nicht richtig platziert. <\/em>und v) <em>Ja, das Komma in dem Satz &#8222;Sie l\u00e4uft, anstatt auf die Stra\u00dfenbahn zu warten&#8220; ist falsch platziert. <\/em>Lediglich mit der Fragestellung <em>Ist kein Komma in folgendem Satz zu setzen?<\/em> wird die richtige L\u00f6sung generiert, aber mit <em>ja<\/em> unpassend auf die Frage geantwortet: <em>Ja, in dem Satz &#8222;Sie l\u00e4uft, anstatt auf die Stra\u00dfenbahn zu warten.&#8220; sollte ein Komma gesetzt werden. <\/em>Zudem widersprechen sich die Begr\u00fcndungen aus den verschiedenen Antworten: zwei Mal wird von ChatGPT aufgef\u00fchrt, dass <em>anstatt<\/em> eine Konjunktion ist und deshalb kein Komma zu setzen ist (was falsch ist), einmal erl\u00e4utert der Chatbot, dass es sich bei <em>anstatt <\/em>\u201enicht um eine trennende Konjunktion handelt, sondern um eine Pr\u00e4position\u201c.<\/p>\n\n\n\n<p>Zwei weitere Begr\u00fcndungen in anderen Antworten f\u00fcr den Beispielsatz sind auf einer anderen Ebene falsch: In der einen Antwort wird definiert, dass \u201e[d]as<em> Wort &#8222;anstatt&#8220;<\/em> [\u2026]<em> eine Konjunktion ein<\/em>[<em>leitet<\/em>]\u201c, obwohl das Wort selbst eine Konjunktion ist (und generell W\u00f6rter keine Konjunktionen einleiten, da es sich um eine Wortart handelt). Eine andere Antwort enth\u00e4lt kontr\u00e4re Angaben: \u201e<em>Das Komma sollte vor dem Wort &#8222;anstatt&#8220; stehen, nicht nach dem Verb &#8222;l\u00e4uft&#8220;. Der korrekte Satz lautet: &#8222;Sie l\u00e4uft anstatt, auf die Stra\u00dfenbahn zu warten.<\/em>\u201c &nbsp;Die Angabe, wo das Komma falsch gesetzt w\u00e4re <em>nach dem Verb &#8222;l\u00e4uft&#8220; <\/em>stimmt widerspr\u00fcchlicher Weise jedoch mit der Angabe, wo das Komma korrekt gesetzt w\u00e4re <em>vor dem Wort &#8222;anstatt&#8220; <\/em>\u00fcberein. Dazukommend steht das Komma in dem vorgeschlagenen korrigierten Satz von ChatGPT wiederum an einer anderen (falschen) Stelle.<\/p>\n\n\n\n<p>Bei diesem Beispiel wird von dem Chatbot h\u00e4ufiger eine falsche Antwort generiert als eine richtige. Als letztes wird deshalb gepr\u00fcft, ob bestimmte Fragestellungen einen Einfluss auf die Wahrscheinlichkeit haben, eine korrekte Antwort zu erhalten.<\/p>\n\n\n\n<p><\/p>\n\n\n\n<h3 class=\"wp-block-heading\"><strong>Einfluss der Fragestellung<\/strong><\/h3>\n\n\n\n<p>Auf Grund der eher geringen Datengr\u00f6\u00dfe, lassen sich keine statistisch signifikanten Schlussfolgerungen ableiten, dennoch zeigt sich ein Trend: f\u00fcr die Fragestellung <em>Ist das Komma <\/em>bzw. <em>Sind die Kommas in folgendem Satz entbehrlich?<\/em> werden h\u00e4ufiger falsche Antworten generiert als f\u00fcr andere Fragestellungen (siehe Tabelle 2). Dabei sind falsche bzw. richtige Antworten diejenigen, die eine falsche bzw. eine korrekte L\u00f6sung (ja\/nein) enthalten. Bei teilweise richtige Antworten ist nur die L\u00f6sung korrekt, die Begr\u00fcndung ist allerdings fehlerhaft.<\/p>\n\n\n\n<figure class=\"wp-block-table\"><table><tbody><tr><td><strong>Fragestellung<\/strong><\/td><td><strong>falsch<\/strong><\/td><td><strong>richtig<\/strong><\/td><td><strong>teilweise richtig<\/strong><\/td><\/tr><tr><td><em>entbehrlich<\/em><\/td><td>68<\/td><td>9<\/td><td>31<\/td><\/tr><tr><td><em>zu setzen<\/em><\/td><td>30<\/td><td>27<\/td><td>51<\/td><\/tr><tr><td><em>kein(e) Komma(s) zu setzen<\/em><\/td><td>36<\/td><td>31<\/td><td>41<\/td><\/tr><tr><td><em>nicht zu setzen<\/em><\/td><td>32<\/td><td>19<\/td><td>57<\/td><\/tr><tr><td><em>richtig<\/em><\/td><td>37<\/td><td>24<\/td><td>47<\/td><\/tr><tr><td><em>falsch<\/em><\/td><td>37<\/td><td>15<\/td><td>56<\/td><\/tr><\/tbody><\/table><figcaption class=\"wp-element-caption\">Tabelle 2: Die Anzahl der richtigen, falschen und teilweise richtigen Antworten je Fragestellung.<\/figcaption><\/figure>\n\n\n\n<p><\/p>\n\n\n\n<p><strong><\/strong><\/p>\n<h3 class=\"wp-block-heading\"><strong>Fazit<\/strong><strong><\/strong><\/h3>\n<p>Kann eine Interaktion mit dem Chatbot nun einen konventionellen Sprachberatungsservice ersetzen? Die Antwort muss mit \u201enoch nicht\u201c beantwortet werden, auch wenn die Antworten u. a. durch Terminologienutzung professionell wirken. ChatGPT ist zwar in der Lage, W\u00f6rter so zusammenzusetzen, dass sie grammatisch korrekte S\u00e4tze formen, die grammatischen Analysen des Bots sind jedoch h\u00e4ufig nicht korrekt. Jede Antwort muss daher noch einmal auf ihre Richtigkeit gepr\u00fcft werden. Es bleibt abzuwarten, was die Zukunft in diesem Bereich bringt.<\/p>\n\n\n<h3><strong>Literaturverzeichnis<\/strong><\/h3>\n<p>Walid Hariri. 2023. Unlocking the Potential of ChatGPT: A Comprehensive Exploration of its Applications, Advantages, Limitations, and Future Directions in Natural Language Processing. arXiv:2304.02017 [cs].<\/p>\n<p>Sajed Jalil, Suzzana Rafi, Thomas D. LaToza, Kevin Moran, and Wing Lam. 2023. ChatGPT and Software Testing Education: Promises &amp; Perils.<\/p>\n<p>Tiffany H. Kung, Morgan Cheatham, Arielle Medenilla, Czarina Sillos, Lorie De Leon, Camille Elepa\u00f1o, Maria Madriaga, Rimel Aggabao, Giezel Diaz-Candido, James Maningo, and Victor Tseng. 2023. Performance of ChatGPT on USMLE: Potential for AI-assisted medical education using large language models. <em>PLOS Digital Health<\/em>, 2(2):e0000198.<\/p>\n<p>Christian Lang, Ngoc Duyen Tanja Tu, and Laura Zeidler. im Druck. Making Non-Normalized Content Retrievable \u2013 A Tagging Pipeline for a Corpus of Expert-Layperson Texts.<\/p>\n<p>Mareike Riegel. 2007. <em>Sprachberatung im Kontext von Sprachpflege und im Verh\u00e4ltnis zu Nachschlagwerken<\/em>. Ph.D. thesis, Albert-Ludwigs-Universit\u00e4t Freiburg.<\/p>\n<p>Sakib Shahriar and Kadhim Hayawi. 2023. Let\u2019s have a chat! A Conversation with ChatGPT: Technology, Applications, and Limitations.<\/p>\n<p>Jules White, Quchen Fu, Sam Hays, Michael Sandborn, Carlos Olea, Henry Gilbert, Ashraf Elnashar, Jesse Spencer-Smith, and Douglas C. Schmidt. 2023. A Prompt Pattern Catalog to Enhance Prompt Engineering with ChatGPT. arXiv:2302.11382 [cs].<\/p>","protected":false},"excerpt":{"rendered":"<p>Motivation Viele Forschende kennen die Situation: Die Deadline ist in wenigen Minuten und man liest noch einmal das Paper Korrektur. Man st\u00f6\u00dft auf einen Satz, bei dem man sich nicht sicher ist, ob das Komma bei diesem richtig gesetzt ist. Einen Sprachberatungsservice anzufragen w\u00fcrde zu lange dauern, eine Google-Suchanfrage zu formulieren mit dem man die [&hellip;]<\/p>\n","protected":false},"author":371,"featured_media":0,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[11],"tags":[1631,1632],"class_list":["post-19645","post","type-post","status-publish","format-standard","hentry","category-forschung","tag-chatgpt","tag-sprachberatung"],"_links":{"self":[{"href":"https:\/\/dhd-blog.org\/index.php?rest_route=\/wp\/v2\/posts\/19645","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/dhd-blog.org\/index.php?rest_route=\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/dhd-blog.org\/index.php?rest_route=\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/dhd-blog.org\/index.php?rest_route=\/wp\/v2\/users\/371"}],"replies":[{"embeddable":true,"href":"https:\/\/dhd-blog.org\/index.php?rest_route=%2Fwp%2Fv2%2Fcomments&post=19645"}],"version-history":[{"count":113,"href":"https:\/\/dhd-blog.org\/index.php?rest_route=\/wp\/v2\/posts\/19645\/revisions"}],"predecessor-version":[{"id":19759,"href":"https:\/\/dhd-blog.org\/index.php?rest_route=\/wp\/v2\/posts\/19645\/revisions\/19759"}],"wp:attachment":[{"href":"https:\/\/dhd-blog.org\/index.php?rest_route=%2Fwp%2Fv2%2Fmedia&parent=19645"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/dhd-blog.org\/index.php?rest_route=%2Fwp%2Fv2%2Fcategories&post=19645"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/dhd-blog.org\/index.php?rest_route=%2Fwp%2Fv2%2Ftags&post=19645"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}