ChatGPT: Warum das Tippen damit mein Leben erschwert

Ich erinnere mich, als es erschien ChatGPT Zum ersten Mal war das Erste, was alle sagten: „Die Rolle der Autoren ist vorbei.“ Es begannen Spekulationen darüber aufzukommen, dass Nachrichtenseiten, Blogs und praktisch alle schriftlichen Inhalte im Internet künftig mithilfe künstlicher Intelligenz erstellt würden. Auch wenn mir diese Vorhersagen extrem erschienen, war ich doch von den Texten beeindruckt, die GPT produzieren konnte.

Natürlich musste ich das erstaunliche neue Tool selbst ausprobieren, aber ich stellte bald fest, dass die Ergebnisse nicht so beeindruckend waren, wie sie schienen. Mehr als zwei Jahre später hat sich an meinen Erfahrungen und Anwendungsfällen nichts geändert: Immer wenn ich ChatGPT als Hilfe beim Schreiben verwende, bremst es mich nur aus und frustriert mich. Tatsächlich stelle ich fest, dass die Verwendung von Tools wie ChatGPT beim professionellen Schreiben oft zu minderwertigen Ergebnissen führt, insbesondere wenn es um Genauigkeit und Stil geht.

Warum funktioniert ChatGPT bei mir nicht?

ChatGPT kann wirklich gute Inhalte generieren. Es kann eine natürliche, kohärente und sogar intelligente und interessante Sprache hervorbringen. Die meisten Paradebeispiele, die man sieht, basieren jedoch auf sehr einfachen Aufforderungen – etwa „Schreiben Sie ein Gedicht über den Einkauf bei Walmart, aber im Stil von William Shakespeare“, wie es im Jahr 2023 jeder tat. Bei komplexen Aufgaben oder spezifischen Anforderungen zeigt ChatGPT jedoch häufig Einschränkungen beim Verständnis des Kontexts und der Bereitstellung präziser und relevanter Antworten. Dieser Mangel macht es in Szenarien unwirksam, die eine gründliche Analyse oder spezielle Kreativität erfordern.

Es tut mir leid, aber ich kann einer Technologie, die so etwas leisten kann, einfach nicht zynisch gegenüberstehen. pic.twitter.com/yjlY72eZ0m

— Thomas H. Ptacek (@tqbf) December 2, 2022

Wenn Sie so etwas bestellen, ist das Ergebnis unter anderem deshalb so großartig, weil es unerwartet ist. Im Grunde bitten Sie ihn, Sie zu überraschen, und in den meisten Fällen gelingt ihm das.

Wenn Sie hingegen versuchen, ChatGPT für langweilige Schreibarbeiten zu verwenden, ist das eine ganz andere Geschichte. Erstens ist es für Artikel wie diesen nutzlos. Alles, was ich jetzt schreibe, basiert auf meinen eigenen Erfahrungen und Meinungen – eine KI kann es nicht für mich schreiben. Manche argumentieren vielleicht, dass es Ihnen bei der Planung, beim Brainstorming oder bei der Verbesserung von Argumenten helfen kann – aber ich habe bei derartigen Dingen sowieso nie Hilfe gebraucht.

Ich habe ChatGPT eigentlich für die Art von Arbeit ausprobiert, die ich mit Unternehmensblogs mache. Sie kennen den Typ – Erklärungen, Anleitungen und Empfehlungsbeiträge zu Themen im Zusammenhang mit dem Unternehmen und seinen Produkten (auch mit etwas subtiler Eigenwerbung). Wenn Sie derartige Texte schreiben, werden Ihnen häufig zahlreiche Anforderungen gestellt: ein Stilhandbuch für Sprache und Grammatik, Schlüsselwörter, die Sie verwenden müssen, Quellen, die Sie verwenden müssen, Quellen, die Sie vermeiden sollten, und eine Gliederung des Inhalts mit Überschriften, Struktur und bereits festgelegten Hauptpunkten.

Wenn ich eine verwendbare Kopie möchte, kann ich GPT nicht einfach eine einzeilige Eingabeaufforderung bereitstellen und es einfach laufen lassen. Also habe ich es mit einer Struktur wie dieser versucht:

• Eine erste „Kontext“-Eingabeaufforderung, die erklärt, was ich schreibe und was ich verlangen würde, zusammen mit einem Beispielabsatz, um den gewünschten Sprachstil zu zeigen.
• Nachfolgende Eingabeaufforderungen mit „Inhaltsübersichten“ lieferten eine oder zwei Überschriften sowie Aufzählungspunkte zu den zu behandelnden Themen.

Ich würde nie zu viel auf einmal verlangen und da ich ihm nicht zutraute, Statistiken und Quellen hinzuzufügen, würde ich das alles aufgeben, mit der Absicht, es später selbst zu tun.

Aber so sehr ich auch versuchte, die Arbeit in kleine Teile zu zerlegen und sehr klare Anweisungen zu geben, stieß ich immer auf die gleichen Probleme:

1. ChatGPT schrecklich Indem man Anweisungen zuhört.
2. Er hat die schlechte Angewohnheit, Dinge auf die Spitze zu treiben.
3. Oftmals gelangen falsche oder irrelevante Informationen in den Text.
4. Sein „Schreibstil“ wird sehr schnell repetitiv und klischeehaft.
5. Wenn eines der oben genannten Probleme auftritt, ist es fast unmöglich, ein großes Sprachmodell (LLM) dazu zu bringen, seine Ausgabe erfolgreich zu überprüfen oder zu korrigieren.

Lassen Sie mich Ihnen zeigen, was ich meine.

1. ChatGPTs Schwäche beim Verstehen detaillierter Anweisungen

Wenn Sie genaue und spezifische Ergebnisse von ChatGPT erhalten möchten, müssen Sie klare und detaillierte Anweisungen geben. Allerdings scheint es so zu sein: Je mehr Anforderungen vorhanden sind, desto wahrscheinlicher ist es, dass das Modell einige davon ignoriert. Zu den Eingabeaufforderungen können beispielsweise Überschriften, Aufzählungspunkte, die erforderliche Wortanzahl, Formatierungsanweisungen und die Notwendigkeit gehören, dass sich der Chatbot Stilanweisungen vom Beginn der Sitzung merken muss. Ich habe viele verschiedene Möglichkeiten ausprobiert, die Dinge zu vereinfachen, aber ich hatte immer das Gefühl, dass ChatGPT so viele Anweisungen nicht verarbeiten kann.

Insbesondere mit der Wortanzahl und den Aufzählungspunkten hatte ich häufig Schwierigkeiten. Das große Sprachmodell (LLM) lieferte mir selten die von mir gewünschte Anzahl an Wörtern (normalerweise viel weniger als gewünscht) und berücksichtigte nie, ob ich Punktelemente wollte oder nicht.

Manchmal lässt sich das beheben – zum Beispiel, wenn Sie 200 Wörter mit Aufzählungspunkten verlangt haben, aber 300 Wörter ohne Aufzählungspunkte erhalten haben. Es ist relativ einfach, ein paar Wörter wegzulassen und einige Aufzählungspunkte hinzuzufügen. Leider hatte ich immer das Gefühl, dass ich die Fehler bekam, die am schwierigsten zu beheben waren.

Wenn Sie 500 Wörter ohne Aufzählungspunkte bestellen und 200 Wörter mit Aufzählungspunkten erhalten, müssen Sie im Grunde den Großteil der Arbeit selbst erledigen. Dies erfordert umfangreiches Refactoring und erheblichen Aufwand, was die Effektivität der Verwendung von ChatGPT in diesen Fällen verringert.

2. Tendenz zur Übertreibung: Ein Problem mit ChatGPT

Wenn Sie ChatGPT um etwas Bestimmtes bitten, wie etwa die Verwendung einer freundlichen Sprache oder der zweiten Person, neigt es dazu, an diesen Konzepten festzuhalten und sie merklich zu überstrapazieren. Diese Übertreibung gilt als eine der auffälligsten Nachteile von ChatGPT.

Aus freundlicher Sprache wird ein richtiger Textchat mit Emojis und aus der zweiten Person werden irgendwie Fragen und übermäßige Verweise auf den Leser, mit dem Ziel, das Pronomen „du“ möglichst oft zu verwenden. Dies ist einer von ChatGPT-Herausforderungen Im Verständnis des Kontexts.

Auch wenn Sie eine große Anzahl an Beispielen oder Zitaten wünschen, haben Sie Schwierigkeiten. Wenn Sie GPT einfach nach „viel“ oder „vielen“ von etwas fragen, erhalten Sie wahrscheinlich die doppelte oder dreifache Menge, die Sie möchten. Wenn Sie ihm eine konkrete Zahl geben, wird er sie wahrscheinlich völlig ignorieren und Ihnen etwas Beliebiges geben. Mit anderen Worten: Sie können die Ausgabe kaum kontrollieren. Dieses Problem der Ausgabesteuerung wird Schwäche in ChatGPT Es muss angesprochen werden.

3. Oft schleichen sich falsche oder irrelevante Informationen in den Text ein.

Wir alle wissen, dass KI „halluziniert“ und manchmal zufällig Fakten falsch wiedergibt. Das passiert so oft, dass man alles, was sie sagt, doppelt prüfen muss. Das ist zeitaufwendig und geht zu Lasten der Zeitersparnis, die man durch ihre Nutzung erzielen kann. „KI-Halluzinationen“ sind eine der größten Herausforderungen bei der Verwendung von KI beim Verfassen von Inhalten.

Um dem entgegenzuwirken, habe ich nicht in erster Linie nach Fakten oder Zahlen gefragt. Ich habe es zunächst ein paar Mal versucht, aber die Überprüfung der Fakten war wirklich mühsam und bald war es mir egal.

Das Problem besteht darin, dass GPT in seinen Antworten zufällig ungenaue Informationen einfügt, unabhängig davon, ob Sie nach Fakten und Zahlen fragen oder nicht. Dies bedeutet, dass Sie nicht nur prüfen können, wie gut sich der Text liest oder ob Sie mit den Punkten, die Sie ansprechen möchten, zufrieden sind – Sie müssen alles, was Sie sagen, prüfen und bedenken. Es ist sehr ärgerlich. Die Validierung ist ein grundlegender Teil des Prozesses zur Verwendung großer Sprachmodelle (LLMs).

Da ich hier von Fehlern und Halluzinationen spreche, kann ich auch gleich „Worst-Case-Szenarien“ erwähnen. Manchmal gerät ein großes Sprachmodell (LLM) aus der Bahn, und obwohl das nicht immer passiert, müssen Sie in diesem Fall die Sitzung abbrechen und einige Zeit damit verbringen, Ihre Eingabeaufforderungen in einen neuen Chat einzufügen und von vorne zu beginnen. Ich persönlich habe noch nie erlebt, dass ChatGPT auf besonders lustige Weise durchdreht, aber mein Freund hat einmal dieses Juwel erlebt:

4. ChatGPT-Schreibstil: repetitiv und schnell klischeehaft

Auf den ersten Blick mag es verrückt erscheinen, wie „menschlich“ ChatGPT klingt. Aber wenn Sie es häufiger verwenden, werden Sie feststellen, dass es nicht nur menschlich aussieht, sondern wie eine „normale Person“.

Die Datensätze von OpenAI umfassen den Großteil der Internetinhalte – Millionen von Artikeln und persönliche Foren auf Reddit. Es tut mir leid, sagen zu müssen, dass viele dieser Inhalte einfach nur Müll sind. Aber weil ChatGPT darauf trainiert ist, erkennt es die häufigsten schlechten Angewohnheiten.

Wenn Sie also mit ChatGPT viel Text generieren, werden Sie feststellen, dass sich einige Satzstrukturen und Ausdrücke stark wiederholen. Die beiden schlimmsten Beispiele waren für mich die folgenden beiden Satzstrukturen:

• „Von A und B nach C und D usw. usw. usw.“ (Beispiel: In der Welt von TikTok gibt es für jeden einen Platz – von Heimwerkern und Schönheitsexperten bis hin zu Tierliebhabern und Lehrern.)
• „Ob du A oder B bist, usw. usw. usw.“ (Beispiel: Egal, ob Sie gerade erst anfangen oder aufsteigen möchten: Der Einsatz intelligenter Strategien zum Aufbau echten Engagements ist der Schlüssel zum Erfolg.)

ChatGPT mag diese beiden Satzstrukturen so sehr, dass ich mit ziemlicher Sicherheit davon ausgehen konnte, in jeder Sitzung drei oder vier davon zu bekommen. Sogar diese beiden Beispiele stammen aus demselben Absatz einer seiner Antworten. Die Phrase „in der Welt von …“ im ersten Beispiel ist eine weitere Möglichkeit, wie er gerne einen Satz beginnt. Das ist alles langweilig, klischeehaft und lächerlich überstrapaziert (was natürlich der Hauptgrund ist, warum ChatGPT sie so oft erstellt). Ich habe sogar versucht, bestimmte Ausdrücke und Satzarten ausdrücklich zu verbieten, indem ich jede Aufforderung mit dieser kleinen Liste begann:

Es heißt, dass es heutzutage fast unmöglich sei, zwischen KI-generiertem und von Menschen geschriebenem Text zu unterscheiden – aber ich bin da anderer Meinung. Wenn Sie diese KI-Tools selbst ausprobieren und alle Probleme und schlechten Angewohnheiten erleben, werden Sie viele verräterische Anzeichen erkennen. Wenn Benutzer KI-Inhalte mit von Menschen verfasstem Material mischen und den Großteil der ChatGPT-Ausgabe stark bearbeiten, können Sie dies vollständig verbergen. Aber Inhalte, die direkt aus dem Sprachmodell stammen und praktisch unverändert veröffentlicht wurden – das merkt man. Das können Sie ganz einfach herausfinden.

5. Schwierigkeiten beim erfolgreichen Debuggen oder Ändern der Ausgabe großer Sprachmodelle (LLMs).

Die eigentliche Herausforderung besteht darin, dass ChatGPT Probleme selten selbst beheben kann. Wenn etwas schief geht, scheitern Versuche, das Problem zu erklären und wiederholte Überprüfungen anzufordern, oft.

Wenn Sie beispielsweise aufgefordert werden, die Wortanzahl anzupassen, erhalten Sie häufig die gleiche Zahl. Wenn Sie aufgefordert werden, Punkte zu entfernen, wird die Umsetzung hervorgehoben und anschließend ein Plus angeboten. Wenn Sie aufgefordert werden, Ton oder Stil anzupassen, ist es schwierig, die Änderung umfassend umzusetzen, was zu einem inkonsistenten Mix führt.

Die Lösung besteht möglicherweise darin, die Eingabeaufforderungen zu wiederholen und ChatGPT-Antworten neu zu generieren, bis Sie ungefähr das gewünschte Ergebnis erreichen. Für Autoren bedeutet die Verwendung von ChatGPT jedoch, dass sie die Rolle des Redakteurs übernehmen müssen.

Das ist vielleicht nicht für jeden ein Problem – viele Autoren führen im Rahmen ihrer Arbeit auch Lektorat durch –, aber andere stört es. Die Vorstellung, die Arbeit anderer oder die GPT-Ausgabe zu bearbeiten, ist unerwünscht.

Was die Fehlerhäufigkeit betrifft, besteht in jeder mehrstündigen Sitzung mit mehr als 30 Eingabeaufforderungen immer die Möglichkeit, auf ein Hindernis zu stoßen.

Ergebnis: Ich habe aufgegeben.

Ich habe Monate damit verbracht, zu lernen, wie man ChatGPT im Jahr 2023 verwendet, und bin nach größeren Updates in den nächsten zwei Jahren darauf zurückgekommen – aber meine Erfahrung hat sich nie geändert. Es wurden auch andere große Sprachmodelle (LLMs) ausprobiert, aber selbst neuere Modelle, die „Inferenz“ verwenden und vor der Antwort einen inneren Monolog auslösen, leiden immer noch unter den gleichen Usability-Problemen.

Aktuelle LLM-Modelle Es beschleunigt meinen Schreibprozess nicht – es zwingt mich lediglich dazu, Zeit mit Dingen zu verbringen, die ich hasse, anstatt mir Zeit für Dinge zu nehmen, die mir Spaß machen. Wenn Sie das Tippen hassen und es nie tun möchten, kann ChatGPT auf jeden Fall helfen. Aber wenn das Schreiben für Sie ein Hobby ist oder Sie Ihren Lebensunterhalt damit verdienen, wird es Sie wahrscheinlich in den Wahnsinn treiben.

Letztendlich habe ich nie etwas veröffentlicht, das man als „KI-generiert“ bezeichnen könnte. Jedes Mal, wenn ich versuchte, es, wie man so schön sagt, „in meinen Arbeitsablauf zu integrieren“, rannte ich mit dem Kopf gegen die Wand, verschwendete eine Menge Zeit und schloss das Programm dann, als mir klar wurde, dass ich nichts geschafft hatte und die Deadline gleich um die Ecke war.