đ Inhaltsverzeichnis
Was sind KI-generierte Inhalte?
KI-generierte Inhalte, auch bekannt als synthetische Inhalte, sind alle Arten von Medien, die mithilfe von Algorithmen der kĂŒnstlichen Intelligenz erstellt wurden. Dazu können Texte, Bilder, Audio und sogar KI-Videos gehören. KI-generierte Inhalte haben zwar viele potenzielle Einsatzmöglichkeiten, dennoch ist es wichtig diese auch entsprechend Bewertungen zu können.
Und genau darum geht es in diesem Artikel. Der Hype ĂŒber GPT-3 und gerade auch ChatGPT hat in den letzten Wochen gerade meine LinkedIn Bubble beherrscht und auch ich hab mir einige AnwendungsfĂ€lle angeschaut um z.B. GPT-3 mit Zapier zu verbinden, es direkt in Google Sheets zu integrieren oder einen eigenen Slack-Bot mit GPT-3 zu bauen.
Diese hat mir aber auch gezeigt, wie einfach es ist KI-Texte massenhaft zu erstellen und das Internet quasi voll zumĂŒllen. Aus diesem Grund schaue ich mir jetzt einmal an, welche Tools KI-Texte erkennen können und wie echte Tests abschneiden.
Warum eigentlich KI-Texte erkennen?
Es gibt mehrere GrĂŒnde, warum es wichtig ist, KI-generierte Inhalte erkennen zu können. Drei davon sind meiner Meinung nach am offensichtlichsten. Falschmeldungen (Fake News), die Bewertung von Quellen (samt QualitĂ€t) und der Nachweis ĂŒber erbrachte Leistungen (gerade im Lehrwesen).
Durch die enorme Verbreitung von Tools wie z.B. ChatGPT (welches in nur 5 Tagen eine Millionen User erreichte – weitere ChatGPT Fakten), wird es zudem auch viel einfacher beliebige Mengen von Text zu sehr gĂŒnstigen Preisen zu erzeugen.
Fake News
Eines der Hauptprobleme ist sicherlich die Verbreitung von Fake News, die sich leicht ĂŒber soziale Medien und andere Online-Plattformen verbreiten lassen. Egal ob Text, Bilder oder Video. Je einfacher und je schneller sich Inhalte erstellen lassen, desto eher werden damit auch falsche Informationen verbreitet. Auch wenn ChatGPT ja aus quasi allen Texten des Internets seine Informationen zieht, so ist es gleichzeitig aber auch ein starkes Werkzeug, um Inhalte aus Texten zu verarbeiten, welche du in das Tool einspielst.
Bewertung von Quellen
Gerade wenn es um Informationen und auch Meinung geht, ist es mir persönlich wichtig zu wissen, ob Texte ggf. mit KI geschrieben wurden oder ob die Quelle vielleicht gar nicht so wirklich vertrauenswĂŒrdig ist. Wenn fachliche Inhalte, die ich tagtĂ€glich konsumiere, nur von Maschinen geschrieben werden, wĂŒrde ich die QualitĂ€t anders bewerten.
Nachweis ĂŒber erbrachte Leistung
Sicherlich ein riesiges Thema, gerade auch fĂŒr LehrkrĂ€fte. Mit der Möglichkeit sehr schnell groĂe Mengen Text zu generieren, wie soll man dann noch wissen ob der Text wirklich geschrieben wurde oder sich mit dem Thema ĂŒberhaupt beschĂ€ftigt wurde? Sicherlich ein riesiges Thema und die ersten Verbote von ChatGPT an Schule zeigen, dass wir hier auf eine knifflige Situation zulaufen.
Können ChatGPT Texte erkannt werden?
Es kommt drauf an. đViele der hier getesteten Tools erkennen englische Texte sehr zuverlĂ€ssig. Bei den deutschen Inhalten wird oft der Mensch als Urheber bewertet. Viele der kostenlosen Tools filtern KI-Inhalt recht gut raus. Anbieter wie Google werden hier zwar noch sehr viel umfangreicher arbeiten, haben aber auch definitiv ihe Schwierigkeit diese Texte zuverlĂ€ssig zu erkennen und zu bewerten. In diesem Artikel möchte ich zeigen, welche Tools es aktuell am Markt gibt und welche Tools meine Texte erkennen.
Eine Ă€hnliche Ăbersicht zu dem Thema gibt es ĂŒbrigens von Kai Spriestersbach auf seiner Seite www.afaik.de.
11 verschiedene Tools zur Erkennung von KI-Texten
Um mir selbst (und dir) einen Blick zu verschaffen, habe ich deshalb keine Kosten und MĂŒhen gescheut und mir acht verschiedene Tools zur Erkennung von KI-Texte angeschaut und mit zwei Beispielen getestet.
Welche Texte habe ich getestet?
Um selbst einmal herauszufinden, wie gut die Tools zur Erkennung von KI-Texten funktionieren, habe ich jeweils einen deutschen und englischen Text mit einer Definition von SEO mit ChatGPT erstellen lassen und diesen ohne Ănderungen in die unten stehende Tools eingefĂŒgt. Die Texte kannst du dir im Screenshot anschauen.
NatĂŒrlich passiert es selten, dass Texte ganz genau aus ChatGPT ĂŒbernommen werden, fĂŒr den Test habe ich es dennoch mal ausprobiert.
Kostenloser Tool-Newsletter
Mein regelmĂ€Ăiger (und natĂŒrlich kostenloser) Newsletter versorgt dich regelmĂ€Ăig mit neuen Tool-Vorstellungen und relevanten Neuigkeiten und ContentâEmpfehlungen fĂŒr Marketer.
Bereits ĂŒber 2.300 Abonnent*innen erhalten regelmĂ€Ăig neue Tool-Vorstellungen und Updates!
AI Text Classifier von OpenAI
Irgendwie war dies zu erwarten, dennoch super spannend. OpenAI bietet jetzt selbst ein Tool an, um KI-Texte zu erkennen und nimmt sich Problemen gerade im Education-Bereich an. Hierzu gibt es sogar eine eigene Info-Seite.
Das neue „Tool“ von OpenAI hilft nun dabei, Texte auf KI-Herkunft zu klassifizieren und zu zeigen, welche Texte von der KI oder von Menschen geschrieben wurden. Jedoch ist das Tool noch nicht verlĂ€sslich. So wurden in einem Testszenario mit englischen Texten nur 26% der KI-Texte erkannt und 9% falsch erkannt. Also ist hier noch viel Luft nach oben.
Textergebnis
In meinen ersten Tests wurden alle KI-Texte von mir erkannt und selbst Texte bei denen diverse Dinge geĂ€ndert wurden, hatten noch einen Bruchteil von AI-Erkennung. Aber auch komplett selbstgeschriebene Texte hatten angeblich KI-Anteil. Zudem ist die Erkennungsrate fĂŒr nicht-englische Texte noch (nach eigenen Aussagen) sehr schlecht.
GPTRadar - ĂŒberraschend gut
GPTRadar ist das neuste Tool aus der Reihe und erst seit ein paar Tagen auf dem Markt (Stand 15.01.2023). Und auch hier ist die OberflĂ€che zur Erkennung von KI Texten sehr einfach gehalten. Text einfĂŒgen und das Ergebnis wird dir innerhalb von wenigen Sekunden angezeigt.
Die ersten 5 Tests sind kostenlos. Danach zahlst du 2 Cent pro Credit und kannst mit einem Credit ca. 125 Wörter ĂŒberprĂŒfen. FĂŒr 500 Wörter zahlst du also gerade einmal 8 Cent.
Textergebnis
Und hier war ich tatsĂ€chlich sehr ĂŒberrascht. Beide von mir bereitgestellte Texte (Deutsch und English) wurden erfolgreich als KI-Texte erkannt. Zum Vergleich habe ich eigene Texte getestet und diese wurden erfolgreich als menschliche Texte erkannt. Bisher also das fĂŒr meine Ergebnisse zuverlĂ€ssigste Tool am Markt.
Draft & Goal - ChatGPT und GPT Content Detector
Auch dieses Tool funktioniert erfreulicherweise ohne Anmeldung und aktuell auch ohne Kosten. FĂŒge einfach mindestens 200 Zeichen in den Textbereich ein und klicke auf „Analyze“. In einigen Sekunden bekommst du eine Auswertung auf einer Skala von 0-100 ob der Text von einer KI verfasst wurde oder nicht.
Aktuell funktioniert das Tool jedoch nur auf Englisch, jedoch soll Französisch in KĂŒrze ebenfalls hinzugefĂŒgt werden.
Testergebnis
Auch hier habe ich beide Texte durch das Tool testen lassen um zu schauen ob die KI-Texte erkannt werden.
Der englische Text wurde laut Tool zu 100% von einer KI geschrieben. Somit hat das Tool hier den Test bestanden. Auch einzelne WortÀnderungen scheinen das Tool nicht zu verwirren und das Ergebnis bleibt in der Regel bei 90%+.
Da dieses Tool keine deutschen Texte erkennen kann, fĂ€llt hier das Ergebnis natĂŒrlich nicht gut aus. Der deutsche Text wurde mit sehr hoher Wahrscheinlichkeit von einem Menschen geschrieben. Dies Ă€ndert sich, vielleicht sollte dieses Tool auch an einer Erkennung fĂŒr deutsche Texte arbeiten.
Der Anbieter Copyleaks bietet vorallem Plagiaktserkennung von Text und Code an und ist schon lĂ€nger auf dem Markt. NatĂŒrlich liegt hier die Erkennung von KI-Content nahe und darum gibt es hier nicht nur die Möglichkeit Texte kostenlos im Interface zu testen, sondern auch eine API, welche KI-Content erkennen soll.
Anders als viele andere Anbieter unterstĂŒtzt das Tool aktuell Englisch, Spanisch, Deutsch, Französisch und Portugiesisch, weitere Sprachen sind in Arbeit.
Wie gut die Erkennung funktioniert, habe ich mit meinen beiden Texten getestet.
Testergebnis
In meinem Test wurden beide Texte zuverlÀssig erkannt und mit hoher Wahrscheinlichkeit als KI-Texte identifiziert. Auch die VerÀnderung durch Tools wie DeepL Write Ànderten nichts an der EinschÀtzung.
AI Content Detector von Writer
Das kostenlose Tool von Writer.com analysiert deinen Text kostenlos und liefert dir anschlieĂend eine Zahl von 0 bis 100 %, wie wahrscheinlich der von dir eingegebene Text von Menschen verfasst wurde. Das Tool funktioniert sehr einfach und komplett ohne Anmeldung.
Ăber den genauen Ansatz der Technologie hinter der Erkennung konnte ich leider keine Informationen finden.
Testergebnis
Beide Test-Texte habe ich in das Tool eingefĂŒgt und die Ergebnisse berechnen lassen.
Der englische Text ist nur zu 36 % von Menschen geschrieben und ist somit recht klar erkennbar.
Der deutsche Text hingegen ist laut diesem Tool zu 100 % von Menschen geschrieben. Es scheint also, als wÀren die meisten Tools hier nur auf englische Texte fokussiert.
GPT-2 Output Detector Demoâ
Der recht bekannte GPT-2 Output Detector ist zwar fĂŒr GPT-2 erstellt worden, tut aber auch bei GPT-3 und ChatGPT seine Dienste. Auch hier benötigst du keine Anmeldung und kannst den Text einfach kostenlos einfĂŒgen.
Laut GitHub ist dieses Tool sogar selbst von OpenAI veröffentlicht worden (der Firma hinter GPT-3 und ChatGPT). Wenn du dich mit der Technologie mehr beschÀftigen willst, findest du auf der entsprechenden github Seite weitere Informationen.
Textergebnis
Auch hier habe ich beide Texte getestet und Àhnliche Ergebnisse erhalten.
Der englische Text wurde zu 96.42 % als Fake (und somit KI-Text) erkannt und ist somit sehr eindeutig.
Der deutsche Text wurde hingegen nur zu 0.02% als Fake identifiziert und somit als von Menschen geschriebener Text.
GLTR (Giant Language model Test Room)â
Das nÀchste Tool, nennt sich Giant Language model Test Room und sieht auf den ersten Blick erstmal etwas komplizierter aus, liefert aber dennoch interessante Ergebnisse und ist recht einfach zu verstehen.
Das Tool wurde von Hendrik Strobelt, Sebastian Gerhmann und Alexander Rush aus dem MIT-IBM Watson AI Lab und Harvard NLP entwickelt.
Wie lese ich die Ergebnisse?
Du kannst auch hier Text in das Tool einfĂŒgen und eine visuelle Darstellung der Analyse sowie verschiedene Histogramme mit Statistiken ĂŒber den Text anzeigen lassen. Um mehr ĂŒber GLTR und seine Funktionsweise zu erfahren, besuche einfach die genaue ErklĂ€rung.
Wenn ein Wort zum grĂŒn hervorgehoben ist, befindet es sich in den Top 10 der am wahrscheinlichsten vorhergesagten Wörter, basierend auf dem Wort davor. Eine gelbe Markierung zeigt an, dass es zu den 100 am hĂ€ufigsten vorhergesagten Wörtern gehört, eine rote Markierung zu den 1.000 am hĂ€ufigsten vorhergesagten Wörtern und der Rest ist lila markiert (noch unwahrscheinlicher, dass es vorhergesagt wird).
Der Anteil der roten und lila Wörter (unwahrscheinliche Vorhersagen) steigt, wenn der Text von einem Menschen geschrieben wurde. Wenn viele grĂŒne und gelbe Wörter hervorgehoben sind, kann das ein Hinweis darauf sein, dass der Text viele Wörter enthĂ€lt, die auf der Grundlage des Sprachmodells vorhergesagt wurden (was darauf hindeutet, dass der Text von einer KI geschrieben worden sein könnte).
Vereinfacht: Je mehr grĂŒn, desto eher ist der Text von einer KI geschrieben.
Aber Achtung: Hier gibt es keine Skala oder Bewertung. Viel grĂŒner Text heiĂt somit nicht unbedingt, dass es auch ein KI-Text ist, sondern lediglich, dass die folgenden Wörter sehr wahrscheinlich sind. Je nach Thema und Text kann dies natĂŒrlich auch bei menschlichen Texten vorkommen.
Testergebnis
Der englische Text strahlte gerade zu von grĂŒnen Wörtern und ist somit scheinbar ein KI-Text. Viele der Wörter sind also in den Top10 der vorhergesagten Wörter, hiermit hat das Tool schon einmal einen guten Eindruck geliefert.
Beim deutschen Text sieht es hingegen schon etwas besser aus, hier werden zwar auch viele grĂŒne Flecken sichtbar, jedoch bei weitem nicht so durchgĂ€ngig wie bei der englischen Version.
Originality.Ai
Das Tool Originality.ai ist der erste kostenpflichtige Anbieter in dieser Liste und liefert die KI-Texterkennung mit einem eigenen Dashboard, der Möglichkeit im Team zu arbeiten und eine Ăbersicht all deiner bisherigen Analysen.
Die Kosten sind dabei ĂŒberschaubar. Mit dem Gutscheincode BeOriginal bekommst du 50% auf deiner ersten Bestellung und kannst somit fĂŒr $10 ganze 200.000 Wörter analysieren.Â
Neu: Website-Scan
Neben einzelnen Texten kann das Tool nun auch ganze Webseiten (bis zu 1.000) Seiten nach KI-generierten Inhalten durchsuchen und auswerten. Hierzu musst du lediglich die URL eingeben und das Tool legt los. Gerade wenn du viele Texte auf einmal testen willst, ist dies eine ziemlich hilfreiche Funktion.
Textergebnis
Und auch hier zeigt sich ein Àhnliches Bild wie bei vielen anderen Anbietern. Der englische Text wird recht sicher mit 99% als KI-Text erkannt. Aber auch der deutsche Text erweckt mit 3% KI-Anteil eine gewisse Skepsis. Schön zu sehen, dass hier auch der deutsche Text nicht so einfach durchgeht.
Crossplag.com AI Content Detector
Der Anbieter Crossplag kĂŒmmert sich vor allem um die Erkennung von Plagiarismus, fĂŒgt aber jetzt auch noch die Erkennung von KI-Content hinzu, um beide Bereiche zu vereinen.
Bis zu 1.000 Wörter kannst du kostenlos testen, danach gibt es verschiedene Preismodelle, um mehr Inhalte zu ĂŒberprĂŒfen.
Textergebnis
Und auch hier wird der englische Text zuverlÀssig zu 100% als KI-Text erkannt. Der deutsche Text hingegen scheint gerade einmal zu 1% ein KI-Text zu sein und geht hier in der Bewertung sehr einfach durch.
Content at Scale AI Content Detection
Ăhnlich wie vorherige Tools bekommst du hier auch ein einfaches Web-Interface, um Texte einzufĂŒgen und zu testen, ob diese (womöglich) von einer KI geschrieben wurden.
Auch hier benötigst du keine Anmeldung und kannst das Tool kostenlos nutzen. Der Anbieter verkauft jedoch Blog-Artikel, welche menschlich sein sollen. Daher wÀre ich hier persönlich etwas skeptisch, ob KI-Content nicht sehr schnell erkennt wird.
Textergebnis
Hier ist der Unterschied zwischen dem deutschen und englischen Text sogar noch krasser. Der deutsche Text wird zu 100% als menschlich erkannt, wohingegen der englische Text zu 0% menschlich sein soll.
GPTZero
GPTZero wurde in den letzten Tagen sehr stark auf Twitter verbreitet und ist ein Projekt von einem einzigen Studenten. Leider ist die „originale“ Version schwer zu erreichen (aufgrund der vielen Anfragen). Es wird aber einem echten Produkt gearbeitet (siehe Webseite).
Nach der Eingabe kann es etwas dauern bis du Ergebnisse bekommst, dann gibt es jedoch detaillierte Auswertungen ĂŒber den Aufbau deiner Texte, samt KomplexitĂ€t und die Menge an zufĂ€lligen Wörtern.Â
Textergebnis
Der englische Text wurde relativ klar als KI-Text erkannt, gerade wegen vieler berechenbaren Worte und einer „Perplexity“ von nur 60.
Unser deutscher Text bekommt eine Perplexity von 302 (im Vergleich zu 60) und ist fĂŒr das Tool somit ein Text, der wahrscheinlich von Menschen geschrieben wurde (wurde er aber leider nicht).
Detect GPT fĂŒr Google Chrome
Das kostenlose Chrome Plugin Detect GPT versucht KI-Texte auf Webseiten direkt in deinem Browser zu erkennen. Leider ist die API sehr oft ĂŒberlastet, sodass ich hier gerade keinen Text durchfĂŒhren konnte.
Zudem gibt es noch die Plugins Percent Human und GPT-3 Detector. Beide haben in Tests leider keine Ergebnisse geliefert und sind vielleicht einfach ĂŒberlastet.
Textergebnis
Da leider keins der entsprechenden Browser-Plugins zuverlÀssig funktionierte, werde ich Ergebnisse hier bei Gelegenheit nachpflegen.
KI-Texte erkennen - mein Fazit
Der sehr einfache Test von verschiedenen Tools mit lediglich zwei verschiedenen Texten zeigt meiner Meinung nach zwei Dinge. Zuerst einmal zeigt es mir, dass die meisten Tools wohl den Fokus auf englischen Texten haben und daher dem deutschen Text eine sehr hohe Menschlichkeit zusprechen.Â
Gleichzeitig zeigt es mir aber auch, dass teilweise kostenlose und „alte“ Tools schon in der Lage sind, KI-Texte zu erkennen. Unternehmen, wie Google sind da sicherlich schon eine ganze Ecke weiter und haben sicherlich schon Mechanismen im Einsatz um solche Texte einzuschĂ€tzen.
KI Texte - Ja oder nein?
Dinge wie ChatGPT oder GPT-3 werden die Art und Weise wie wir Content erstellen und erfassen, meiner Meinung nach in den nĂ€chsten Jahren maĂgeblich verĂ€ndern. Wie es genau aussieht, weiĂ aber noch keiner. Daher fĂŒhrt meiner Meinung nach fast kein Weg daran vorbei, sich mit KI-Tools zumindest auseinanderzusetzen. Die meisten Marketer nutzen sowieso schon Tools, die irgendwas mit KI machen đ
Ich bin groĂer Fan und begeisterter Nutzer von KI-Tools in vielen Bereichen. Dir sollte aber auch verdammt klar sein, dass gerade viele User solche „AbkĂŒrzungen“ nehmen und Inhalte erstellen. Dies wird jetzt eine Weile so weitergehen und Anbieter wie Google werden darauf reagieren.
Dennoch eigenen sich KI-Tools aber hervorragend, um einfache Aufgaben zu automatisieren, zur Ideenfindung oder um deinen Content noch schneller, noch besser zu machen (weil du deine persönliche Erfahrung und Note sowieso hineinbringst).Â
Kostenloser Tool-Newsletter
Mein regelmĂ€Ăiger (und natĂŒrlich kostenloser) Newsletter versorgt dich regelmĂ€Ăig mit neuen Tool-Vorstellungen und relevanten Neuigkeiten und ContentâEmpfehlungen fĂŒr Marketer.
Bereits ĂŒber 2.300 Abonnent*innen erhalten regelmĂ€Ăig neue Tool-Vorstellungen und Updates!
