Ich habe dem Essay-Autor auf dieser Seite eine Bestandsfrage gestellt - sollten Hausaufgaben in Grundschulen verboten werden - und das Ergebnis zweimal lesen. Die Struktur war solide: ein Titel, eine These am Ende der Einführung, drei Körperabsätze, die jeweils einen Punkt, eine Schlussfolgerung. Es erfand keine Statistiken, keine Zitate und keine gefälschten Zeitschriftenartikel. Dann erreichte ich das Ende, wo es einen Referenzabschnitt mit der American Psychological Association und Harvard neben Titeln, die nicht existieren, hinzugefügt hatte, die jeweils höflich als "hypothetisches Zitat - Stellen Sie sich einen echten Artikel" vor. Das ist die Form des Problems auf einer Seite: Das Ding ist ein kompetentes Gerüst mit einer Falle unten, und die Falle sieht aus wie Hausaufgaben, die bereits erledigt wurden.
tl; dr: Ein kleines Sprachmodell schreibt einen gut strukturierten ersten Entwurf und keine brauchbaren Beweise. gemessen über zwei Läufe von dieser: Wortzählungen landeten innerhalb von 8% des Ziels, null erfundene Statistiken oder Zitate, aber vier Platzhalter-Zitate, die reale Institutionen neben imaginären Titeln benennen. Verwenden Sie den Entwurf für sein Skelett, ersetzen Sie jeden Satz seines Inhalts durch Ihren eigenen und überprüfen Sie die Richtlinien Ihrer Institution, bevor einer davon in der Nähe einer Aufgabe erfolgt. Beachten Sie auch, dass KI-Detektoren in beiden Richtungen keine zuverlässige Überprüfung sind.
Was macht es wirklich gut?
Struktur, und das ist nicht nichts.
Der schwierige Teil eines ersten Entwurfs für die meisten Menschen sind nicht die Sätze, sondern die Form: Wo die These hingeht, wie viele Punkte der Körper braucht, wofür ein Absatz ist. Ein Modell, das auf eine große Menge an Expository-Prosa trainiert wird, hat diese Form auswendig gelernt. Beide Entwürfe, die ich erstellt habe, haben die These als letzten Satz der Einleitung zusammengefasst, jedem Abschnitt einen einzelnen Anspruch gegeben und ohne Einführung neuer Materialien geschlossen. Das ist der Standard, der in jeder Kompositionsklasse gelehrt wird, die beim ersten Versuch korrekt ausgeführt wird.
Die Längenkontrolle war besser als ich erwartet hatte. Auf die Frage nach 500 Wörtern produzierten die beiden Läufe 538 und 526. Das ist wichtig, denn das Auffüllen einer Wortzahl ist das andere, was Schüler Stunden verlieren, und ein korrekt großer Entwurf zeigt Ihnen, wie viel Platz drei Punkte benötigen.
Was es tut, ist die Vervollständigung des Musters über essayförmigen Text. Das macht es gut an den Teilen eines Aufsatzes, die konventionellen und genau den Teilen, die Ihnen gehören sollen, schlecht.
Macht es Quellen?
Nicht ganz, und die Unterscheidung ist mehr als ein Ja oder Nein.
Die Eingabeaufforderung hinter diesem Tool weist das Modell an, keine Zitate, Statistiken oder Quellen zu erfinden und die Art der Quelle zu beschreiben, die Sie stattdessen zitieren sollten. Gemessen über beide Läufe, das: Keine Prozentsätze, keine "Studien zeigen", kein erfundenes Dois, keine erfundenen Autorennamen mit plausiblen Jahren.
Was stattdessen erschien, war ein Abschnitt Referenzen dieses Formulars:
2. ... Research Publication, [Year]. (Hypothetical citation - imagine a real article)
3. American Psychological Association, "Homework and Academic Achievement", [Year].
(Hypothetical Citation - imagine a real report)
Lesen Sie sorgfältig, das ist ehrlich. es ist beschriftet. Es sagt dir, dass du die reale Sache finden sollst. Es nennt aber eine echte Organisation neben einem Titel, den die Organisation nie veröffentlicht hat, und sie befindet sich in einer nummerierten Liste unter einer Überschrift, die genau die visuelle Form einer fertigen Bibliographie darstellt. Ein müder Schüler um 1 Uhr morgens löscht die Wörter in Klammern und sendet sie. Das ist kein hypothetischer Fehlermodus, es ist der offensichtliche, und es lohnt sich zu benennen, da die eigene Vorsicht es schafft.
Die folgende Regel: Alles, was einem Zitat in einem KI-Entwurf ähnelt, als Notiz für sich selbst darüber, was zu finden ist, und was zu finden ist. Niemals als Referenz.
Warum halluzinieren kleine Modelle überhaupt?
Weil sie nichts abrufen. Ein Sprachmodell sagt wahrscheinliche Fortsetzungen voraus, und ein plausibles Zitat ist eine wahrscheinliche Fortsetzung eines Satzes, der Beweise benötigt. Es gibt keine Suche, keine Datenbank, keinen Moment, in dem das Modell überprüft, ob der APA diesen Bericht veröffentlicht hat.
Größe macht das noch schlimmer. Dieses Tool läuft GEMMA 3 1B, ein Modell mit einer Milliarde Parameter, das ausgewählt wurde, weil es auf einen reinen CPU-Server passt und kostenlos angeboten werden kann. Kleinere Modelle haben weniger gespeicherte Details und lehnen sich härter an Muster, so dass sie anfälliger für selbstbewusste Erfindungen sind als die großen kommerziellen. Die strukturelle Kompetenz überlebt die kleine Größe, die sachliche Zuverlässigkeit nicht.
Das ist auch der Grund, warum es nichts Neues weiß. Es gibt keinen Browserschritt, daher gibt es im Entwurf keinesfalls, was nach der Zusammenstellung der Trainingsdaten geschehen ist.
Wird ein KI-Detektor eines Lehrers ihn fangen?
Das ist die falsche Frage, und die ehrliche Antwort ist in beide Richtungen unangenehm: Detektoren fangen Arbeit, die nicht KI-geschrieben wurde, und vermisse Arbeit, die es war.
Openai, die alle kaufmännischen Gründe für die Erkennung von Arbeiten hatte, zog am 20. Juli 2023 einen eigenen KI-Text-Klassifikator zurück Wegen seiner geringen Genauigkeit. eigene veröffentlichte Bewertung vorher: Der Klassifikator richtig identifiziert 26% von KI-geschriebenem Text, während er markiert 9% von menschengeschriebenem Text als KI-geschrieben. Ein Werkzeug, das ein Viertel dessen auffängt und fast jeden zehnten unschuldigen Schriftsteller fälschlicherweise beschuldigt, ist kein Werkzeug, und seine Macher sagten dies, indem es in den Ruhestand ging.
Auch die falschen Positiven sind nicht gleichmäßig verteilt. Liang und Kollegen von Stanford testeten sieben Detektoren beim Schreiben von Muttersprachlern und Nicht-Native-Englischsprachlern und stellten fest Konsequent falsch klassifiziertes nicht-muttersprachliches Schreiben als KI-generiert, veröffentlicht in Muster 2023. Der Mechanismus ist verwirrt: Detektoren kennzeichnen Text, dessen Wortwahl vorhersehbar ist, und ein kompetenter Schriftsteller, der in einer zweiten Sprache arbeitet, produziert genau das. Die Autoren empfehlen, diese Detektoren nicht in evaluierenden oder pädagogischen Umgebungen zu verwenden.
Also: Verlassen Sie sich nicht auf einen Detektor, der Sie bestätigt, und gehen Sie nicht davon aus, dass Sie einer fangen. Es ist auch kein Grund, KI-Arbeiten einzureichen, wenn sie nicht erlaubt sind. Der Grund dafür ist nicht, dass es nicht erlaubt ist und die Personen, die Ihre Arbeit kennzeichnen, können normalerweise auf andere Weise erkennen.
Was ist die ehrliche Art, einen solchen Entwurf zu verwenden?
Drei Verwendungen, die die Kontrolle überleben, und eine, die es nicht tut.
als Form zum Streiten. Generieren Sie den Entwurf, lesen Sie seine drei Punkte und beachten Sie, mit welchem Sie nicht einverstanden sind. Die Meinungsverschiedenheit ist Ihr Aufsatz. Dies ist das Nützlichste, da es viel einfacher ist, auf eine Position zu reagieren, als eine leere Seite zu erfinden.
als Überprüfung Ihrer eigenen Struktur. Schreiben Sie zuerst Ihren Aufsatz, erstellen Sie dann einen und vergleichen Sie die Skelette. Wenn das Modell einen Punkt gefunden hat, den Sie verpasst haben, gehen Sie und recherchieren Sie ihn richtig.
als Wortschatz und Registerprobe. Die Einstellung auf akademischem Niveau ändert die Formation der Prosa. Wenn man den Unterschied zwischen der High School- und der Absolventenversion desselben Arguments sieht, lehrt etwas über Register, das schwer abstrakt zu erklären ist.
Nicht als Sache zu unterwerfen. Viele Institutionen verbieten oder beschränken die Arbeit, und die Richtlinien unterscheiden sich je nach Kurs, nicht nur nach Universität. Überprüfen Sie Ihre, bevor Sie dies in einer Aufgabe verwenden. Wenn dies zulässig ist, ist die Offenlegung in der Regel Teil der Erlaubnis.
Wird der Entwurf maschinell geschrieben?
Ja, und das messbar auf eine Weise, die leicht zu erkennen ist.
Ich habe beide Entwürfe durch die gleichen Überprüfungen durchgeführt, die diese Website für ihr eigenes Schreiben gilt. Über etwa 530 Wörter trug die Ausgabe fünf EN-Strichungen und aus der Liste der Wörter, die Prosa erzeugt, dreimal, plus "ganzheitlich" und "entscheidend". Nichts davon ist falsch Englisch. Alle sind die Worte, nach denen ein Modell greift, wenn ein Mensch etwas klareres auswählen würde: anregen anstatt fördern, gesamt anstatt ganzheitlich, maßgebend anstatt entscheidenddrohen
Die anderen Tells sind strukturell. Jeder Absatz ist ungefähr gleich lang. Jede Liste verwendet die gleiche Form. Die Schlussfolgerung wiederholt die Einführung mit den vertauschten Wörtern. Ein Marker, der vierzig Aufsätze pro Woche liest, bemerkt dieses Muster, lange bevor sie nach einem Detektor greifen. Dies ist der wahre Grund, warum die Detektorfrage neben dem Punkt liegt.
Wenn Sie einen Entwurf in Ihre eigene Stimme umschreiben, sind dies die Dinge, die Sie zuerst angreifen sollten: Die Absatzlängen variieren, das Strich durchtrennen, das abstrakte Substantiv durch das konkrete zu ersetzen und die Schlussfolgerung zu ziehen, dass die Einführung nicht etwas getan hat.
Warum dauert es so lange?
Weil es eher auf einer gemeinsamen CPU als auf einer GPU läuft und dieser Handel es ist, was es kostenlos macht.
Auf der Live-Site gemessen, nahm ein Entwurf von 500 Wörtern 170 Sekunden von der Anfrage zum letzten Wort. Das ist die kürzeste Option. Ein 1.500-Wörter-Aufsatz dauert proportional länger. Der Text streamt so, wie er geschrieben ist, so dass Sie die Öffnung lesen können, während der Rest eintrifft, was das Warten weniger offensichtlich macht als die Zahl vermuten lässt.
Das alternative Design wäre eine kommerzielle API, die in wenigen Sekunden antwortet, Geld pro Anfrage kostet und Ihr Thema an einen Dritten sendet, der es möglicherweise aufbewahrt. Dieser sendet Ihr Thema über HTTPS an einen Server, der die Eingabeaufforderung erstellt, das Modell ausführt, den Text zurückgibt und nichts beibehält: Das Thema und der Entwurf werden verwendet, um die Antwort zu schreiben und dann verworfen, nicht protokolliert, nicht für das Training verwendet, nicht an ein KI-Unternehmen weitergegeben. Für ein Essay-Thema, das normalerweise nicht sensitiv ist. Für den Entwurf einer persönlichen Erklärung ist es wichtig.
Was sollten Sie überprüfen, bevor Sie etwas einreichen?
Eine kurze Liste in der Reihenfolge, die am meisten fängt.
- die Politik Ihrer Institution, vor allem anderen. Regelungsregeln unterscheiden sich häufig von Hochschulebene.
- Jeder sachliche Anspruch, gegen eine echte Quelle, die Sie geöffnet haben. Der Entwurf wird keine Statistik erfunden, aber er wird die Dinge sicher ohne Beweise hinter sich gebracht haben.
- Jedes Zitat, was in der Praxis alle ersetzen bedeutet.
- die Stimme, wo die Wortliste oben ihre Unterbrechung verdient.
- Das Argument, Letzte. Wenn Sie nach der Recherche immer noch mit allen drei Punkten des Modells einverstanden sind, haben Sie den Aufsatz des Modells und nicht Ihren Aufsatz geschrieben.
Für das Umschreiben selbst, Umschreibungswerkzeug Ändert die Formulierung, aber nicht die Substanz und wird keine der oben genannten Punkte korrigieren und einen Entwurf durch die Text-Humaner adressiert eher die Tells als das Denken. Keiner ist ein Ersatz dafür, etwas zu sagen.
Was ist mit der Wortzahl und der Formatierung?
Beide werden danach besser mit Werkzeugen behandelt, die eher sicher als probabilistisch sind.
Ein Modell, das nach 500 Wörtern gefragt wird, erzeugt ungefähr 500 Wörter, was in Ordnung ist, bis ein kurzes "500 Wörter maximal" und der Entwurf bei 538 landet. Fügen Sie den endgültigen Text in die ein Wortgegensatz und kennen die Zahl, anstatt sie zu schätzen. Das gleiche gilt für Lesepegel und Satzlänge, die den meisten Markern mehr wichtig ist, als sie zugeben.
Formatieren ist das andere, was es wert ist, getrennt zu werden. Der Entwurf kommt als Klartext mit Überschriften im Markdown-Stil an, was für die Bearbeitung bequem und in den meisten Kursen falsch für die Einreichung ist. Konvertieren Sie es am Ende einmal, wenn sich die Wörter nicht mehr ändern, anstatt die Formatierung durch sechs Überarbeitungen zu bekämpfen.
Ändern die sieben Essay-Typen etwas?
Mehr als das akademische Niveau, was mich überrascht hat.
Das Werkzeug bietet argumentative, überzeugende, expositorische, narrative, beschreibende, vergleichende und kontrastierende Ursache und Wirkung. Das sind keine kosmetischen Etiketten auf demselben Entwurf: Sie ändern die Arbeit, die die Körperabsätze ausführen. Ein argumentativer Entwurf nimmt Stellung und verteidigt ihn gegen einen impliziten Einwand. Ein Expository erklärt man, ohne eine Seite zu nehmen, sodass die Absätze eher zu Kategorien als zu Ansprüchen werden. Vergleichen und Kontrastieren reorganisiert alles um zwei Themen, was entweder eine Punkt für Punkt oder eine Blockstruktur erzwingt, und das Modell wählt eins aus und hält es.
Die Einstellung des akademischen Niveaus macht weniger. Es passt den Wortschatz und die Absicherung an, so dass die Absolventenversion eines Arguments "die Beweise" sagen ", wo die High-School-Version "dies zeigt" sagt. Das zugrunde liegende Argument sind normalerweise die gleichen drei Punkte. Das ist wissenswert, wenn Sie hoffen, dass die Einstellung für Absolventen das Denken auf Graduiertenebene hervorrufen würde: Es erstellt ein Register für Absolventen auf Absolventenebene über dieselbe Argumentation.
Die praktische Konsequenz ist, den Typ sorgfältig und das Level beiläufig auszuwählen. Ein überzeugender Entwurf, wenn Sie ein Expository benötigten, ist ein strukturell falscher Aufsatz, ein High-School-Entwurf, wenn Sie ein Studenten benötigten, dauert zwanzig Minuten Umformulierung.
Ist ein großes kommerzielles Modell dafür besser?
Beim Schreiben ja. Bei den Dingen, die Sie in Schwierigkeiten bringen, nicht offensichtlich.
Ein großes Modell schreibt fließender, hält ein längeres Argument zusammen und erzeugt weitaus weniger wahrscheinlich das oben beschriebene Muster der Platzhalter-Zitierung. Wenn das einzige Kriterium die Qualität der Prosa ist, gewinnt es und es ist nicht nah.
Drei Dinge, die es nicht repariert. Es hat immer noch keinen Nachschlageschritt, erfindet also immer noch selbstbewusst - die Fehler sind seltener und daher schwerer zu fangen, was nicht das gleiche wie sicherer ist. Es produziert immer noch die strukturellen Angaben, da diese eher aus der Schulungsverteilung als aus der Modellgröße stammen. Und es behält normalerweise Ihren Text bei: Die meisten kommerziellen Assistenten führen Gespräche standardmäßig und einige verwenden sie für das Training, es sei denn, Sie deaktivieren dies, was eine andere Aussage ist, wenn es sich bei dem Dokument um eine persönliche Aussage oder ein nicht veröffentlichtes Kapitel zur Arbeit handelt.
Das ist der Handel, den dieses Tool bewusst abwickelt: ein kleineres, weniger fließendes Modell, das auf einem Server läuft, der nichts hält, kostenlos angeboten wird. Verwenden Sie für eine Stock Essay-Frage alles, was am besten schreibt. Für alles, was Sie nicht in ein öffentliches Forum einfügen würden, ist die Aufbewahrungsfrage diejenige, die Sie zuerst stellen sollten. Die gleiche Argumentation läuft durch Wie wir hier alles schreiben, wo die Tells detaillierter katalogisiert sind als auf dieser Seite Platz.
