Häufige Probleme mit Codex
Ein häufiges Problem bei Codex ist die Tendenz, Dinge mit vagen Begriffen zu entwerfen oder zu implementieren. Meiner Erfahrung nach tritt dies bei Claude etwas seltener auf, aber bei Codex war es ein Problem in Version 5.5 und besteht auch in 5.6 fort. Dies ist eine Gegenmaßnahme für dieses Problem.
Ein Beispiel: In einem Abschnitt eines Forschungsberichts gab es eine Überschrift namens "Compression Point". Beim Lesen des Textes schwankte der Begriff zwischen drei Bedeutungen: "wenn der Konversationsverlauf eine bestimmte Größe erreicht", "der Schwellenwert für den Start der automatischen Zusammenfassung" und "der tatsächliche Moment, in dem die Zusammenfassung beginnt". Der Text war flüssig und sah aus wie eine technische Erklärung. Aber sobald ein einzelner Begriff als Startbedingung, als Wert und als Ereignis diente, wurde das Subjekt der Erklärung undefiniert. Infolgedessen wurden die Forschungsergebnisse leider in die falsche Richtung gelenkt.
Ausgelöst durch dieses Scheitern habe ich eine Fähigkeit namens semantic-generation entwickelt. Auch wenn der Name wie eine Textgenerierungstechnik klingt, war die eigentliche Änderung die Definition von Wörtern, bevor der Text geschrieben wurde.
Struktur und Auswirkungen des Problems
Es gibt das Problem, dass der japanische Begriff "Compression Point" an sich unklar ist, aber als Codex darauf hingewiesen wurde, versuchte es zunächst, dies als fehlende Erklärung zu beheben und dann als Problem der Überschriftenformulierung. Es erkannte nicht sofort, dass es eine Startbedingung mit einem Ausführungsereignis verwechselt hatte.
In derselben Sitzung geschah etwas Ähnliches. Da die Ursache noch nicht bekannt war, war der Plan, einen Test durchzuführen, die Ursache aus den Ergebnissen zu isolieren und dann eine Gegenmaßnahme zu wählen. Codex fasste dies als "Beobachtungen in einem zusammenfassen" zusammen.
Das Ziel der Sammlung waren nicht die Beobachtungen selbst. Es waren die Werte oder Ergebnisse, die aus dem Test gewonnen wurden. Darüber hinaus war das Sammeln von Werten nicht das Ziel, sondern ein Mittel, um die Ursache zu isolieren.
Durch die Zusammenfassung in einem kurzen Satz verschwand die folgende Abfolge:
- Die Ursache ist noch nicht bekannt.
- Führe einen Test durch.
- Isoliere die Ursache aus den Ergebnissen.
- Wähle nach der Isolierung eine Gegenmaßnahme.
"Beobachtungen in einem zusammenfassen" sieht plausibel aus. Weil es plausibel aussieht, kaschiert es unorganisierte Teile und wird zur Prämisse für nachfolgende Entwürfe.
Korrekturlisten für ursprüngliche Begriffe können es nicht stoppen
Bei der Überlegung zu Verbesserungen wurde vorgeschlagen, die Entsprechung zwischen korrigierten Wörtern und Bedeutungen zu erfassen und in die nächste Sitzung zu übernehmen.
Was ich stoppen möchte, ist nicht "ein zuvor falsch verwendetes Wort erneut zu benutzen". Es geht darum, ein Wort zuerst zu setzen, während das Ziel noch vage ist, und auf der Grundlage dieses Wortes weiterzudenken. Selbst wenn man eine Liste falscher Wörter erstellt, wird beim nächsten Mal ein anderes Kunstwort geboren.
Daher habe ich die Richtlinie geändert, anstatt korrigierte Wörter zu verwenden, Kandidatenwörter zu erstellen, bevor ich originäre Begriffe schaffe, und das zu Beginn jeder Sitzung.
Gegenmaßnahme) Erzwinge die Erstellung einer Kandidatenwortliste vor dem Entwurf
Ich habe beschlossen, dass die KI eine Entsprechungstabelle für eindeutig definierte Begriffe erstellt und dann den Entwurf nach dem Laden dieser Datei durchführt.
Die Entsprechungstabelle hat die folgenden sieben Spalten:
- Quelle
- Zweck
- Konkretes Objekt
- Rolle
- Kontext
- Kandidatenwort
- Anfangsdefinition
Die Reihenfolge der Spalten ist bedeutsam. Das Kandidatenwort steht ganz rechts und kann erst ausgefüllt werden, wenn das konkrete Objekt und die Rolle geschrieben sind.
Wenn das Kandidatenwort ganz links stünde, könnte man zuerst das Wort "Compression Point" schreiben und später eine Erklärung erstellen, die zu diesem Wort passt. Das würde nur die Generierungsreihenfolge, die ich stoppen möchte, innerhalb der Tabelle reproduzieren.
Rollen werden ebenfalls einzeln pro Zeile platziert. Wenn man eine Startbedingung und ein Ereignis mit demselben Wort behandeln möchte, teilt man die Zeilen auf. Dann wird, bevor der Druck entsteht, "es in einem Wort zu erledigen", die Tatsache sichtbar, dass zwei Objekte behandelt werden.
Dadurch kann die generative KI selbst bemerken, wenn Wörter mehrdeutig werden, und ich konnte die Verwendung von Wörtern aktiv verbieten, solange sie mehrdeutig bleiben.
Zusammenfassung
Generative KI ist nicht gut darin, einen leeren Raum leer zu lassen. Selbst wenn das Ziel oder der Zweck noch nicht bestimmt ist, kann sie den Text fortsetzen, wenn ein plausibles Wort gesetzt wird. Diese Flüssigkeit kann im Entwurf gefährlich sein.
semantic-generation ist keine Fähigkeit, gute Wörter zu finden. Es ist eine Fähigkeit, die KI dazu zu bringen, kurz innezuhalten und angemessene Wörter zu wählen, wenn sie versucht, einen originären Begriff zu verwenden.
Was ist das Ziel? Ist es eine Bedingung, ein Zustand oder ein Ereignis? Zu welchem Zweck wird es behandelt, und was passiert nach was?
Nur für Zeilen, die bis dahin geschrieben sind, geben wir am Ende einen Namen. Auf den ersten Blick scheint es ein Umweg zu sein, aber es ist kürzer, als den gesamten Entwurf von einem einzelnen Wort wie "Compression Point" aus neu aufzubauen.
semantic-generation Fähigkeit
1---2name: semantic-generation3description: |4 Ein Generierungsverfahren, bei dem vor dem Schreiben des Zieldokuments (Entwurfsmaterialien, Entwurf aus Anforderungen, Forschungsberichte, Ursachenisolierungspläne, Gegenmaßnahmenpläne, Benennung, Zusammenfassung der Argumentationsreihenfolge) zuerst eine Entsprechungstabelle (Referententabelle) als unabhängiges Arbeitsergebnis eingereicht wird, um den Referenten und die Rolle vor dem Wort festzulegen.5 Auslöser: Schreiben von Entwurfsmaterialien, Erstellen von Entwurfsdokumenten, Schreiben von Forschungsberichten, Schreiben von Gegenmaßnahmenplänen, Benennung, Festlegen von Zustandsnamen/Bedingungsnamen/Typnamen/Methodennamen, Zusammenfassen der Argumentationsreihenfolge, Referententabelle, Entsprechungstabelle.6 NICHT AUSLÖSEN: Zitieren von Benutzeroriginaltext, einfache mechanische Bearbeitung, Wiederverwendung vorhandener Namen, feste Ausgabe, Smalltalk, kurze Sätze, die nur mit etablierten Begriffen geschrieben werden können.7---89# semantic-generation — Verfahren zur Festlegung des Ziels vor dem Wort1011Wenn ein Wort (oft ein spontan geprägtes Wort) zuerst gesetzt wird, während das Ziel vage ist, und das Denken auf der Grundlage dieses Wortes fortschreitet, pflanzt sich die Diskrepanz zum Referenten auf japanische Sätze, Entwurfssätze und Code-Identifikatoren fort, ohne korrigiert zu werden. Diese Fähigkeit erzwingt die Abfolge "zuerst die Entsprechungstabelle unabhängig einreichen und den Haupttext als eine Kopie davon schreiben".12Die Kriterien für die Disziplin werden durch die [[referent-before-label]]-Regel gehalten.1314## Anwendungskriterien1516Verwenden, wenn einer der folgenden Punkte zutrifft. Wenn Sie nicht urteilen können, behandeln Sie es als zutreffend.17181. Schreiben von Entwurfsmaterialien, Entwurf aus Anforderungen, Forschungsberichte, Ursachenisolierungspläne oder Gegenmaßnahmenpläne.192. Benennung (öffentliche Spezifikationen, Zustandsnamen, Bedingungsnamen, Ereignisnamen, Typnamen für Werte oder Datensätze, Methodennamen, boolesche Namen).203. Versuch, eine vom Benutzer gegebene Argumentationsreihenfolge in kurze Arbeitsetiketten zusammenzufassen.2122## Normaler Ablauf2324### 1. Speichern Sie die Entsprechungstabelle zuerst als unabhängiges Arbeitsergebnis (Zweistufige Einreichung)2526Bevor Sie ein einziges Zeichen des Haupttextes schreiben, speichern Sie die Entsprechungstabelle als unabhängige Datei.2728- Speicherort: `referent-table-<slug>.md` im Arbeitsverzeichnis (wenn das Arbeitsergebnis unter `output/` liegt, platzieren Sie es im selben Verzeichnis).29- Zeichnen Sie den sha256 nach dem Speichern auf (z. B. `shasum -a 256 <pfad>`). Diese Aufzeichnung wird zum Beweis, dass "die Entsprechungstabelle vor dem Haupttext erstellt wurde". Das bloße Platzieren der Tabelle am Anfang des fertigen Dokuments beweist nicht die Generierungsreihenfolge.3031### 2. Format der Entsprechungstabelle (Spaltenreihenfolgeänderung verboten)3233| Quelle | Zweck | Konkretes Objekt | Rolle | Kontext | Kandidatenwort | Anfangsdefinition |3435- **Das Kandidatenwort wird ganz rechts festgelegt. Halten Sie die Spalte für das Kandidatenwort leer, bis das konkrete Objekt und die Rolle ausgefüllt sind.** Dadurch wird die Reihenfolge, zuerst das Wort zu bestimmen und das Ziel später anzuhängen, durch das Format unmöglich gemacht.36- Wählen Sie die Rolle aus geschlossenen Optionen: `Startbedingung / Zustand / Ereignis / Wert / Datensatz / Zweck / Mittel`. Wenn sich dasselbe Wort auf mehrere Rollen bezieht, teilen Sie die Zeilen auf.37- Schreiben Sie in "Kontext" die vom Benutzer gegebene Argumentationsreihenfolge (z. B. Test → Isolierung → Gegenmaßnahme) unter Verwendung der Wörter aus dem Originaltext. Mischen Sie nicht mit der Rollenspalte.38- Tabellen sind normalerweise auf 1–6 Zeilen begrenzt. Wenn die Grenze überschritten wird, teilen Sie die Tabelle an Grenzen, an denen sich die Bedeutung ändert.39- Bestätigen Sie bei Fertigstellung, dass die Bedeutung allein aus der Spalte "Konkretes Objekt" klar ist, auch wenn die Spalte für das Kandidatenwort ausgeblendet ist.4041### 3. Füllen Sie die Kandidatenwörter aus4243- Verwenden Sie Benutzerterminologie und etablierte Terminologie mit höchster Priorität.44- Wenn Sie andere neue Wörter platzieren, schreiben Sie "X bezieht sich auf..." in die Spalte "Anfangsdefinition". Führen Sie keine Wörter ein, für die keine Definition geschrieben werden kann; verwenden Sie die Beschreibung des konkreten Objekts so wie sie ist im Haupttext.4546### 4. Schreiben Sie den Haupttext als eine Kopie der Entsprechungstabelle4748- Verwenden Sie nur die in der Entsprechungstabelle aufgeführten Wörter als zentralen Wortschatz des Haupttextes.49- Halten Sie die gleiche Entsprechung über die drei Ebenen der japanischen Sätze, Entwurfselemente und Code-Identifikatoren hinweg aufrecht (z. B. "Verlaufsvolumen erreicht 250K" = Startbedingung → Bedingungsname / "Automatische Zusammenfassung beginnt" = Ereignis → Ereignisname/Methodenname / "Automatische Zusammenfassung läuft" = Zustand → Zustandsname. Verschiedene Rollen sollten verschiedene Namen haben).50- Verwenden Sie keine Arbeitsetiketten (abstrakte Nominalphrasen, die Zweck, Ziel und Urteil auslassen) für Rahmen oder Überschriften. Wenn Sie eines verwenden möchten, versuchen Sie, den Referenten dieser Phrase in der Tabelle zu schreiben; wenn Sie es nicht können, schreiben Sie es in konkreten Sätzen.5152## Vorbereitende Maßnahmen bei Problemen5354- Wenn Sie feststellen, dass Sie begonnen haben, den Haupttext zu schreiben, ohne eine Entsprechungstabelle eingereicht zu haben, fahren Sie nicht fort, indem Sie die Tabelle später hinzufügen. Verwerfen Sie den Haupttext, reichen Sie die Entsprechungstabelle unabhängig erneut ein und generieren Sie dann den Haupttext neu.55- Wenn darauf hingewiesen wird, dass eine Zeile der Tabelle falsch war (Verwechslung von Referent oder Rolle), fügen Sie keine Erklärung hinzu; schreiben Sie die betreffende Zeile neu und generieren Sie dann den entsprechenden Teil des Haupttextes neu.56- In Umgebungen, in denen diese Fähigkeit nicht geladen werden kann, speichern Sie vor Beginn des Haupttextes eine Tabelle mit mindestens 6 Spalten (Quelle, Zweck, Konkretes Objekt, Rolle, Kontext, Kandidatenwort) als unabhängige Datei.5758## Anmerkungen5960- Fügen Sie keine Testeingaben oder erwarteten Antworten zur Überprüfung in den Haupttext dieser Fähigkeit ein (um die Unabhängigkeit der Überprüfung zu wahren. Tests werden in Fixtures in einem separaten Verzeichnis verwaltet).61- Das Ziel ist nicht der Abgleich gegen eine Liste falscher Begriffe. Das Abgleichsziel ist die "vom Dokument selbst deklarierte Entsprechungstabelle".
referent-before-label Regel
1# Fixiere den Referenten vor dem Wort23<!-- codex-runtime-summary -->4- WICHTIG: Für Zieldokumente (Entwurfssätze, Forschungsberichte, Gegenmaßnahmenpläne, Benennung, Zusammenfassung der Argumentationsreihenfolge) schreiben Sie den Haupttext, nachdem Sie unabhängig eine Entsprechungstabelle eingereicht haben. Das Einreichen des Haupttextes ohne eine Entsprechungstabelle ist verboten. Wenn Sie ohne Tabelle zu schreiben beginnen, verwerfen Sie den Haupttext und beginnen Sie von der Entsprechungstabelle aus neu.5- WICHTIG: Verwenden Sie keine Arbeitsetiketten (Phrasen, die unorganisierte Arbeit in abstrakte Nomen verpacken) für Rahmen oder Überschriften. Führen Sie keine neuen oder geprägten Wörter ein, es sei denn, Sie können eine Anfangsdefinition schreiben; zerlegen Sie das Ziel in konkrete Beschreibungen.6- WICHTIG: Lösen Sie die semantic-generation Fähigkeit aus, wenn Sie mit einem Zieldokument beginnen. Selbst wenn die Fähigkeit nicht verwendet werden kann, speichern Sie zuerst eine Entsprechungstabelle mit mindestens 6 Spalten (Quelle, Zweck, Konkretes Objekt, Rolle, Kontext, Kandidatenwort) als unabhängiges Arbeitsergebnis.7<!-- /codex-runtime-summary -->89Wenn ein Wort (oft ein spontan geprägtes Wort) zuerst gesetzt wird, während das Ziel vage ist, und das Denken auf der Grundlage dieses Wortes fortschreitet, pflanzt sich die Diskrepanz zum Referenten auf Entwurfssätze, Zustandsnamen, Bedingungsnamen, Methodennamen und Typnamen fort (wie in den Beispielen "Compression Point" und "Beobachtungen in einem zusammenfassen" in TASK-52). Diese Regel stoppt diesen Generierungsprozess selbst. Der Abgleich gegen eine Liste falscher Begriffe (Wortjagd) ist nicht die Gegenmaßnahme, da geprägte Wörter nicht aufgezählt werden können. Kriterien für Wortschwankungen werden durch [[terminology]] gehalten, und diese Regel hält das "Verfahren vor dem Setzen des Wortes".1011## Geltungsbereich (Zieldokumente)1213Wenden Sie nur auf Aufgaben an, die unter einen der folgenden Punkte fallen. Wenn Sie nicht urteilen können, wenden Sie es an.14151. Schreiben von Entwurfsmaterialien, Entwurf aus Anforderungen, Forschungsberichte, Ursachenisolierungspläne oder Gegenmaßnahmenpläne.162. Benennung (öffentliche Spezifikationen, Zustandsnamen, Bedingungsnamen, Ereignisnamen, Typnamen für Werte oder Datensätze, Methodennamen, boolesche Namen).173. Versuch, eine vom Benutzer gegebene Argumentationsreihenfolge in kurze Arbeitsetiketten zusammenzufassen.1819Nicht anwenden auf das Zitieren von Benutzeroriginaltext, einfache mechanische Bearbeitung, Wiederverwendung vorhandener Namen, feste Ausgabe, Smalltalk oder kurze Sätze, die nur mit etablierten Begriffen geschrieben werden können.2021## Ständige Anwendung (3 Verbote)2223- WICHTIG: Reichen Sie in Zieldokumenten den Haupttext nicht ein, ohne unabhängig eine Entsprechungstabelle (Referententabelle) eingereicht zu haben. Die Entsprechungstabelle muss zuerst in einer separaten Datei oder einer separaten Runde vom Haupttext gespeichert werden, und der Haupttext wird danach geschrieben (das bloße Platzieren der Tabelle am Anfang des fertigen Dokuments beweist nicht, dass sie "zuerst gemacht" wurde).24- WICHTIG: Verwenden Sie keine Arbeitsetiketten für Rahmen, Überschriften oder Schlussfolgerungen. Ein Arbeitsetikett bezeichnet eine Phrase, die unorganisierte Arbeit in abstrakte Nomen ohne Zweck, Ziel oder Urteil verpackt (z. B. "Beobachtungen zusammenfassen"). Wenn Sie eines verwenden möchten, versuchen Sie, das Ziel, auf das sich diese Phrase bezieht, in die Entsprechungstabelle zu schreiben; wenn Sie es nicht können, verwerfen Sie die Phrase und schreiben Sie in konkreten Sätzen.25- WICHTIG: Wenn Sie neue Wörter einführen, die nicht zur Benutzerterminologie oder etablierten Terminologie gehören, schreiben Sie beim ersten Vorkommen einen Definitionssatz "X bezieht sich auf...". Führen Sie keine Wörter ein, für die kein Definitionssatz geschrieben werden kann; schreiben Sie das Ziel so wie es ist in Sätzen aus.2627## Normaler Ablauf28291. Bestimmen Sie, ob es unter Zieldokumente fällt (im Zweifelsfall als zutreffend behandeln).302. Lösen Sie die [[semantic-generation]] Fähigkeit aus und speichern Sie die Entsprechungstabelle zuerst als unabhängiges Arbeitsergebnis.313. Schreiben Sie den Haupttext unter Verwendung nur der in der Entsprechungstabelle aufgeführten Wörter als zentralen Wortschatz und halten Sie die gleiche Entsprechung über japanische Sätze, Entwurfselemente und Code-Identifikatoren hinweg aufrecht.3233## Vorbereitende Maßnahmen bei Problemen3435- Wenn Sie feststellen, dass Sie begonnen haben, den Haupttext zu schreiben, ohne eine Entsprechungstabelle für ein Zieldokument eingereicht zu haben, fahren Sie nicht fort, indem Sie die Tabelle später hinzufügen. Verwerfen Sie den Haupttext, reichen Sie die Entsprechungstabelle unabhängig erneut ein und generieren Sie dann den Haupttext neu.36- In Umgebungen, in denen die Fähigkeit nicht verfügbar ist, speichern Sie vor Beginn des Haupttextes eine Entsprechungstabelle mit mindestens 6 Spalten (Quelle, Zweck, Konkretes Objekt, Rolle, Kontext, Kandidatenwort) als unabhängige Datei im Arbeitsverzeichnis.
