Artikel teilen

Der Entwickler Duncan Grazier hat am 17. November beschrieben, wie er die Software Whelk mit KI-Agenten baut, die nichts mergen dürfen.[1] 108 Tage nach dem ersten Commit am 20. Juli zählte das Repository 2.364 Commits, 1.551 davon mit einem Sprachmodell als Mitautor.[1] Grazier ist der einzige Mensch im Projekt und entscheidet allein, was in den Hauptzweig kommt.[1]

Ein Klick · kostenlosDr. Web bei Google bevorzugenMarkieren Sie drweb.de als bevorzugte Quelle. Dann sehen Sie unsere Artikel öfter unter den Top-Meldungen.Jetzt hinzufügen
Inhalt 4 Abschnitte
  1. Was dürfen die Agenten in Whelk nicht?
  2. Warum hält die Sperre, wo die Anweisung versagte?
  3. Was heißt das für Ihr Team?
  4. Mehr Newshunger?
Auf einen Blick

Das Wichtigste in Kürze

  • Die Agenten schreiben den Code, öffnen die Änderungen und beantworten Review-Anmerkungen.
  • Mergen, Aufgaben abschließen, die nächste Aufgabe wählen und Releases starten dürfen sie nicht.
  • Die Merge-Sperre liegt als Berechtigung auf dem Server, auf jede Anfrage folgt permission_denied.
  • Die Regel „keine Kommentare“ stand nur in einer Textdatei und brachte etwa 1.200 neue Kommentare in sieben Wochen.

Was dürfen die Agenten in Whelk nicht?

Schranke mit „Nur Mensch“-Schild über gefaltetem Papier auf weißem Grund
Agenten schreiben Code in Whelk, führen Prüfungen durch und beantworten Review-Anmerkungen. Ein Prüf-Gremium kommentiert jede Änderung beratend

Agenten schreiben in Whelk den Code, öffnen die Änderungen, lassen die Prüfungen laufen und beantworten die Review-Anmerkungen.[1] Ein Gremium aus Prüf-Agenten kommentiert jede Änderung, sein Urteil ist nach Graziers Beschreibung nur beratend.[1]

Die Agenten dürfen nicht mergen, keine Aufgabe auf „erledigt“ setzen, nicht die nächste Aufgabe wählen und keine eigene Rückfrage beantworten.[1] Neue Arbeit legen sie im Backlog ab, befördern dürfen sie diese nicht. Brauchen sie eine Entscheidung, stellen sie genau eine konkrete Frage, die in Graziers Warteschlange wandert.[1] Ein Release startet nur er oder ein Zeitplan.[1]

Warum hält die Sperre, wo die Anweisung versagte?

Am 24. September hat ein Agent trotz Verbot eine Änderung gemergt, vier Tage später machte Grazier aus dem Satz in der Anweisungsdatei eine Berechtigung auf dem Server.[1] Seither hat kein Agent mehr gemergt, auf jede Anfrage antwortet der Server mit permission_denied.[1]

Die Regel „keine Kommentare im Code“ blieb dagegen ein Satz in einer Datei. Im August hatte Grazier sie erlassen, sieben Wochen später standen etwa 1.200 neue Kommentare im Code.[1] Seine Erfahrung: Regeln, die eine Maschine durchsetzt, halten jedes Mal, in Prosa geschriebene nur, bis ein Agent einen lokalen Grund zum Abweichen findet.[1]

Prosa-Regel gegen Server-Regel
Was in Whelk wer entscheidet, nach Angaben von Duncan Grazier

Das Projekt in Zahlen

2.364
Commits in 108 Tagen
1.551
davon mit einem Modell als Mitautor
1.200
neue Kommentare trotz Verbot in sieben Wochen
0
Merges durch Agenten seit der Server-Sperre

Wer darf was?

Aufgabe
Agent
Grazier
Code schreiben, Änderung öffnen
ja
prüft
Änderung mergen
nein, Server sperrt
ja
Aufgabe auf „erledigt“ setzen
nein, nur „in Prüfung“
ja
Nächste Aufgabe wählen
nur Backlog füllen
ja
Eigene Rückfrage beantworten
nein
ja
Release starten
nein
ja, oder ein Zeitplan

Eine Regel, die nur im Prompt steht, ist ein Wunsch. Erst die Berechtigung auf dem Server macht sie zur Regel.

Markus Seyfferth, Chefredakteur Dr. Web
Zitat teilen

Was heißt das für Ihr Team?

GitHub lässt Administratoren verlangen, dass jede Änderung am geschützten Branch eine festgelegte Zahl genehmigender Reviews erhält und nur über einen genehmigten Pull Request hineinkommt.[2] Zusätzlich lässt sich beschränken, welche Nutzer, Teams oder Apps auf den Branch pushen dürfen.[2] Achten Sie auf die Voreinstellung: Die Regeln gelten standardmäßig nicht für Personen mit Admin-Rechten, läuft ein Agent mit solchen Rechten, greift die Sperre also nur, wenn Sie sie ausdrücklich auch für Administratoren einschalten.[2]

Der Entwickler John Nunemaker setzt seinem Agenten Nunebot ähnliche Grenzen: Er darf laut unserem Bericht weder mergen noch deployen. Jede seiner 269 Änderungen hat Nunemaker selbst freigegeben. Was fehlende Prüfung kosten kann, zeigt der Fall von Lovable-Apps, die Nutzerdaten ohne Login offenlegten.

Für Agenturen und Inhouse-Teams mit Agenten in Kundenprojekten heißt das: Schreiben Sie zuerst auf, welche Entscheidungen bei einem Menschen bleiben. Setzen Sie die Liste in der Rechteverwaltung durch, bevor Sie eine Stilregel in den Prompt schreiben.[1] Der Preis ist ein Engpass: Grazier liest nur so viel, wie er an einem Tag sorgfältig prüfen kann, eine heute geöffnete Änderung wird heute gemergt oder war zu groß.[1] Whelk ist ein Einzelprojekt. Die Zahlen stammen von Grazier selbst, der nach eigenen Angaben Gründer und CTOs berät.[1]

Quellen

2 Quellen anzeigenQuellen ausblenden
  1. Duncan GrazierOnly the Human Merges
  2. GitHub DocsAbout protected branches

Mehr Newshunger?

4,3 20 Bewertungen

Wie hat Ihnen dieser Artikel gefallen?

Dr. Web Newsletter

Jede Woche ein bisschen klüger.

Der Dr. Web Newsletter: die besten Artikel, Anbieter-Tipps und neue Tools, kompakt zusammengefasst, jeden Donnerstag. Kostenlos und jederzeit abbestellbar.