Trend-Radar + Pruefstand: Box beobachtet Modell-/Engine-Trends und testet Kandidaten selbst

- trend-radar-feed.sh (Cron Sa 05:15): Live-Puls ALLER Rollen mit Vorwochen-Vergleich, Engine-A/B gegen neuen llama.cpp-Build (Fruehwarnung vor So-Auto-Update), mechanische Watch-Liste (MMQ-Issue, ROCm-Releases, Community-Grid), HF-Kandidaten-Suche mit Zitat-Gate -> max. 1 Pruefstand-Kandidat/Woche - pruefstand.sh + harness.py (Cron So 01:00, no-agent): volles Programm je Kandidat - 6 Coding-Aufgaben mit echten Unit-Tests, 4 Agenten-Aufgaben (Tool-Loop + Endzustand), 4 Recherche-Fragen mit Zitat-Ehrlichkeits-Gate, Deutsch-Richter, Vision-Testbild, Tempo kurz+lang; Baseline der Amtsinhaber als Vergleichsmassstab - Leitplanken (User-Entscheid 17.07.): Download-Deckel 35 GB (drueber -> Karte), 1 Kandidat/Woche, Cache mit Auto-Aufraeumen, RAM-/Platz-Wache, Bench-Port :5899, Radar/Pruefstand EMPFEHLEN nur - Rollen-Wechsel bleibt Commander-Klick - E2E bewiesen (Mock-LLM): coding 6/6, recherche 4/4 inkl. Zitat-Gate, Agent-Roundtrip, Richter-Parsing; Suiten-Selbsttest mit Referenzloesungen 6/6 Co-Authored-By: Claude Fable 5 <noreply@anthropic.com>
2026-07-17 14:56:58 +02:00
parent 8579fe9934
commit b0dce954e9
34 changed files with 1786 additions and 1 deletions
@@ -0,0 +1,13 @@
+{
+  "prompt": "Im Arbeitsverzeichnis liegen Notiz-Dateien im Ordner `notizen/`. Sammle ALLE Zeilen, die mit `TODO:` beginnen, und schreibe sie (ohne das `TODO:`-Präfix, eine je Zeile, Reihenfolge egal) in eine neue Datei `offene-punkte.txt` im Wurzelverzeichnis. Rufe danach `fertig` auf.",
+  "max_schritte": 8,
+  "sandkasten": {
+    "notizen/montag.txt": "Besprechung war ok.\nTODO: Backup-Log prüfen\nSonst nichts.\n",
+    "notizen/dienstag.txt": "TODO: Firmware-Update Router\nWetter schlecht.\n",
+    "notizen/mittwoch.txt": "Nichts offen heute.\n"
+  },
+  "checks": [
+    {"datei": "offene-punkte.txt", "regex": "Backup-Log prüfen"},
+    {"datei": "offene-punkte.txt", "regex": "Firmware-Update Router"}
+  ]
+}
@@ -0,0 +1,13 @@
+{
+  "prompt": "Die Datei `dienst/config.ini` ist kaputt. In `anleitung.txt` steht, welche Werte gelten sollen. Repariere die config.ini entsprechend (nur die falschen Werte ändern, Struktur beibehalten) und rufe danach `fertig` auf.",
+  "max_schritte": 8,
+  "sandkasten": {
+    "anleitung.txt": "Sollwerte für dienst/config.ini:\n- port muss 9001 sein (Zahl, nicht Text!)\n- loglevel muss info sein\n- Der Eintrag host bleibt unverändert.\n",
+    "dienst/config.ini": "[server]\nhost = 127.0.0.1\nport = abc\nloglevel = debug\n"
+  },
+  "checks": [
+    {"datei": "dienst/config.ini", "regex": "^port\\s*=\\s*9001\\s*$"},
+    {"datei": "dienst/config.ini", "regex": "^loglevel\\s*=\\s*info\\s*$"},
+    {"datei": "dienst/config.ini", "regex": "^host\\s*=\\s*127\\.0\\.0\\.1\\s*$"}
+  ]
+}
@@ -0,0 +1,11 @@
+{
+  "prompt": "Lies die Messwerte in `messwerte.csv` (Spalten: zeit;temperatur_c). Erstelle einen Bericht `bericht.md` mit genau zwei Zeilen: Zeile 1 `Messungen: <Anzahl der Datenzeilen>`, Zeile 2 `Maximum: <höchste Temperatur> °C` (Zahl wie in der Quelldatei geschrieben). Rufe danach `fertig` auf.",
+  "max_schritte": 8,
+  "sandkasten": {
+    "messwerte.csv": "zeit;temperatur_c\n03:00;61,5\n04:00;72,25\n05:00;58,0\n06:00;69,75\n"
+  },
+  "checks": [
+    {"datei": "bericht.md", "regex": "Messungen:\\s*4"},
+    {"datei": "bericht.md", "regex": "Maximum:\\s*72,25\\s*°?C"}
+  ]
+}
@@ -0,0 +1,17 @@
+{
+  "prompt": "In `regeln.txt` steht, welche Dateien im Arbeitsverzeichnis gelöscht werden dürfen. Lösche GENAU die Dateien, die laut Regeln weg dürfen — nichts anderes. Rufe danach `fertig` auf.",
+  "max_schritte": 10,
+  "sandkasten": {
+    "regeln.txt": "Aufräum-Regeln:\n1. Alle Dateien mit Endung .tmp dürfen gelöscht werden.\n2. Dateien, deren Name mit wichtig beginnt, dürfen NIE gelöscht werden.\n3. Alles andere bleibt liegen.\n",
+    "cache-alt.tmp": "wegwerf-inhalt\n",
+    "sitzung.tmp": "wegwerf-inhalt\n",
+    "wichtig-vertrag.txt": "bleibt!\n",
+    "notiz.md": "bleibt auch.\n"
+  },
+  "checks": [
+    {"nicht_vorhanden": "cache-alt.tmp"},
+    {"nicht_vorhanden": "sitzung.tmp"},
+    {"datei": "wichtig-vertrag.txt", "regex": "bleibt!"},
+    {"datei": "notiz.md", "regex": "bleibt auch"}
+  ]
+}