{ "modell": "Qwen3.8-27B BF16 (unquantisiert)", "reasoning": false, "max_tokens": 900, "terminal": [ { "id": "term01", "titel": "Zeilen zaehlen", "ok": true, "grund": "", "antwort": "wc -l < log.txt", "tps": 10.807305738679347, "prompt_tps": 202.07382028097308, "tokens": 7, "prompt_tokens": 67, "denk_zeichen": 0, "antwort_zeichen": 15, "abbruch": "stop", "ttft": 0.332, "sekunden": 1.03 }, { "id": "term02", "titel": "Muster mit Zeilennummer", "ok": true, "grund": "", "antwort": "grep -n \"WARN\" log.txt", "tps": 12.087870761858202, "prompt_tps": 247.86852738553785, "tokens": 9, "prompt_tokens": 63, "denk_zeichen": 0, "antwort_zeichen": 22, "abbruch": "stop", "ttft": 0.254, "sekunden": 1.23 }, { "id": "term03", "titel": "Groesste Datei", "ok": true, "grund": "", "antwort": "ls -S | head -n 1", "tps": 12.594680510739485, "prompt_tps": 153.41630210924168, "tokens": 10, "prompt_tokens": 66, "denk_zeichen": 0, "antwort_zeichen": 17, "abbruch": "stop", "ttft": 0.43, "sekunden": 1.45 }, { "id": "term04", "titel": "Spalte aus CSV", "ok": true, "grund": "", "antwort": "cut -d';' -f1 messwerte.csv | tail -n +2", "tps": 10.91501809467444, "prompt_tps": 263.3507737118816, "tokens": 18, "prompt_tokens": 83, "denk_zeichen": 0, "antwort_zeichen": 40, "abbruch": "stop", "ttft": 0.315, "sekunden": 2.19 }, { "id": "term05", "titel": "Doppelte Zeilen", "ok": true, "grund": "", "antwort": "sort namen.txt | uniq -c | sort -rn", "tps": 12.621826925301924, "prompt_tps": 255.11205306330706, "tokens": 12, "prompt_tokens": 65, "denk_zeichen": 0, "antwort_zeichen": 35, "abbruch": "stop", "ttft": 0.255, "sekunden": 1.42 }, { "id": "term06", "titel": "Summe einer Spalte", "ok": false, "grund": "Ausgabe falsch: '29'", "antwort": "awk -F';' 'NR>1 {sum+=$2} END {print sum}' messwerte.csv", "tps": 11.688632366699672, "prompt_tps": 230.99815201478387, "tokens": 24, "prompt_tokens": 77, "denk_zeichen": 0, "antwort_zeichen": 56, "abbruch": "stop", "ttft": 0.333, "sekunden": 2.84 }, { "id": "term07", "titel": "Numerisch sortieren", "ok": true, "grund": "", "antwort": "tail -n +2 messwerte.csv | sort -t';' -k$(head -1 messwerte.csv | tr ';' '\\n' | grep -n '^spannung$' | cut -d: -f1) -rn", "tps": 11.4838329451415, "prompt_tps": 182.882223847842, "tokens": 50, "prompt_tokens": 89, "denk_zeichen": 0, "antwort_zeichen": 119, "abbruch": "stop", "ttft": 0.487, "sekunden": 5.06 }, { "id": "term08", "titel": "JSON-Feld lesen", "ok": true, "grund": "", "antwort": "jq -r '.port' config.json", "tps": 11.294939741496478, "prompt_tps": 137.58343862288152, "tokens": 9, "prompt_tokens": 60, "denk_zeichen": 0, "antwort_zeichen": 25, "abbruch": "stop", "ttft": 0.436, "sekunden": 1.45 }, { "id": "term09", "titel": "Ersetzen in Datei", "ok": true, "grund": "", "antwort": "sed -i 's/WARN/ACHTUNG/g' log.txt", "tps": 12.852437946823038, "prompt_tps": 263.7767033702299, "tokens": 16, "prompt_tokens": 82, "denk_zeichen": 0, "antwort_zeichen": 33, "abbruch": "stop", "ttft": 0.311, "sekunden": 1.76 }, { "id": "term10", "titel": "Gefiltert zaehlen", "ok": true, "grund": "", "antwort": "awk -F';' 'NR>1 && $2==6' messwerte.csv | wc -l", "tps": 11.211429028242078, "prompt_tps": 292.4324272212814, "tokens": 23, "prompt_tokens": 91, "denk_zeichen": 0, "antwort_zeichen": 47, "abbruch": "stop", "ttft": 0.311, "sekunden": 2.8 } ], "code": [ { "id": "code01", "titel": "Intervalle zusammenfassen", "ok": true, "grund": "", "bestanden": 5, "gesamt": 5, "code": "def merge_intervalle(intervalle):\n if not intervalle:\n return []\n sortiert = sorted(intervalle, key=lambda x: x[0])\n erg = [sortiert[0]]\n for start, ende in sortiert[1:]:\n if start <= erg[-1][1]:\n erg[-1] = (erg[-1][0], max(erg[-1][1], ende))\n else:\n erg.append((start, ende))\n return erg", "tps": 11.503663143355652, "prompt_tps": 289.75279880173196, "tokens": 119, "prompt_tokens": 124, "denk_zeichen": 0, "antwort_zeichen": 360, "abbruch": "stop", "ttft": 0.428, "sekunden": 10.99 }, { "id": "code02", "titel": "Verschachteltes dict flach machen", "ok": true, "grund": "", "bestanden": 6, "gesamt": 6, "code": "def flatten(d, sep='.'):\n result = {}\n for key, value in d.items():\n if isinstance(value, dict):\n if value:\n for k, v in flatten(value, sep).items():\n result[f\"{key}{sep}{k}\"] = v\n # leeres dict wird ignoriert\n else:\n result[key] = value\n return result", "tps": 11.333241300983763, "prompt_tps": 298.1103649447855, "tokens": 94, "prompt_tokens": 93, "denk_zeichen": 0, "antwort_zeichen": 356, "abbruch": "stop", "ttft": 0.312, "sekunden": 9.01 }, { "id": "code03", "titel": "Roemische Zahlen lesen", "ok": true, "grund": "", "bestanden": 6, "gesamt": 6, "code": "def roemisch_zu_int(s: str) -> int:\n romans = {'I': 1, 'V': 5, 'X': 10, 'L': 50, 'C': 100, 'D': 500, 'M': 1000}\n total = 0\n prev = 0\n for char in reversed(s):\n val = romans[char]\n if val < prev:\n total -= val\n else:\n total += val\n prev = val\n return total", "tps": 11.449611371138811, "prompt_tps": 282.363021479063, "tokens": 134, "prompt_tokens": 87, "denk_zeichen": 0, "antwort_zeichen": 334, "abbruch": "stop", "ttft": 0.308, "sekunden": 12.4 }, { "id": "code04", "titel": "Wortfrequenz mit Gleichstand", "ok": true, "grund": "", "bestanden": 5, "gesamt": 5, "code": "import re\nfrom collections import Counter\n\ndef top_woerter(text, n):\n woerter = re.findall(r'[a-zA-Z0-9]+', text)\n woerter = [w.lower() for w in woerter]\n zaehler = Counter(woerter)\n sortiert = sorted(zaehler.items(), key=lambda x: (-x[1], x[0]))\n return sortiert[:n]", "tps": 11.511864317367124, "prompt_tps": 357.43121842557935, "tokens": 103, "prompt_tokens": 112, "denk_zeichen": 0, "antwort_zeichen": 296, "abbruch": "stop", "ttft": 0.313, "sekunden": 9.48 }, { "id": "code05", "titel": "Klammern pruefen", "ok": true, "grund": "", "bestanden": 7, "gesamt": 7, "code": "def klammern_ok(s):\n stack = []\n pairs = {')': '(', ']': '[', '}': '{'}\n for ch in s:\n if ch in '([{':\n stack.append(ch)\n elif ch in ')]}':\n if not stack or stack[-1] != pairs[ch]:\n return False\n stack.pop()\n return not stack", "tps": 11.434962360530346, "prompt_tps": 174.402127705958, "tokens": 93, "prompt_tokens": 88, "denk_zeichen": 0, "antwort_zeichen": 313, "abbruch": "stop", "ttft": 0.505, "sekunden": 8.86 }, { "id": "code06", "titel": "Suche im rotierten Feld", "ok": true, "grund": "", "bestanden": 6, "gesamt": 6, "code": "def suche_rotiert(arr, ziel):\n if not arr:\n return -1\n \n links, rechts = 0, len(arr) - 1\n \n while links <= rechts:\n mitte = (links + rechts) // 2\n \n if arr[mitte] == ziel:\n return mitte\n \n # Linke Hälfte ist sortiert\n if arr[links] <= arr[mitte]:\n if arr[links] <= ziel < arr[mitte]:\n rechts = mitte - 1\n else:\n links = mitte + 1\n # Rechte Hälfte ist sortiert\n else:\n if arr[mitte] < ziel <= arr[rechts]:\n links = mitte + 1\n ", "tps": 11.490498487963421, "prompt_tps": 211.4143620823308, "tokens": 183, "prompt_tokens": 105, "denk_zeichen": 0, "antwort_zeichen": 676, "abbruch": "stop", "ttft": 0.497, "sekunden": 16.65 }, { "id": "code07", "titel": "Werktage zwischen zwei Daten", "ok": true, "grund": "", "bestanden": 5, "gesamt": 5, "code": "from datetime import datetime, timedelta\n\ndef werktage(von, bis):\n if bis < von:\n return 0\n start = datetime.strptime(von, '%Y-%m-%d')\n end = datetime.strptime(bis, '%Y-%m-%d')\n count = 0\n current = start\n while current <= end:\n if current.weekday() < 5:\n count += 1\n current += timedelta(days=1)\n return count", "tps": 11.557579506262233, "prompt_tps": 291.8089235168811, "tokens": 114, "prompt_tokens": 90, "denk_zeichen": 0, "antwort_zeichen": 377, "abbruch": "stop", "ttft": 0.308, "sekunden": 10.4 }, { "id": "code08", "titel": "LRU-Zwischenspeicher", "ok": true, "grund": "", "bestanden": 5, "gesamt": 5, "code": "from collections import OrderedDict\n\nclass LRU:\n def __init__(self, groesse):\n self.groesse = groesse\n self.cache = OrderedDict()\n\n def get(self, schluessel):\n if schluessel not in self.cache:\n return None\n self.cache.move_to_end(schluessel)\n return self.cache[schluessel]\n\n def put(self, schluessel, wert):\n if schluessel in self.cache:\n self.cache.move_to_end(schluessel)\n self.cache[schluessel] = wert\n if len(self.cache) > self.groesse:\n self.cache.popitem(last=False)", "tps": 11.554034702246971, "prompt_tps": 355.73196532549474, "tokens": 156, "prompt_tokens": 133, "denk_zeichen": 0, "antwort_zeichen": 584, "abbruch": "stop", "ttft": 0.374, "sekunden": 14.1 }, { "id": "code09", "titel": "Wiederholung nach Fehlschlag", "ok": true, "grund": "", "bestanden": 4, "gesamt": 4, "code": "def wiederhole(fn, versuche=3):\n for _ in range(versuche):\n try:\n return fn()\n except Exception:\n if _ == versuche - 1:\n raise", "tps": 11.42760159402345, "prompt_tps": 343.5423756279371, "tokens": 54, "prompt_tokens": 106, "denk_zeichen": 0, "antwort_zeichen": 194, "abbruch": "stop", "ttft": 0.309, "sekunden": 5.49 }, { "id": "code10", "titel": "CSV sortieren und als JSON", "ok": true, "grund": "", "bestanden": 3, "gesamt": 3, "code": "import json\nimport csv\nimport io\n\ndef csv_nach_json(text, spalte):\n reader = csv.DictReader(io.StringIO(text), delimiter=';')\n rows = list(reader)\n \n if not rows:\n return json.dumps([])\n \n # Prüfen, ob alle Werte in der Spalte numerisch sind\n try:\n for row in rows:\n val = row[spalte].strip()\n if val == '':\n raise ValueError\n float(val)\n numeric = True\n except (ValueError, KeyError):\n numeric = False\n \n if numeric:\n rows.sort(key=lambda r: float(r[spalte].strip()))\n else:\n ", "tps": 11.528283017385817, "prompt_tps": 402.55352059996324, "tokens": 188, "prompt_tokens": 127, "denk_zeichen": 0, "antwort_zeichen": 709, "abbruch": "stop", "ttft": 0.315, "sekunden": 16.86 } ], "messungen": [ { "tps": 10.807305738679347, "prompt_tps": 202.07382028097308, "tokens": 7, "prompt_tokens": 67, "denk_zeichen": 0, "antwort_zeichen": 15, "abbruch": "stop", "ttft": 0.332, "sekunden": 1.03 }, { "tps": 12.087870761858202, "prompt_tps": 247.86852738553785, "tokens": 9, "prompt_tokens": 63, "denk_zeichen": 0, "antwort_zeichen": 22, "abbruch": "stop", "ttft": 0.254, "sekunden": 1.23 }, { "tps": 12.594680510739485, "prompt_tps": 153.41630210924168, "tokens": 10, "prompt_tokens": 66, "denk_zeichen": 0, "antwort_zeichen": 17, "abbruch": "stop", "ttft": 0.43, "sekunden": 1.45 }, { "tps": 10.91501809467444, "prompt_tps": 263.3507737118816, "tokens": 18, "prompt_tokens": 83, "denk_zeichen": 0, "antwort_zeichen": 40, "abbruch": "stop", "ttft": 0.315, "sekunden": 2.19 }, { "tps": 12.621826925301924, "prompt_tps": 255.11205306330706, "tokens": 12, "prompt_tokens": 65, "denk_zeichen": 0, "antwort_zeichen": 35, "abbruch": "stop", "ttft": 0.255, "sekunden": 1.42 }, { "tps": 11.688632366699672, "prompt_tps": 230.99815201478387, "tokens": 24, "prompt_tokens": 77, "denk_zeichen": 0, "antwort_zeichen": 56, "abbruch": "stop", "ttft": 0.333, "sekunden": 2.84 }, { "tps": 11.4838329451415, "prompt_tps": 182.882223847842, "tokens": 50, "prompt_tokens": 89, "denk_zeichen": 0, "antwort_zeichen": 119, "abbruch": "stop", "ttft": 0.487, "sekunden": 5.06 }, { "tps": 11.294939741496478, "prompt_tps": 137.58343862288152, "tokens": 9, "prompt_tokens": 60, "denk_zeichen": 0, "antwort_zeichen": 25, "abbruch": "stop", "ttft": 0.436, "sekunden": 1.45 }, { "tps": 12.852437946823038, "prompt_tps": 263.7767033702299, "tokens": 16, "prompt_tokens": 82, "denk_zeichen": 0, "antwort_zeichen": 33, "abbruch": "stop", "ttft": 0.311, "sekunden": 1.76 }, { "tps": 11.211429028242078, "prompt_tps": 292.4324272212814, "tokens": 23, "prompt_tokens": 91, "denk_zeichen": 0, "antwort_zeichen": 47, "abbruch": "stop", "ttft": 0.311, "sekunden": 2.8 }, { "tps": 11.503663143355652, "prompt_tps": 289.75279880173196, "tokens": 119, "prompt_tokens": 124, "denk_zeichen": 0, "antwort_zeichen": 360, "abbruch": "stop", "ttft": 0.428, "sekunden": 10.99 }, { "tps": 11.333241300983763, "prompt_tps": 298.1103649447855, "tokens": 94, "prompt_tokens": 93, "denk_zeichen": 0, "antwort_zeichen": 356, "abbruch": "stop", "ttft": 0.312, "sekunden": 9.01 }, { "tps": 11.449611371138811, "prompt_tps": 282.363021479063, "tokens": 134, "prompt_tokens": 87, "denk_zeichen": 0, "antwort_zeichen": 334, "abbruch": "stop", "ttft": 0.308, "sekunden": 12.4 }, { "tps": 11.511864317367124, "prompt_tps": 357.43121842557935, "tokens": 103, "prompt_tokens": 112, "denk_zeichen": 0, "antwort_zeichen": 296, "abbruch": "stop", "ttft": 0.313, "sekunden": 9.48 }, { "tps": 11.434962360530346, "prompt_tps": 174.402127705958, "tokens": 93, "prompt_tokens": 88, "denk_zeichen": 0, "antwort_zeichen": 313, "abbruch": "stop", "ttft": 0.505, "sekunden": 8.86 }, { "tps": 11.490498487963421, "prompt_tps": 211.4143620823308, "tokens": 183, "prompt_tokens": 105, "denk_zeichen": 0, "antwort_zeichen": 676, "abbruch": "stop", "ttft": 0.497, "sekunden": 16.65 }, { "tps": 11.557579506262233, "prompt_tps": 291.8089235168811, "tokens": 114, "prompt_tokens": 90, "denk_zeichen": 0, "antwort_zeichen": 377, "abbruch": "stop", "ttft": 0.308, "sekunden": 10.4 }, { "tps": 11.554034702246971, "prompt_tps": 355.73196532549474, "tokens": 156, "prompt_tokens": 133, "denk_zeichen": 0, "antwort_zeichen": 584, "abbruch": "stop", "ttft": 0.374, "sekunden": 14.1 }, { "tps": 11.42760159402345, "prompt_tps": 343.5423756279371, "tokens": 54, "prompt_tokens": 106, "denk_zeichen": 0, "antwort_zeichen": 194, "abbruch": "stop", "ttft": 0.309, "sekunden": 5.49 }, { "tps": 11.528283017385817, "prompt_tps": 402.55352059996324, "tokens": 188, "prompt_tokens": 127, "denk_zeichen": 0, "antwort_zeichen": 709, "abbruch": "stop", "ttft": 0.315, "sekunden": 16.86 } ], "summe": { "terminal_ok": 9, "terminal_n": 10, "code_ok": 10, "code_n": 10, "code_testfaelle_ok": 52, "code_testfaelle_n": 52, "tps_median": 11.5, "tps_min": 10.8, "tps_max": 12.9, "prompt_tps_median": 263.8, "tokens_gesamt": 1416, "sekunden_gesamt": 135.5, "anfragen": 20, "tokens_je_aufgabe": 70.8, "denk_zeichen_gesamt": 0, "antwort_zeichen_gesamt": 4608, "am_limit": 0 } }