DEV Community

Cover image for Was ist OpenAI LifeVal? Der Alltagsaufgaben-Benchmark
Emre Demir
Emre Demir

Posted on Originally published at apidog.com

Was ist OpenAI LifeVal? Der Alltagsaufgaben-Benchmark

title: Was ist OpenAI LifeVal? Der Alltagsaufgaben-Benchmark
published: false
description: OpenAI LifeVal bewertet Agenten anhand von 169 Alltagsaufgaben: alle veröffentlichten Punktzahlen, die Zahlen pro Reasoning-Aufwand und was der Benchmark nicht zeigt.
tags: openai, ai, llm, benchmark
canonical_url: https://apidog.com/de/blog/what-is-openai-lifeval/

cover_image: https://assets.apidog.com/blog-next/2026/11/header-6.png

OpenAI LifeVal ist ein Benchmark mit 169 Alltagsaufgaben – etwa ein Kind in der Schule anmelden, ein Haushaltsbudget verwalten oder mit einer Behörde umgehen –, die ein KI-Agent mithilfe von Browsernutzung, Computernutzung und Konnektoren absolviert. Eine Bewertungsrubrik benotet jeden Versuch, und die Punktzahl ist der durchschnittliche Reward von 0 bis 1. GPT-6 Astra erreicht 80,6 % bei xhigh-Aufwand.

Testen Sie Apidog noch heute

Das ist die Kurzfassung. Im Folgenden erfahren Sie, wie OpenAI LifeVal entwickelt hat, jede veröffentlichte Modellpunktzahl (einschließlich der Aufwandsstufen, die nur im interaktiven Diagramm der Seite zu finden sind), was diese Zahlen über den Reasoning-Aufwand aussagen und was der Benchmark auslässt.

Was ist OpenAI LifeVal?

LifeVal ist ein Benchmark von OpenAI Research, der misst, wie gut ein Modell die Alltagspflichten erledigt, statt Coding- oder Prüfungsfragen zu beantworten. Seine 169 Aufgaben sind agentisch: Das Modell surft im Netz, bedient einen Computer und ruft Konnektoren auf, und eine szenariospezifische Bewertungsrubrik benotet das Ergebnis.

OpenAI nennt sieben Aufgabenbereiche:

  • Pflege und Betreuung
  • Gesundheit
  • Bildung
  • Haushaltsverwaltung
  • Persönliche Finanzen
  • Einkaufen
  • Zugang zu staatlichen Dienstleistungen

Die Hauptkennzahl ist der durchschnittliche Reward. Jeder Punktwert mittelt die Versuche innerhalb einer Aufgabe und bildet dann den gleichgewichteten Durchschnitt der 169 Aufgabenmittelwerte. Eine Punktzahl von 80,6 % bedeutet einen Reward von 0,806. Die Hinweise im Diagramm lauten „No WTP weighting", worauf wir später zurückkommen.

Wie OpenAI das LifeVal-Aufgabenset entwickelt hat

OpenAI hat die Aufgabenliste nicht von Grund auf erfunden. Ausgangspunkt war, wie Menschen tatsächlich ihre Zeit verbringen – anhand von zwei öffentlichen Datensätzen und einer eigenen Umfrage:

  1. Die American Time Use Survey des US Bureau of Labor Statistics, die festhält, was Amerikaner Stunde für Stunde tun.
  2. Die Multinational Time Use Study, die Zeittagebücher über Ländergrenzen hinweg harmonisiert.
  3. Eine eigene Umfrage mit 3.995 demografisch repräsentativen Befragten, in der gefragt wurde, wo sie KI-Unterstützung haben möchten.

Die Zeitnutzungsdaten zeigen OpenAI, welche Aktivitäten die Tage der Menschen füllen. Die Umfrage zeigt, welche dieser Aktivitäten die Menschen einem Agenten überlassen würden. Die Schnittmenge wurde zu den 169 Szenarien.

Die Seite zeigt fünf Beispiel-Aufgabenkarten mit jeweils einer Punktzahl. Das sind die von OpenAI ausgewählten Beispiele, keine Zufallsstichprobe:

Beispielaufgabe (OpenAIs Auswahl) Punktzahl
Nach einem Umzug im richtigen Kindergarten anmelden 93,1 %
Freiwillige vor einer Flut koordinieren 98,0 %
Ein neues Zuhause für meine Familie finden 100 %
Ein Spiel mit Oma aus der Ferne ansehen 96,3 %
Mahlzeiten für ein Elternteil mit neuer Diabetes-Diagnose vorbereiten 90,4 %

LifeVal-Punktzahlen: jedes OpenAI-Modell

OpenAIs erstes Diagramm trägt jedes Modell bei xhigh-Reasoning-Aufwand gegen sein Veröffentlichungsdatum auf. GPT-6 Astra verwendet „the launch-blog xhigh setting“.

Modell Veröffentlichungsdatum LifeVal durchschnittlicher Reward (xhigh)
GPT-5.2 2025-12-11 49,3 %
GPT-5.4 2026-03-05 73,0 %
GPT-5.5 2026-04-23 77,4 %
GPT-5.6 2026-07-09 80,0 %
GPT-6 Astra 2026-09-03 80,6 %

Bar chart of LifeVal average reward at xhigh effort: GPT-5.2 49.3%, GPT-5.4 73.0%, GPT-5.5 77.4%, GPT-5.6 80.0% and GPT-6 Astra 80.6%

Die Kurve ist steil und wird dann flach. GPT-5.2 auf GPT-5.4 brachte 23,7 Punkte in drei Monaten. Die nächsten drei Releases brachten zusammen 7,6 Punkte, und GPT-6 Astra übertraf GPT-5.6 um 0,6.

Der Sprung bei GPT-5.4 ging nicht nur auf die Qualität zurück. Bei xhigh sank die durchschnittliche Latenz von 121,0 Sekunden auf 16,7 Sekunden und die generierten Tokens von 202,0K auf 30,6K pro Aufgabe. Das neuere Modell erreichte eine weit bessere Antwort mit etwa einem Siebtel der Ausgabe.

GPT-6.1 Sol und GPT-6.1 Terra erscheinen in keinem der beiden Diagramme, obwohl beide bereits erschienen sind. Die Zeitachse endet am 3. September 2026. Wenn Sie für ein Agentenprodukt zwischen GPT-6.1 Sol und Astra wählen, kann LifeVal Ihnen noch nicht helfen.

LifeVal nach Reasoning-Aufwand

Das zweite Diagramm ist das nützlichere, und man sieht es nur beim Hovern. Es schlüsselt jedes Modell nach Reasoning-Aufwand auf, mit vier Zahlen pro Punkt: Reward, Latenz, generierte Tokens und API-Kosten. Hier der Reward für jede Einstellung:

Modell low medium high xhigh max
GPT-5.2 27,7 % 37,2 % 45,2 % 49,3 % n/a
GPT-5.4 62,8 % 70,1 % 72,0 % 73,0 % n/a
GPT-5.5 57,1 % 71,3 % 75,6 % 77,4 % n/a
GPT-5.6 63,9 % 75,0 % 78,8 % 80,0 % 82,6 %
GPT-6 Astra 66,6 % 77,6 % 80,7 % 80,6 % 82,5 %

Line chart of LifeVal reward against charted API cost per task for each model across reasoning efforts, showing GPT-5.6 max at 82.6% near cost 9.65 and GPT-6 Astra max at 82.5% near cost 20.04

Eine Anmerkung zur Kostenspalte. OpenAI bezeichnet sie als API-Kosten, nennt aber nicht die Einheit. Behandeln Sie die folgenden Zahlen daher als „API-Kosten pro Aufgabe laut Diagramm“, nützlich für Verhältnisse, nicht als Dollar.

GPT-5.6 bei max erreicht GPT-6 Astra bei max

Einstellung Reward Latenz Tokens Kosten laut Diagramm
GPT-5.6, max 82,6 % 22,2 s 29,7K 9,65
GPT-6 Astra, max 82,5 % 20,6 s 26,3K 20,04
GPT-5.6, xhigh 80,0 % 17,5 s 20,7K 7,55
GPT-6 Astra, high 80,7 % 13,6 s 12,4K 13,07

GPT-5.6 bei max übertrifft Astra bei max um 0,1 Punkte bei etwa der Hälfte der im Diagramm angegebenen Kosten. Bei gleichem Aufwand liegt Astras Vorsprung gegenüber GPT-5.6 bei jeder Einstellung unter drei Punkten, bei xhigh bei 0,6, und bei max ist er verschwunden. Astra ist etwas schneller und verbraucht weniger Tokens, aber für diese Aufgaben zahlen Sie etwa doppelt so viel. Unsere GPT-5.6-Preisübersicht und der GPT-6 Astra API-Leitfaden enthalten die Preise pro Token, falls Sie dieses Verhältnis mit Ihrem eigenen Traffic abgleichen möchten.

Mehr Reasoning über „high“ hinaus bringt fast nichts

Bei GPT-6 Astra erreicht high 80,7 % und xhigh 80,6 %. Der zusätzliche Aufwand kostet 1,4 Sekunden mehr und 2,1K mehr Tokens für eine etwas niedrigere Punktzahl. GPT-5.4 zeigt dieselbe Form: ein Punkt von high auf xhigh.

Die großen Zugewinne liegen am unteren Ende der Kurve. GPT-5.5 von low auf medium zu verschieben, bringt 14,2 Punkte. Von high auf xhigh zu verschieben, bringt 1,8. Wenn Ihr Agent Alltagsaufgaben wie diese ausführt, ist medium oder high die Einstellung, die Sie zuerst testen sollten. Der Reasoning-Leitfaden von OpenAI erklärt, wie der Effort-Parameter in der Responses API funktioniert.

Was LifeVal auslässt

LifeVal ist ein nützliches Signal, aber ein selbst berichtetes. Bevor Sie es zitieren, sollten Sie seine Grenzen kennen.

  • Es ist nicht öffentlich. Es gibt kein herunterladbares Aufgabenset und keine öffentliche Rangliste, und OpenAI hat weder die Bewertungsrubriken noch die Kalibrierung seiner Bewerter veröffentlicht. Sie können es nicht erneut ausführen.
  • Es bewertet nur OpenAI-Modelle. Kein Claude, Gemini oder Open-Weight-Modell erscheint, daher sagt es nichts darüber aus, wie GPT-6.1 Sol im Vergleich zu Claude Sonnet 5.5 abschneidet oder über ein anderes herstellerübergreifendes Duell.
  • Irgendwo existiert eine gewichtete Version. Im Diagramm steht „No WTP weighting“, wobei WTP für Zahlungsbereitschaft (willingness to pay) steht. Das impliziert, dass OpenAI eine Variante berechnet oder erwogen hat, die danach gewichtet ist, was Menschen für jede Aufgabe zahlen würden, und diese nicht veröffentlicht hat.
  • Die Beispielkarten sind handverlesen. Die fünf Karten auf der Seite erreichen 90,4 % bis 100 %. Der 169-Aufgaben-Durchschnitt für das beste Modell liegt bei 80,6 %. Die Beispiele zeigen die besten Tage des Benchmarks, nicht seinen typischen.

Nichts davon macht LifeVal falsch. Es macht es zu einem Anbieter-Benchmark. Lesen Sie es so, wie Sie jedes Launch-Diagramm lesen würden: als eine Behauptung, die Sie an Ihren eigenen Aufgaben testen können.

Führen Sie Ihren eigenen Reasoning-Aufwand-Test mit Apidog CLI durch

Die Aufwandsstufentabelle von LifeVal ist eine Reward-gegen-Kosten-Kurve. Sie können dieselbe Kurve für Ihren eigenen Prompt zeichnen. Statt Anfragen von Hand abzufeuern, übergeben Sie die Aufgabe Ihrem Coding-Agenten und lassen Sie ihn Apidog CLI steuern.

Installieren Sie die CLI, melden Sie sich an und fügen Sie den Apidog-Skill zu Ihrem Agenten hinzu:

npm install -g apidog-cli@latest
apidog auth login --with-token <YOUR_TOKEN>
npx -y skills add https://apidog.com   # pick your agent when prompted
Enter fullscreen mode Exit fullscreen mode

Dann geben Sie Claude Code, Codex oder Cursor einen Prompt:

In Apidog project <projectId>, add a POST https://api.openai.com/v1/responses
endpoint that sends {{model}}, reasoning.effort = {{effort}} and my test prompt.
Create a test case that asserts status 200 and saves latency,
usage.output_tokens and usage.output_tokens_details.reasoning_tokens.
Add a test data set with effort = low, medium, high, xhigh, run the case
once per row against environment <envId>, and give me a table of
latency, tokens and estimated cost per effort.
Enter fullscreen mode Exit fullscreen mode

Der Agent liest jedes Payload-Schema, validiert dessen JSON und schreibt dann:

apidog cli-schema get endpoint-create
apidog cli-schema validate endpoint-create --file endpoint.json
apidog endpoint create --project <projectId> --file endpoint.json

apidog test-case category --project <projectId>
apidog cli-schema validate test-case-create --file case.json
apidog test-case create --project <projectId> --file case.json

apidog cli-schema validate test-data-create --file efforts.json
apidog test-data create --project <projectId> --file efforts.json

apidog run --test-case <caseId> --project <projectId> -e <envId> \
  -d <testDataId> -r cli,json --out-dir ./effort-runs
Enter fullscreen mode Exit fullscreen mode

Das Flag -d speist pro Datenzeile eine Iteration ein, und -r cli,json liefert dem Agenten einen JSON-Bericht, aus dem er die Tabelle erstellen kann. Fügen Sie --upload-report hinzu, wenn Sie die Läufe anschließend in der Apidog-App durchsehen möchten. Die apidog run command reference listet jedes Flag auf, und der Claude Code setup guide behandelt die Agentenseite.

Führen Sie es mit fünf oder zehn Ihrer echten Prompts aus, nicht mit einem. LifeVal mittelt über 169 Aufgaben aus gutem Grund: Ein einzelner Prompt sagt Ihnen mehr über die Varianz als über den Aufwand.

Sollten Sie LifeVal bei der Modellauswahl vertrauen?

Nutzen Sie es für die Richtung, nicht für Entscheidungen. LifeVal sagt Ihnen drei Dinge, mit denen Sie etwas anfangen können: Die Modelle von OpenAI wurden zwischen Dezember 2025 und März 2026 deutlich besser bei mehrstufigen Alltagsaufgaben, die Zugewinne seither sind gering, und Reasoning-Aufwand über high hinaus zahlt sich bei dieser Art von Arbeit selten aus.

Was es Ihnen nicht sagen kann: wie ein Nicht-OpenAI-Modell abschneiden würde, wie Ihre Aufgaben im Vergleich zu den 169 von OpenAI aussehen oder was der Bewerter belohnt. Dafür führen Sie Ihren eigenen Aufwands-Sweep durch, wie oben beschrieben, und vergleichen die Zahlen, die Sie sehen können. Unser GPT-6 Astra Praxistest ist ein Ausgangspunkt für die Art von Checks, die es wert sind, durchgeführt zu werden.

FAQ

Wofür steht LifeVal?

OpenAI schlüsselt den Namen auf der Seite nicht auf. Es ist eine Evaluation („Val") von Alltagsaufgaben („Life"): 169 agentische Szenarien aus den Bereichen Pflege und Betreuung, Gesundheit, Bildung, Haushaltsverwaltung, persönliche Finanzen, Einkaufen und staatliche Dienstleistungen.

Wie hoch ist der LifeVal-Score von GPT-6 Astra?

80,6 % durchschnittlicher Reward bei xhigh-Aufwand, der Einstellung, die OpenAI im Astra-Launch-Blog verwendet hat. Bei max-Aufwand erreicht Astra 82,5 %, und bei high erreicht es 80,7 %.

Kann ich LifeVal selbst ausführen?

Nein. OpenAI hat das Aufgabenset, die Bewertungsrubriken und den Bewerter nicht veröffentlicht. Sie können seine Aufwand-gegen-Kosten-Analyse mit einer Test-Harness wie Apidog CLI auf Ihren eigenen Prompts annähern, aber Sie können die LifeVal-Punktzahlen nicht reproduzieren.

Enthält LifeVal Claude oder Gemini?

Nein. Beide Diagramme enthalten nur OpenAI-Modelle, von GPT-5.2 bis GPT-6 Astra. GPT-6.1 Sol und GPT-6.1 Terra fehlen ebenfalls.

Ist die Kostenspalte von LifeVal in Dollar?

OpenAI bezeichnet sie als API-Kosten, nennt aber nicht die Einheit. Nutzen Sie sie, um Einstellungen miteinander zu vergleichen, zum Beispiel GPT-5.6 max bei 9,65 gegenüber Astra max bei 20,04, und nicht als Dollar-Betrag pro Aufgabe.

Welchen Reasoning-Aufwand sollte ich für alltägliche Agentenaufgaben verwenden?

Bei LifeVal erfassen medium oder high den größten Teil des Gewinns. GPT-6 Astra erreicht 80,7 % bei high und 80,6 % bei xhigh, also testen Sie medium und high an Ihren eigenen Aufgaben, bevor Sie für mehr bezahlen.

Top comments (0)