Braintrust KI-Funktionen, Kosten und Datenschutz (Oktober 2026)

Braintrust hilft KI-Produktteams, Agenten zu bewerten und zu beobachten: Sie führen vor dem Release Experimente mit Datensätzen durch, überwachen Traces im Betrieb und machen aus Fehlern neue Testfälle.

Die Plattform gliedert sich in Beobachten, Bewerten und Entdecken. Sie nimmt Agenten-Traces mit Prompts, Antworten und Werkzeugaufrufen auf, führt Experimente und Vergleiche durch, bewertet von LLMs, Code oder Menschen, und analysiert das Verhalten im Betrieb über Anfragen in natürlicher Sprache und Themenklassifizierung. Loop ist ein KI-Assistent, der bessere Prompts, Scorer und Datensätze vorschlägt. Traces lassen sich in Regressionsdatensätze umwandeln, eine MCP-Anbindung bringt Logs und Evaluierungen in die Entwicklungsumgebung. Braintrust nennt SOC 2 Type II, DSGVO- und HIPAA-Konformität und bietet hybride Bereitstellung.

• Experimente vor dem Release bewertenExperimente lassen einen Prompt oder ein Modell gegen einen Datensatz laufen und bewerten die Ergebnisse per LLM, Code oder Mensch. Teams vergleichen Versionen nebeneinander und liefern die bessere aus.
• Prompts und Scorer mit Loop verbessernLoop wertet Ergebnisse aus und erzeugt bessere Prompts, Scorer und Datensätze. Entwickler kommen bei Evaluierungen schneller voran, die sie sonst von Hand schreiben würden.
• Fehler aus dem Betrieb zu Tests machenAutomatische Mustererkennung findet wiederkehrende Probleme in Traces, fehlerhafte Traces werden zu Regressionsdatensätzen. Was im Betrieb auffiel, wird bei jedem späteren Release geprüft.

• Kostenloser Starter-Tarif mit unbegrenzten Nutzern, Projekten und Experimenten.
• Hybride Bereitstellung hält Daten im Enterprise-Tarif in der eigenen Umgebung.

Braintrust Data, Inc. hat laut Datenschutzerklärung eine Adresse in San Francisco.

Daten werden im Starter-Tarif 14 Tage, im Pro-Tarif 30 Tage aufbewahrt, planen Sie Exporte für längere Historien. Mehrverbrauch bei Daten und Bewertungen wird zusätzlich berechnet. SAML-SSO gibt es nur im Enterprise-Tarif. Fragen Sie nach Datenstandort und Auftragsverarbeitungsvertrag, beides ist nicht veröffentlicht.

Noch keine Bewertung. Erzählen Sie als Erste:r, wie Ihr Team es nutzt.

Jede Bewertung zeigt ihre Prüfstufe. Wir lesen jede vor der Veröffentlichung. So prüfen wir Bewertungen