Mercor
Monatliche Besuche
14.164.192
2026-10
Monatliches Wachstum +20,4 %

Mercor - Expertenbasierte Evaluationen und Humandaten für KI

Mercor vermittelt Unternehmen und KI-Laboren Fachexperten, Evaluationssuiten, Benchmarks und Humandatenservices. Die Evaluationen prüfen Agenten anhand realer Arbeitsabläufe mit von Experten erstellten Aufgaben und Bewertungsrastern. Unternehmen können außerdem Abläufe erfassen, KI mit eingebetteten Ingenieuren und Integrationen bereitstellen und Geschäftsdaten aus Arbeitsabläufen monetarisieren, wobei sie die Freigabe kontrollieren.

Website besuchenDieses Produkt aktualisieren

0Aufrufe

Funktionen

Expertenbasierte Evaluationen

Erstellt wiederholbare Tests und Bewertungsraster, um Leistung und Betriebskosten eines KI-Agenten zu messen. Experten überführen Kundenabläufe in Aufgaben und bewerten Agenten anhand festgelegter Kriterien; Tests laufen live mit realem Traffic oder offline in simulierten Umgebungen.

APEX-Benchmarks

Stellt Benchmark-Aufgaben und Ranglisten bereit, um KI-Modelle bei beruflichen Tätigkeiten zu bewerten. Die Benchmarks decken unter anderem Buchhaltung, Softwareentwicklung, Recht und Medizin ab und können reale Werkzeuge, Arbeitsartefakte und Expertenbewertungen nutzen.

Humandaten und Expertennetzwerk

Vermittelt Fachexperten und unterstützt menschliche Evaluation, KI-Training und Datenarbeit. Unternehmen können Experten für Evaluationen und Post-Training einbinden; Datendienste umfassen die automatische Maskierung von mehr als 60 Kategorien sensibler Kennungen und die Kontrolle der Organisation über freigegebene Daten.

Bereitstellung von Enterprise-KI

Unterstützt Unternehmen dabei, KI-Potenziale zu erkennen und produktive KI für Arbeitsabläufe bereitzustellen. Mercor erfasst Abläufe und institutionelles Wissen, bindet Forward Deployed Engineers ein und bietet Integrationen sowie Werkzeuge für Evaluation und laufende Optimierung.

Preise

Die bereitgestellten Mercor-Seiten veröffentlichen weder Planpreise noch eine standardisierte Tarifliste. Enterprise-Evaluationen werden im Gespräch eingegrenzt; aufgabenbasierte Evaluationen werden pro Aufgabe statt pro Expertenkopf abgerechnet.

Anwendungsfälle

KI-Agenten anhand realer Arbeit bewerten

Wenn ein Unternehmen wissen muss, ob ein Agent seine eigenen Aufgaben bewältigt, erstellt Mercor eine wiederholbare Suite aus Expertenaufgaben und Bewertungsrastern. Teams testen bereitgestellte Agenten mit realem Traffic oder vergleichen Modelle offline in Simulationen und betrachten Qualität sowie Kosten.

Modell und Agentenkonfiguration auswählen

Beim Vergleich von Modellen oder Agentenkonfigurationen für einen Arbeitsablauf nutzen Teams Evaluationsergebnisse und die Preis-Leistungs-Frontier. So lässt sich das kostengünstigste Modell bestimmen, das die Qualitätsanforderung erfüllt, sowie erkennen, welche Werkzeuge oder welcher Kontext helfen.

Geschäftsdaten aus Abläufen monetarisieren

Möchte eine Organisation mit Daten aus bestehenden Arbeitsabläufen Einnahmen erzielen, bietet Mercor Datenmonetarisierungsdienste an. Die automatische Anonymisierung maskiert mehr als 60 Kategorien sensibler Kennungen; die Organisation kontrolliert, welche Daten freigegeben werden.

Einschränkungen

  • Die angegebene Lieferzeit für eine Evaluation beträgt vier bis sechs Wochen ab dem ersten Gespräch bis zur wiederverwendbaren Suite; die genaue Dauer hängt vom Auftrag ab.

  • Production Rubrics bewerten einen bereitgestellten Agenten mit Live-Traffic; APEX-Benchmarks laufen offline in von Experten erstellten Simulationen.

  • Organisationen kontrollieren bei der Datenmonetarisierung die Freigabe; Angaben zu Lizenzbedingungen oder Auszahlungsbeträgen fehlen auf den Seiten.

Zielgruppen

  • Unternehmensteams, die produktive KI-Agenten entwickeln oder bewerten

  • KI-Forschungslabore mit Bedarf an Humandaten, Evaluation oder Post-Training

  • Fachexperten, die bezahlte KI-Evaluations-, Trainings- oder Datenarbeit suchen

Häufige Fragen

Was misst eine Evaluation?

Eine Evaluation prüft anhand wiederholbarer Aufgaben, Bewertungsraster und Punktzahlen, was ein KI-Agent in einem bestimmten Arbeitsablauf leisten kann. Laut Mercor zeigen die Ergebnisse, ob der Agent funktioniert, welches Modell oder welche Konfiguration passt und welche Kosten entstehen.

Kann Mercor die Betriebskosten eines Agenten messen?

Ja. Mercor beschreibt eine Preis-Leistungs-Frontier für den jeweiligen Arbeitsablauf. Sie hilft, das günstigste Modell zu wählen, das die Qualitätsanforderung erfüllt, und Reasoning sowie Kontext passend zu dimensionieren.

Wie unterscheiden sich Production Rubrics und APEX-Benchmarks?

Production Rubrics laufen live mit einem bereitgestellten Agenten und echtem Traffic. APEX-Benchmarks laufen offline in von Experten erstellten Simulationen und bilden einen festen, wiederholbaren Vergleich von Modellen und Konfigurationen vor der Bereitstellung.

Wie lange dauert der Aufbau einer Evaluationssuite?

Mercor nennt vier bis sechs Wochen ab dem ersten Gespräch bis zu einer wiederverwendbaren Evaluationssuite. Die Seite zu Enterprise-Evaluationen beschreibt die Lieferung außerdem als weniger als sechs Wochen.

Wem gehört die Evaluationssuite nach der Lieferung?

Der Kunde behält eine wiederverwendbare Suite für sein Team und erhält nicht nur einen einmaligen Bericht.

Kann Mercor einen individuellen Benchmark erstellen?

Ja. Laut Mercor können APEX-Benchmarks für eine Domäne entwickelt werden, mit von Experten erstellten Simulationen und Aufgaben, die der Arbeit des Agenten entsprechen.

Kommentare

Bitte melde dich an, um einen Kommentar zu hinterlassen.
Noch keine Kommentare. Sei der Erste, der seine Gedanken teilt!