ModelVerdict

Vergleich

Claude Sonnet 5 vs. Mistral Small 4

Dieselben Dokumente, derselbe Prompt: wo welches Modell richtig liegt, was es wirklich kostet und wie schnell es antwortet.

Auf einen Blick

Aufgabe · DokumenteDeutschEnglisch (USA)TschechischSpanischFranzösisch
Rechnungsextraktion99,0 % / 94,6 %99,8 % / 95,6 %100,0 % / 93,6 %93,6 % / 91,9 %98,7 % / 94,2 %
E-Mail-Triage97,9 % / 87,1 %98,2 % / 89,7 %98,2 % / 87,7 %——
Erkennung personenbezogener Daten99,7 % / 99,1 %99,7 % / 99,4 %98,9 % / 98,8 %——
Vertragsklauseln98,2 % / 94,0 %100,0 % / 91,5 %100,0 % / 99,0 %——

Richtige Felder: Claude Sonnet 5 / Mistral Small 4; das bessere fett. Klicken Sie auf eine Zelle für Details.

Rechnungsextraktion · Deutsch (150 Dokumente)

Claude Sonnet 5 ist um 4,3 Pp. genauer. Mistral Small 4 ist 23,9× günstiger.

KennzahlClaude Sonnet 5Mistral Small 4
Richtige Felder99,0 %94,6 %
Fehlerfreie Dokumente87 %50 %
Pro 1.000 Dokumente9,58 €0,40 €
Zu korrigieren / 1.000133500
Tempo (Median)3,8 Sek.2,0 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldClaude Sonnet 5Mistral Small 4
Lieferant100,0 %98,6 %
Lieferanten-ID (EIN, IČO…)100,0 %80,0 %
USt-IdNr.100,0 %92,9 %
Rechnungsnummer100,0 %100,0 %
Zahlungsreferenz100,0 %87,1 %
Rechnungsdatum99,3 %100,0 %
Leistungsdatum100,0 %87,9 %
Fälligkeitsdatum100,0 %98,6 %
Netto nach Steuersatz89,3 %94,3 %
Steuer nach Steuersatz100,0 %99,3 %
Gesamtbetrag100,0 %100,0 %
Währung100,0 %100,0 %
Bankverbindung98,0 %91,4 %

Dokumente, bei denen sie sich unterscheiden

Rechnungsextraktion · Englisch (USA) (150 Dokumente)

Claude Sonnet 5 ist um 4,2 Pp. genauer. Mistral Small 4 ist 21,7× günstiger.

KennzahlClaude Sonnet 5Mistral Small 4
Richtige Felder99,8 %95,6 %
Fehlerfreie Dokumente99 %58 %
Pro 1.000 Dokumente8,13 €0,37 €
Zu korrigieren / 1.00013420
Tempo (Median)3,2 Sek.1,8 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldClaude Sonnet 5Mistral Small 4
Lieferant100,0 %100,0 %
Lieferanten-ID (EIN, IČO…)100,0 %99,3 %
Rechnungsnummer100,0 %100,0 %
Zahlungsreferenz100,0 %87,3 %
Rechnungsdatum100,0 %97,3 %
Fälligkeitsdatum100,0 %98,7 %
Netto nach Steuersatz98,7 %72,0 %
Steuer nach Steuersatz99,3 %99,3 %
Gesamtbetrag100,0 %100,0 %
Währung100,0 %99,3 %
Bankverbindung100,0 %98,0 %

Dokumente, bei denen sie sich unterscheiden

Rechnungsextraktion · Tschechisch (150 Dokumente)

Claude Sonnet 5 ist um 6,4 Pp. genauer. Mistral Small 4 ist 21,5× günstiger.

KennzahlClaude Sonnet 5Mistral Small 4
Richtige Felder100,0 %93,6 %
Fehlerfreie Dokumente100 %56 %
Pro 1.000 Dokumente8,66 €0,40 €
Zu korrigieren / 1.0000440
Tempo (Median)3,6 Sek.2,0 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldClaude Sonnet 5Mistral Small 4
Lieferant100,0 %91,3 %
Lieferanten-ID (EIN, IČO…)100,0 %92,7 %
USt-IdNr.100,0 %94,0 %
Rechnungsnummer100,0 %100,0 %
Zahlungsreferenz100,0 %97,3 %
Rechnungsdatum100,0 %98,0 %
Leistungsdatum100,0 %76,0 %
Fälligkeitsdatum100,0 %97,3 %
Netto nach Steuersatz100,0 %90,0 %
Steuer nach Steuersatz100,0 %94,7 %
Gesamtbetrag100,0 %98,7 %
Währung100,0 %97,3 %
Bankverbindung100,0 %90,0 %

Dokumente, bei denen sie sich unterscheiden

Rechnungsextraktion · Spanisch (100 Dokumente)

Claude Sonnet 5 ist um 1,7 Pp. genauer. Mistral Small 4 ist 26,7× günstiger.

KennzahlClaude Sonnet 5Mistral Small 4
Richtige Felder93,6 %91,9 %
Fehlerfreie Dokumente77 %31 %
Pro 1.000 Dokumente10,94 €0,41 €
Zu korrigieren / 1.000230691
Tempo (Median)4,0 Sek.2,2 Sek.
Gültige Antworten95,0 %100,0 %

Genauigkeit pro Feld

FeldClaude Sonnet 5Mistral Small 4
Lieferant94,0 %97,6 %
Lieferanten-ID (EIN, IČO…)95,0 %98,8 %
USt-IdNr.95,0 %53,6 %
Rechnungsnummer95,0 %100,0 %
Zahlungsreferenz94,0 %88,1 %
Rechnungsdatum95,0 %100,0 %
Leistungsdatum95,0 %69,1 %
Fälligkeitsdatum95,0 %100,0 %
Netto nach Steuersatz79,0 %96,4 %
Steuer nach Steuersatz95,0 %97,6 %
Gesamtbetrag95,0 %98,8 %
Währung95,0 %100,0 %
Bankverbindung95,0 %95,2 %

Dokumente, bei denen sie sich unterscheiden

Rechnungsextraktion · Französisch (97 Dokumente)

Claude Sonnet 5 ist um 4,4 Pp. genauer. Mistral Small 4 ist 24,7× günstiger.

KennzahlClaude Sonnet 5Mistral Small 4
Richtige Felder98,7 %94,2 %
Fehlerfreie Dokumente96 %50 %
Pro 1.000 Dokumente10,14 €0,41 €
Zu korrigieren / 1.00041500
Tempo (Median)4,4 Sek.2,1 Sek.
Gültige Antworten99,0 %100,0 %

Genauigkeit pro Feld

FeldClaude Sonnet 5Mistral Small 4
Lieferant99,0 %96,1 %
Lieferanten-ID (EIN, IČO…)99,0 %93,4 %
USt-IdNr.99,0 %93,4 %
Rechnungsnummer99,0 %100,0 %
Zahlungsreferenz97,9 %85,5 %
Rechnungsdatum99,0 %100,0 %
Leistungsdatum99,0 %92,1 %
Fälligkeitsdatum99,0 %100,0 %
Netto nach Steuersatz96,9 %94,7 %
Steuer nach Steuersatz99,0 %100,0 %
Gesamtbetrag99,0 %100,0 %
Währung99,0 %94,7 %
Bankverbindung97,9 %75,0 %

Dokumente, bei denen sie sich unterscheiden

E-Mail-Triage · Deutsch (150 Dokumente)

Claude Sonnet 5 ist um 10,8 Pp. genauer. Mistral Small 4 ist 47,9× günstiger.

KennzahlClaude Sonnet 5Mistral Small 4
Richtige Felder97,9 %87,1 %
Fehlerfreie Dokumente81 %29 %
Pro 1.000 Dokumente4,70 €0,10 €
Zu korrigieren / 1.000187706
Tempo (Median)4,3 Sek.0,8 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldClaude Sonnet 5Mistral Small 4
Kategorie100,0 %100,0 %
Priorität96,0 %55,2 %
Stimmung84,7 %65,0 %
Kundenname100,0 %100,0 %
Bestellnummer100,0 %100,0 %
Rechnungsnummer100,0 %100,0 %
Betrag100,0 %96,5 %
Währung100,0 %96,5 %
Frist100,0 %70,6 %

Dokumente, bei denen sie sich unterscheiden

E-Mail-Triage · Englisch (USA) (150 Dokumente)

Claude Sonnet 5 ist um 8,5 Pp. genauer. Mistral Small 4 ist 42,2× günstiger.

KennzahlClaude Sonnet 5Mistral Small 4
Richtige Felder98,2 %89,7 %
Fehlerfreie Dokumente84 %37 %
Pro 1.000 Dokumente3,69 €0,09 €
Zu korrigieren / 1.000160627
Tempo (Median)3,8 Sek.0,8 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldClaude Sonnet 5Mistral Small 4
Kategorie100,0 %100,0 %
Priorität97,3 %61,3 %
Stimmung86,7 %71,3 %
Kundenname100,0 %100,0 %
Bestellnummer100,0 %100,0 %
Rechnungsnummer100,0 %100,0 %
Betrag100,0 %99,3 %
Währung100,0 %99,3 %
Frist100,0 %76,0 %

Dokumente, bei denen sie sich unterscheiden

  • Robert Lewis · E-Mail · Claude Sonnet 5 9/9, Mistral Small 4 6/9
  • Omar Cabrera · E-Mail · Claude Sonnet 5 9/9, Mistral Small 4 7/9
  • Russell Bates · E-Mail · Claude Sonnet 5 9/9, Mistral Small 4 7/9
  • Kyle Schwartz · E-Mail · Claude Sonnet 5 9/9, Mistral Small 4 7/9
  • Jennifer Chapman · E-Mail · Claude Sonnet 5 9/9, Mistral Small 4 7/9
  • Cody Baldwin · E-Mail · Claude Sonnet 5 9/9, Mistral Small 4 7/9
  • Dale Sanchez · E-Mail · Claude Sonnet 5 9/9, Mistral Small 4 7/9
  • Leah Douglas · E-Mail · Claude Sonnet 5 9/9, Mistral Small 4 7/9

E-Mail-Triage · Tschechisch (150 Dokumente)

Claude Sonnet 5 ist um 10,5 Pp. genauer. Mistral Small 4 ist 41,7× günstiger.

KennzahlClaude Sonnet 5Mistral Small 4
Richtige Felder98,2 %87,7 %
Fehlerfreie Dokumente83 %32 %
Pro 1.000 Dokumente4,52 €0,11 €
Zu korrigieren / 1.000167685
Tempo (Median)4,7 Sek.0,8 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldClaude Sonnet 5Mistral Small 4
Kategorie100,0 %100,0 %
Priorität96,0 %52,4 %
Stimmung87,3 %72,5 %
Kundenname100,0 %98,7 %
Bestellnummer100,0 %100,0 %
Rechnungsnummer100,0 %100,0 %
Betrag100,0 %98,0 %
Währung100,0 %98,0 %
Frist100,0 %69,8 %

Dokumente, bei denen sie sich unterscheiden

Erkennung personenbezogener Daten · Deutsch (150 Dokumente)

Claude Sonnet 5 ist um 0,6 Pp. genauer. Mistral Small 4 ist 49× günstiger.

KennzahlClaude Sonnet 5Mistral Small 4
Richtige Felder99,7 %99,1 %
Fehlerfreie Dokumente98 %94 %
Pro 1.000 Dokumente4,05 €0,08 €
Zu korrigieren / 1.0002065
Tempo (Median)3,7 Sek.0,9 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldClaude Sonnet 5Mistral Small 4
Namen98,7 %95,0 %
E-Mail-Adressen100,0 %100,0 %
Telefonnummern100,0 %100,0 %
Adressen100,0 %99,3 %
Geburtsdaten99,3 %100,0 %
Identifikationsnummern100,0 %100,0 %
Bankkonten100,0 %99,3 %

Dokumente, bei denen sie sich unterscheiden

  • Rosi Karz · Text · Claude Sonnet 5 7/7, Mistral Small 4 6/7

Erkennung personenbezogener Daten · Englisch (USA) (150 Dokumente)

Claude Sonnet 5 ist um 0,3 Pp. genauer. Mistral Small 4 ist 45,3× günstiger.

KennzahlClaude Sonnet 5Mistral Small 4
Richtige Felder99,7 %99,4 %
Fehlerfreie Dokumente98 %96 %
Pro 1.000 Dokumente3,22 €0,07 €
Zu korrigieren / 1.0002040
Tempo (Median)2,5 Sek.0,8 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldClaude Sonnet 5Mistral Small 4
Namen100,0 %97,3 %
E-Mail-Adressen100,0 %100,0 %
Telefonnummern100,0 %100,0 %
Adressen98,0 %98,7 %
Geburtsdaten100,0 %100,0 %
Identifikationsnummern100,0 %100,0 %
Bankkonten100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Erkennung personenbezogener Daten · Tschechisch (150 Dokumente)

Claude Sonnet 5 ist um 0,1 Pp. genauer. Mistral Small 4 ist 43,8× günstiger.

KennzahlClaude Sonnet 5Mistral Small 4
Richtige Felder98,9 %98,8 %
Fehlerfreie Dokumente92 %92 %
Pro 1.000 Dokumente3,73 €0,09 €
Zu korrigieren / 1.0008081
Tempo (Median)3,2 Sek.0,9 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldClaude Sonnet 5Mistral Small 4
Namen96,7 %94,0 %
E-Mail-Adressen100,0 %100,0 %
Telefonnummern100,0 %100,0 %
Adressen97,3 %98,7 %
Geburtsdaten98,0 %98,7 %
Identifikationsnummern100,0 %100,0 %
Bankkonten100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Vertragsklauseln · Deutsch (150 Dokumente)

Claude Sonnet 5 ist um 4,2 Pp. genauer. Mistral Small 4 ist 34,5× günstiger.

KennzahlClaude Sonnet 5Mistral Small 4
Richtige Felder98,2 %94,0 %
Fehlerfreie Dokumente87 %45 %
Pro 1.000 Dokumente6,54 €0,19 €
Zu korrigieren / 1.000133553
Tempo (Median)4,3 Sek.1,2 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldClaude Sonnet 5Mistral Small 4
Auftragnehmer100,0 %98,6 %
ID Auftragnehmer87,3 %62,4 %
Auftraggeber100,0 %98,6 %
ID Auftraggeber89,3 %63,1 %
Vertragsart100,0 %100,0 %
Preis (netto)100,0 %100,0 %
Währung100,0 %100,0 %
Abrechnungszeitraum100,0 %100,0 %
Wirksam ab100,0 %99,3 %
Vertragsende100,0 %100,0 %
Kündigungsfrist (Monate)100,0 %100,0 %
Verzugsstrafe (% pro Tag)100,0 %100,0 %
Anwendbares Recht100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Vertragsklauseln · Englisch (USA) (150 Dokumente)

Claude Sonnet 5 ist um 8,5 Pp. genauer. Mistral Small 4 ist 29,6× günstiger.

KennzahlClaude Sonnet 5Mistral Small 4
Richtige Felder100,0 %91,5 %
Fehlerfreie Dokumente100 %43 %
Pro 1.000 Dokumente4,64 €0,16 €
Zu korrigieren / 1.0000567
Tempo (Median)3,4 Sek.1,1 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldClaude Sonnet 5Mistral Small 4
Auftragnehmer100,0 %43,3 %
ID Auftragnehmer100,0 %100,0 %
Auftraggeber100,0 %46,7 %
ID Auftraggeber100,0 %100,0 %
Vertragsart100,0 %100,0 %
Preis (netto)100,0 %100,0 %
Währung100,0 %100,0 %
Abrechnungszeitraum100,0 %100,0 %
Wirksam ab100,0 %100,0 %
Vertragsende100,0 %100,0 %
Kündigungsfrist (Monate)100,0 %100,0 %
Verzugsstrafe (% pro Tag)100,0 %100,0 %
Anwendbares Recht100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Vertragsklauseln · Tschechisch (150 Dokumente)

Claude Sonnet 5 ist um 1 Pp. genauer. Mistral Small 4 ist 26,7× günstiger.

KennzahlClaude Sonnet 5Mistral Small 4
Richtige Felder100,0 %99,0 %
Fehlerfreie Dokumente100 %92 %
Pro 1.000 Dokumente5,57 €0,21 €
Zu korrigieren / 1.000080
Tempo (Median)3,6 Sek.1,2 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldClaude Sonnet 5Mistral Small 4
Auftragnehmer100,0 %95,3 %
ID Auftragnehmer100,0 %100,0 %
Auftraggeber100,0 %95,3 %
ID Auftraggeber100,0 %100,0 %
Vertragsart100,0 %100,0 %
Preis (netto)100,0 %100,0 %
Währung100,0 %100,0 %
Abrechnungszeitraum100,0 %100,0 %
Wirksam ab100,0 %96,7 %
Vertragsende100,0 %100,0 %
Kündigungsfrist (Monate)100,0 %100,0 %
Verzugsstrafe (% pro Tag)100,0 %100,0 %
Anwendbares Recht100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden