ModelVerdict

Vergleich

GPT-6 Sol vs. Mistral Medium 3.5

Dieselben Dokumente, derselbe Prompt: wo welches Modell richtig liegt, was es wirklich kostet und wie schnell es antwortet.

Auf einen Blick

Aufgabe · DokumenteDeutschEnglisch (USA)TschechischSpanischFranzösisch
Rechnungsextraktion100,0 % / 97,4 %99,9 % / 97,8 %99,9 % / 93,5 %99,2 % / 97,0 %99,9 % / 98,2 %
E-Mail-Triage98,2 % / 92,7 %99,0 % / 94,9 %99,0 % / 94,5 %——
Erkennung personenbezogener Daten99,7 % / 100,0 %99,7 % / 99,7 %99,7 % / 99,8 %——
Vertragsklauseln100,0 % / 97,1 %100,0 % / 98,1 %100,0 % / 100,0 %——

Richtige Felder: GPT-6 Sol / Mistral Medium 3.5; das bessere fett. Klicken Sie auf eine Zelle für Details.

Rechnungsextraktion · Deutsch (150 Dokumente)

GPT-6 Sol ist um 2,6 Pp. genauer. Mistral Medium 3.5 ist 2,3× günstiger.

KennzahlGPT-6 SolMistral Medium 3.5
Richtige Felder100,0 %97,4 %
Fehlerfreie Dokumente99 %75 %
Pro 1.000 Dokumente9,80 €4,34 €
Zu korrigieren / 1.0007253
Tempo (Median)4,9 Sek.2,5 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGPT-6 SolMistral Medium 3.5
Lieferant100,0 %97,3 %
Lieferanten-ID (EIN, IČO…)100,0 %98,7 %
USt-IdNr.100,0 %96,0 %
Rechnungsnummer100,0 %100,0 %
Zahlungsreferenz100,0 %92,7 %
Rechnungsdatum100,0 %98,0 %
Leistungsdatum100,0 %90,7 %
Fälligkeitsdatum100,0 %97,3 %
Netto nach Steuersatz100,0 %98,0 %
Steuer nach Steuersatz100,0 %100,0 %
Gesamtbetrag100,0 %100,0 %
Währung100,0 %100,0 %
Bankverbindung99,3 %97,3 %

Dokumente, bei denen sie sich unterscheiden

Rechnungsextraktion · Englisch (USA) (150 Dokumente)

GPT-6 Sol ist um 2,2 Pp. genauer. Mistral Medium 3.5 ist 2,2× günstiger.

KennzahlGPT-6 SolMistral Medium 3.5
Richtige Felder99,9 %97,8 %
Fehlerfreie Dokumente99 %79 %
Pro 1.000 Dokumente8,88 €4,02 €
Zu korrigieren / 1.0007207
Tempo (Median)4,1 Sek.2,3 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGPT-6 SolMistral Medium 3.5
Lieferant100,0 %100,0 %
Lieferanten-ID (EIN, IČO…)100,0 %100,0 %
Rechnungsnummer100,0 %100,0 %
Zahlungsreferenz100,0 %94,7 %
Rechnungsdatum100,0 %98,7 %
Fälligkeitsdatum100,0 %99,3 %
Netto nach Steuersatz100,0 %88,0 %
Steuer nach Steuersatz100,0 %98,7 %
Gesamtbetrag100,0 %100,0 %
Währung100,0 %100,0 %
Bankverbindung99,3 %96,0 %

Dokumente, bei denen sie sich unterscheiden

Rechnungsextraktion · Tschechisch (150 Dokumente)

GPT-6 Sol ist um 6,4 Pp. genauer. Mistral Medium 3.5 ist 2,2× günstiger.

KennzahlGPT-6 SolMistral Medium 3.5
Richtige Felder99,9 %93,5 %
Fehlerfreie Dokumente99 %63 %
Pro 1.000 Dokumente9,31 €4,31 €
Zu korrigieren / 1.00013367
Tempo (Median)3,9 Sek.2,6 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGPT-6 SolMistral Medium 3.5
Lieferant99,3 %90,0 %
Lieferanten-ID (EIN, IČO…)100,0 %87,3 %
USt-IdNr.100,0 %85,3 %
Rechnungsnummer100,0 %99,3 %
Zahlungsreferenz99,3 %95,3 %
Rechnungsdatum100,0 %88,7 %
Leistungsdatum100,0 %86,7 %
Fälligkeitsdatum100,0 %90,7 %
Netto nach Steuersatz100,0 %99,3 %
Steuer nach Steuersatz100,0 %98,7 %
Gesamtbetrag100,0 %100,0 %
Währung100,0 %100,0 %
Bankverbindung100,0 %94,0 %

Dokumente, bei denen sie sich unterscheiden

Rechnungsextraktion · Spanisch (100 Dokumente)

GPT-6 Sol ist um 2,2 Pp. genauer. Mistral Medium 3.5 ist 2,3× günstiger.

KennzahlGPT-6 SolMistral Medium 3.5
Richtige Felder99,2 %97,0 %
Fehlerfreie Dokumente89 %67 %
Pro 1.000 Dokumente9,90 €4,37 €
Zu korrigieren / 1.000110330
Tempo (Median)5,7 Sek.2,5 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGPT-6 SolMistral Medium 3.5
Lieferant98,0 %99,0 %
Lieferanten-ID (EIN, IČO…)100,0 %100,0 %
USt-IdNr.100,0 %94,0 %
Rechnungsnummer100,0 %100,0 %
Zahlungsreferenz100,0 %93,0 %
Rechnungsdatum100,0 %100,0 %
Leistungsdatum100,0 %93,0 %
Fälligkeitsdatum100,0 %97,0 %
Netto nach Steuersatz92,0 %85,0 %
Steuer nach Steuersatz100,0 %100,0 %
Gesamtbetrag100,0 %100,0 %
Währung100,0 %100,0 %
Bankverbindung99,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Rechnungsextraktion · Französisch (100 Dokumente)

GPT-6 Sol ist um 1,8 Pp. genauer. Mistral Medium 3.5 ist 2,3× günstiger.

KennzahlGPT-6 SolMistral Medium 3.5
Richtige Felder99,9 %98,2 %
Fehlerfreie Dokumente99 %81 %
Pro 1.000 Dokumente10,17 €4,42 €
Zu korrigieren / 1.00010190
Tempo (Median)5,9 Sek.2,6 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGPT-6 SolMistral Medium 3.5
Lieferant100,0 %99,0 %
Lieferanten-ID (EIN, IČO…)100,0 %99,0 %
USt-IdNr.100,0 %98,0 %
Rechnungsnummer100,0 %100,0 %
Zahlungsreferenz99,0 %94,0 %
Rechnungsdatum100,0 %100,0 %
Leistungsdatum100,0 %100,0 %
Fälligkeitsdatum100,0 %100,0 %
Netto nach Steuersatz100,0 %95,0 %
Steuer nach Steuersatz100,0 %98,0 %
Gesamtbetrag100,0 %99,0 %
Währung100,0 %96,0 %
Bankverbindung100,0 %98,0 %

Dokumente, bei denen sie sich unterscheiden

E-Mail-Triage · Deutsch (150 Dokumente)

GPT-6 Sol ist um 5,5 Pp. genauer. Mistral Medium 3.5 ist 1,5× günstiger.

KennzahlGPT-6 SolMistral Medium 3.5
Richtige Felder98,2 %92,7 %
Fehlerfreie Dokumente84 %48 %
Pro 1.000 Dokumente2,51 €1,63 €
Zu korrigieren / 1.000160520
Tempo (Median)2,9 Sek.0,8 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGPT-6 SolMistral Medium 3.5
Kategorie100,0 %100,0 %
Priorität97,3 %56,7 %
Stimmung86,7 %78,0 %
Kundenname100,0 %100,0 %
Bestellnummer100,0 %100,0 %
Rechnungsnummer100,0 %100,0 %
Betrag100,0 %100,0 %
Währung100,0 %100,0 %
Frist100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

E-Mail-Triage · Englisch (USA) (150 Dokumente)

GPT-6 Sol ist um 4,1 Pp. genauer. Mistral Medium 3.5 ist 1,7× günstiger.

KennzahlGPT-6 SolMistral Medium 3.5
Richtige Felder99,0 %94,9 %
Fehlerfreie Dokumente92 %57 %
Pro 1.000 Dokumente2,24 €1,36 €
Zu korrigieren / 1.00080427
Tempo (Median)2,8 Sek.0,8 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGPT-6 SolMistral Medium 3.5
Kategorie100,0 %100,0 %
Priorität98,0 %63,3 %
Stimmung93,3 %90,7 %
Kundenname100,0 %100,0 %
Bestellnummer100,0 %100,0 %
Rechnungsnummer100,0 %100,0 %
Betrag100,0 %100,0 %
Währung100,0 %100,0 %
Frist100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

  • Cody Baldwin · E-Mail · GPT-6 Sol 9/9, Mistral Medium 3.5 7/9
  • Danielle Little · E-Mail · GPT-6 Sol 9/9, Mistral Medium 3.5 7/9
  • Russell Bates · E-Mail · GPT-6 Sol 9/9, Mistral Medium 3.5 8/9
  • Kyle Schwartz · E-Mail · GPT-6 Sol 9/9, Mistral Medium 3.5 8/9
  • James Arnold · E-Mail · GPT-6 Sol 9/9, Mistral Medium 3.5 8/9
  • Gene Everett · E-Mail · GPT-6 Sol 9/9, Mistral Medium 3.5 8/9
  • Laurie Knight · E-Mail · GPT-6 Sol 9/9, Mistral Medium 3.5 8/9
  • Dale Sanchez · E-Mail · GPT-6 Sol 9/9, Mistral Medium 3.5 8/9

E-Mail-Triage · Tschechisch (150 Dokumente)

GPT-6 Sol ist um 4,4 Pp. genauer. Mistral Medium 3.5 ist 1,6× günstiger.

KennzahlGPT-6 SolMistral Medium 3.5
Richtige Felder99,0 %94,5 %
Fehlerfreie Dokumente91 %55 %
Pro 1.000 Dokumente2,94 €1,79 €
Zu korrigieren / 1.00093447
Tempo (Median)2,8 Sek.0,8 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGPT-6 SolMistral Medium 3.5
Kategorie100,0 %100,0 %
Priorität98,0 %63,3 %
Stimmung92,7 %87,3 %
Kundenname100,0 %100,0 %
Bestellnummer100,0 %100,0 %
Rechnungsnummer100,0 %100,0 %
Betrag100,0 %100,0 %
Währung100,0 %100,0 %
Frist100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Erkennung personenbezogener Daten · Deutsch (150 Dokumente)

Mistral Medium 3.5 ist um 0,3 Pp. genauer. Mistral Medium 3.5 ist 1,5× günstiger.

KennzahlGPT-6 SolMistral Medium 3.5
Richtige Felder99,7 %100,0 %
Fehlerfreie Dokumente98 %100 %
Pro 1.000 Dokumente1,96 €1,27 €
Zu korrigieren / 1.000200
Tempo (Median)2,6 Sek.0,9 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGPT-6 SolMistral Medium 3.5
Namen100,0 %100,0 %
E-Mail-Adressen100,0 %100,0 %
Telefonnummern100,0 %100,0 %
Adressen98,0 %100,0 %
Geburtsdaten100,0 %100,0 %
Identifikationsnummern100,0 %100,0 %
Bankkonten100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Beide Modelle hatten bei allen Beispieldokumenten gleich viele Felder richtig.

Erkennung personenbezogener Daten · Englisch (USA) (150 Dokumente)

Beide sind gleich genau. Mistral Medium 3.5 ist 1,8× günstiger.

KennzahlGPT-6 SolMistral Medium 3.5
Richtige Felder99,7 %99,7 %
Fehlerfreie Dokumente98 %98 %
Pro 1.000 Dokumente1,92 €1,06 €
Zu korrigieren / 1.0002020
Tempo (Median)2,6 Sek.0,8 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGPT-6 SolMistral Medium 3.5
Namen100,0 %99,3 %
E-Mail-Adressen100,0 %100,0 %
Telefonnummern100,0 %100,0 %
Adressen98,0 %98,7 %
Geburtsdaten100,0 %100,0 %
Identifikationsnummern100,0 %100,0 %
Bankkonten100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Erkennung personenbezogener Daten · Tschechisch (150 Dokumente)

Mistral Medium 3.5 ist um 0,1 Pp. genauer. Mistral Medium 3.5 ist 1,6× günstiger.

KennzahlGPT-6 SolMistral Medium 3.5
Richtige Felder99,7 %99,8 %
Fehlerfreie Dokumente98 %99 %
Pro 1.000 Dokumente2,04 €1,29 €
Zu korrigieren / 1.0002013
Tempo (Median)2,5 Sek.0,8 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGPT-6 SolMistral Medium 3.5
Namen100,0 %98,7 %
E-Mail-Adressen100,0 %100,0 %
Telefonnummern100,0 %100,0 %
Adressen98,0 %100,0 %
Geburtsdaten100,0 %100,0 %
Identifikationsnummern100,0 %100,0 %
Bankkonten100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Vertragsklauseln · Deutsch (150 Dokumente)

GPT-6 Sol ist um 2,9 Pp. genauer. Mistral Medium 3.5 ist 1,6× günstiger.

KennzahlGPT-6 SolMistral Medium 3.5
Richtige Felder100,0 %97,1 %
Fehlerfreie Dokumente100 %75 %
Pro 1.000 Dokumente4,01 €2,54 €
Zu korrigieren / 1.0000247
Tempo (Median)2,9 Sek.1,2 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGPT-6 SolMistral Medium 3.5
Auftragnehmer100,0 %100,0 %
ID Auftragnehmer100,0 %82,0 %
Auftraggeber100,0 %100,0 %
ID Auftraggeber100,0 %80,7 %
Vertragsart100,0 %100,0 %
Preis (netto)100,0 %100,0 %
Währung100,0 %100,0 %
Abrechnungszeitraum100,0 %100,0 %
Wirksam ab100,0 %100,0 %
Vertragsende100,0 %100,0 %
Kündigungsfrist (Monate)100,0 %100,0 %
Verzugsstrafe (% pro Tag)100,0 %100,0 %
Anwendbares Recht100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Vertragsklauseln · Englisch (USA) (150 Dokumente)

GPT-6 Sol ist um 1,9 Pp. genauer. Mistral Medium 3.5 ist 1,4× günstiger.

KennzahlGPT-6 SolMistral Medium 3.5
Richtige Felder100,0 %98,1 %
Fehlerfreie Dokumente100 %87 %
Pro 1.000 Dokumente3,06 €2,16 €
Zu korrigieren / 1.0000127
Tempo (Median)2,5 Sek.1,1 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGPT-6 SolMistral Medium 3.5
Auftragnehmer100,0 %87,3 %
ID Auftragnehmer100,0 %100,0 %
Auftraggeber100,0 %88,7 %
ID Auftraggeber100,0 %99,3 %
Vertragsart100,0 %100,0 %
Preis (netto)100,0 %100,0 %
Währung100,0 %100,0 %
Abrechnungszeitraum100,0 %100,0 %
Wirksam ab100,0 %100,0 %
Vertragsende100,0 %100,0 %
Kündigungsfrist (Monate)100,0 %100,0 %
Verzugsstrafe (% pro Tag)100,0 %100,0 %
Anwendbares Recht100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Vertragsklauseln · Tschechisch (150 Dokumente)

Beide sind gleich genau. Mistral Medium 3.5 ist 1,5× günstiger.

KennzahlGPT-6 SolMistral Medium 3.5
Richtige Felder100,0 %100,0 %
Fehlerfreie Dokumente100 %100 %
Pro 1.000 Dokumente4,25 €2,81 €
Zu korrigieren / 1.00000
Tempo (Median)2,0 Sek.1,2 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGPT-6 SolMistral Medium 3.5
Auftragnehmer100,0 %100,0 %
ID Auftragnehmer100,0 %100,0 %
Auftraggeber100,0 %100,0 %
ID Auftraggeber100,0 %100,0 %
Vertragsart100,0 %100,0 %
Preis (netto)100,0 %100,0 %
Währung100,0 %100,0 %
Abrechnungszeitraum100,0 %100,0 %
Wirksam ab100,0 %100,0 %
Vertragsende100,0 %100,0 %
Kündigungsfrist (Monate)100,0 %100,0 %
Verzugsstrafe (% pro Tag)100,0 %100,0 %
Anwendbares Recht100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Beide Modelle hatten bei allen Beispieldokumenten gleich viele Felder richtig.