ModelVerdict

Vergleich

Gemma 4 31B vs. GPT-6 Luna

Dieselben Dokumente, derselbe Prompt: wo welches Modell richtig liegt, was es wirklich kostet und wie schnell es antwortet.

Auf einen Blick

Aufgabe · DokumenteDeutschEnglisch (USA)TschechischSpanischFranzösisch
Rechnungsextraktion94,9 % / 99,2 %97,6 % / 99,7 %96,1 % / 99,3 %95,4 % / 99,1 %93,6 % / 98,9 %
E-Mail-Triage95,1 % / 97,0 %96,5 % / 97,5 %97,1 % / 97,9 %——
Erkennung personenbezogener Daten99,9 % / 99,6 %99,9 % / 99,6 %99,8 % / 99,6 %——
Vertragsklauseln94,4 % / 100,0 %99,6 % / 99,8 %100,0 % / 100,0 %——

Richtige Felder: Gemma 4 31B / GPT-6 Luna; das bessere fett. Klicken Sie auf eine Zelle für Details.

Rechnungsextraktion · Deutsch (150 Dokumente)

GPT-6 Luna ist um 4,4 Pp. genauer. Gemma 4 31B ist 2,7× günstiger.

KennzahlGemma 4 31BGPT-6 Luna
Richtige Felder94,9 %99,2 %
Fehlerfreie Dokumente64 %91 %
Pro 1.000 Dokumente0,18 €0,50 €
Zu korrigieren / 1.00036087
Tempo (Median)7,7 Sek.3,7 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemma 4 31BGPT-6 Luna
Lieferant98,7 %100,0 %
Lieferanten-ID (EIN, IČO…)99,3 %98,7 %
USt-IdNr.94,0 %99,3 %
Rechnungsnummer99,3 %99,3 %
Zahlungsreferenz98,7 %100,0 %
Rechnungsdatum87,3 %98,7 %
Leistungsdatum92,0 %100,0 %
Fälligkeitsdatum90,7 %100,0 %
Netto nach Steuersatz94,7 %100,0 %
Steuer nach Steuersatz97,3 %100,0 %
Gesamtbetrag99,3 %100,0 %
Währung99,3 %100,0 %
Bankverbindung82,7 %94,0 %

Dokumente, bei denen sie sich unterscheiden

Rechnungsextraktion · Englisch (USA) (150 Dokumente)

GPT-6 Luna ist um 2,1 Pp. genauer. Gemma 4 31B ist 3× günstiger.

KennzahlGemma 4 31BGPT-6 Luna
Richtige Felder97,6 %99,7 %
Fehlerfreie Dokumente81 %97 %
Pro 1.000 Dokumente0,15 €0,47 €
Zu korrigieren / 1.00018733
Tempo (Median)8,9 Sek.3,4 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemma 4 31BGPT-6 Luna
Lieferant99,3 %100,0 %
Lieferanten-ID (EIN, IČO…)98,0 %100,0 %
Rechnungsnummer100,0 %99,3 %
Zahlungsreferenz99,3 %98,0 %
Rechnungsdatum98,7 %100,0 %
Fälligkeitsdatum98,7 %100,0 %
Netto nach Steuersatz95,3 %100,0 %
Steuer nach Steuersatz98,7 %100,0 %
Gesamtbetrag100,0 %100,0 %
Währung100,0 %100,0 %
Bankverbindung86,0 %99,3 %

Dokumente, bei denen sie sich unterscheiden

Rechnungsextraktion · Tschechisch (150 Dokumente)

GPT-6 Luna ist um 3,2 Pp. genauer. Gemma 4 31B ist 2,4× günstiger.

KennzahlGemma 4 31BGPT-6 Luna
Richtige Felder96,1 %99,3 %
Fehlerfreie Dokumente67 %93 %
Pro 1.000 Dokumente0,19 €0,46 €
Zu korrigieren / 1.00033367
Tempo (Median)10,4 Sek.3,2 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemma 4 31BGPT-6 Luna
Lieferant96,7 %95,3 %
Lieferanten-ID (EIN, IČO…)93,3 %98,7 %
USt-IdNr.96,7 %98,0 %
Rechnungsnummer100,0 %100,0 %
Zahlungsreferenz96,0 %100,0 %
Rechnungsdatum96,0 %100,0 %
Leistungsdatum95,3 %100,0 %
Fälligkeitsdatum94,0 %99,3 %
Netto nach Steuersatz98,0 %100,0 %
Steuer nach Steuersatz97,3 %100,0 %
Gesamtbetrag99,3 %100,0 %
Währung100,0 %100,0 %
Bankverbindung86,7 %99,3 %

Dokumente, bei denen sie sich unterscheiden

Rechnungsextraktion · Spanisch (87 Dokumente)

GPT-6 Luna ist um 3,7 Pp. genauer. Gemma 4 31B ist 2,7× günstiger.

KennzahlGemma 4 31BGPT-6 Luna
Richtige Felder95,4 %99,1 %
Fehlerfreie Dokumente54 %88 %
Pro 1.000 Dokumente0,19 €0,51 €
Zu korrigieren / 1.000460120
Tempo (Median)8,7 Sek.3,9 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemma 4 31BGPT-6 Luna
Lieferant95,4 %99,0 %
Lieferanten-ID (EIN, IČO…)93,1 %100,0 %
USt-IdNr.98,9 %100,0 %
Rechnungsnummer100,0 %100,0 %
Zahlungsreferenz95,4 %98,0 %
Rechnungsdatum98,9 %100,0 %
Leistungsdatum100,0 %100,0 %
Fälligkeitsdatum97,7 %100,0 %
Netto nach Steuersatz81,6 %100,0 %
Steuer nach Steuersatz100,0 %100,0 %
Gesamtbetrag100,0 %100,0 %
Währung100,0 %100,0 %
Bankverbindung79,3 %91,0 %

Dokumente, bei denen sie sich unterscheiden

Rechnungsextraktion · Französisch (87 Dokumente)

GPT-6 Luna ist um 5,4 Pp. genauer. Gemma 4 31B ist 2,6× günstiger.

KennzahlGemma 4 31BGPT-6 Luna
Richtige Felder93,6 %98,9 %
Fehlerfreie Dokumente51 %86 %
Pro 1.000 Dokumente0,20 €0,52 €
Zu korrigieren / 1.000494143
Tempo (Median)7,2 Sek.3,8 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemma 4 31BGPT-6 Luna
Lieferant96,6 %99,0 %
Lieferanten-ID (EIN, IČO…)77,0 %99,0 %
USt-IdNr.95,4 %98,0 %
Rechnungsnummer97,7 %99,0 %
Zahlungsreferenz96,6 %100,0 %
Rechnungsdatum96,6 %100,0 %
Leistungsdatum94,3 %100,0 %
Fälligkeitsdatum96,6 %100,0 %
Netto nach Steuersatz93,1 %100,0 %
Steuer nach Steuersatz100,0 %100,0 %
Gesamtbetrag100,0 %100,0 %
Währung98,9 %100,0 %
Bankverbindung73,6 %90,8 %

Dokumente, bei denen sie sich unterscheiden

E-Mail-Triage · Deutsch (150 Dokumente)

GPT-6 Luna ist um 1,9 Pp. genauer.

KennzahlGemma 4 31BGPT-6 Luna
Richtige Felder95,1 %97,0 %
Fehlerfreie Dokumente62 %73 %
Pro 1.000 Dokumente0,14 €0,14 €
Zu korrigieren / 1.000380273
Tempo (Median)3,6 Sek.2,8 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemma 4 31BGPT-6 Luna
Kategorie100,0 %100,0 %
Priorität78,0 %99,3 %
Stimmung78,0 %73,3 %
Kundenname100,0 %100,0 %
Bestellnummer100,0 %100,0 %
Rechnungsnummer100,0 %100,0 %
Betrag100,0 %100,0 %
Währung100,0 %100,0 %
Frist100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

E-Mail-Triage · Englisch (USA) (150 Dokumente)

GPT-6 Luna ist um 1 Pp. genauer. Gemma 4 31B ist 1,1× günstiger.

KennzahlGemma 4 31BGPT-6 Luna
Richtige Felder96,5 %97,5 %
Fehlerfreie Dokumente72 %77 %
Pro 1.000 Dokumente0,11 €0,12 €
Zu korrigieren / 1.000280227
Tempo (Median)2,2 Sek.2,5 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemma 4 31BGPT-6 Luna
Kategorie100,0 %100,0 %
Priorität85,3 %98,0 %
Stimmung83,3 %79,3 %
Kundenname100,0 %100,0 %
Bestellnummer100,0 %100,0 %
Rechnungsnummer100,0 %100,0 %
Betrag100,0 %100,0 %
Währung100,0 %100,0 %
Frist100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

E-Mail-Triage · Tschechisch (150 Dokumente)

GPT-6 Luna ist um 0,8 Pp. genauer. Gemma 4 31B ist 1,1× günstiger.

KennzahlGemma 4 31BGPT-6 Luna
Richtige Felder97,1 %97,9 %
Fehlerfreie Dokumente75 %81 %
Pro 1.000 Dokumente0,15 €0,16 €
Zu korrigieren / 1.000253187
Tempo (Median)2,5 Sek.2,6 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemma 4 31BGPT-6 Luna
Kategorie100,0 %100,0 %
Priorität85,3 %98,7 %
Stimmung88,7 %82,7 %
Kundenname100,0 %100,0 %
Bestellnummer100,0 %100,0 %
Rechnungsnummer100,0 %100,0 %
Betrag100,0 %100,0 %
Währung100,0 %100,0 %
Frist100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Erkennung personenbezogener Daten · Deutsch (150 Dokumente)

Gemma 4 31B ist um 0,3 Pp. genauer. Gemma 4 31B ist 1,2× günstiger.

KennzahlGemma 4 31BGPT-6 Luna
Richtige Felder99,9 %99,6 %
Fehlerfreie Dokumente99 %97 %
Pro 1.000 Dokumente0,09 €0,11 €
Zu korrigieren / 1.000727
Tempo (Median)1,9 Sek.2,2 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemma 4 31BGPT-6 Luna
Namen100,0 %100,0 %
E-Mail-Adressen100,0 %100,0 %
Telefonnummern100,0 %100,0 %
Adressen99,3 %97,3 %
Geburtsdaten100,0 %100,0 %
Identifikationsnummern100,0 %100,0 %
Bankkonten100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Beide Modelle hatten bei allen Beispieldokumenten gleich viele Felder richtig.

Erkennung personenbezogener Daten · Englisch (USA) (150 Dokumente)

Gemma 4 31B ist um 0,3 Pp. genauer. Gemma 4 31B ist 1,3× günstiger.

KennzahlGemma 4 31BGPT-6 Luna
Richtige Felder99,9 %99,6 %
Fehlerfreie Dokumente99 %97 %
Pro 1.000 Dokumente0,08 €0,10 €
Zu korrigieren / 1.000727
Tempo (Median)2,4 Sek.1,8 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemma 4 31BGPT-6 Luna
Namen100,0 %98,7 %
E-Mail-Adressen100,0 %100,0 %
Telefonnummern100,0 %100,0 %
Adressen99,3 %98,7 %
Geburtsdaten100,0 %100,0 %
Identifikationsnummern100,0 %100,0 %
Bankkonten100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Erkennung personenbezogener Daten · Tschechisch (150 Dokumente)

Gemma 4 31B ist um 0,2 Pp. genauer.

KennzahlGemma 4 31BGPT-6 Luna
Richtige Felder99,8 %99,6 %
Fehlerfreie Dokumente99 %97 %
Pro 1.000 Dokumente0,11 €0,11 €
Zu korrigieren / 1.0001327
Tempo (Median)2,9 Sek.1,8 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemma 4 31BGPT-6 Luna
Namen100,0 %100,0 %
E-Mail-Adressen100,0 %100,0 %
Telefonnummern100,0 %100,0 %
Adressen98,7 %97,3 %
Geburtsdaten100,0 %100,0 %
Identifikationsnummern100,0 %100,0 %
Bankkonten100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Vertragsklauseln · Deutsch (150 Dokumente)

GPT-6 Luna ist um 5,6 Pp. genauer. Gemma 4 31B ist 1,2× günstiger.

KennzahlGemma 4 31BGPT-6 Luna
Richtige Felder94,4 %100,0 %
Fehlerfreie Dokumente27 %100 %
Pro 1.000 Dokumente0,20 €0,24 €
Zu korrigieren / 1.0007270
Tempo (Median)2,6 Sek.3,0 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemma 4 31BGPT-6 Luna
Auftragnehmer100,0 %100,0 %
ID Auftragnehmer100,0 %100,0 %
Auftraggeber100,0 %100,0 %
ID Auftraggeber100,0 %100,0 %
Vertragsart100,0 %100,0 %
Preis (netto)100,0 %100,0 %
Währung100,0 %100,0 %
Abrechnungszeitraum100,0 %100,0 %
Wirksam ab100,0 %100,0 %
Vertragsende100,0 %100,0 %
Kündigungsfrist (Monate)100,0 %100,0 %
Verzugsstrafe (% pro Tag)27,3 %100,0 %
Anwendbares Recht100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Vertragsklauseln · Englisch (USA) (150 Dokumente)

GPT-6 Luna ist um 0,2 Pp. genauer. Gemma 4 31B ist 1,1× günstiger.

KennzahlGemma 4 31BGPT-6 Luna
Richtige Felder99,6 %99,8 %
Fehlerfreie Dokumente97 %99 %
Pro 1.000 Dokumente0,17 €0,18 €
Zu korrigieren / 1.0002713
Tempo (Median)2,5 Sek.2,7 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemma 4 31BGPT-6 Luna
Auftragnehmer98,0 %98,7 %
ID Auftragnehmer100,0 %100,0 %
Auftraggeber98,0 %98,7 %
ID Auftraggeber100,0 %100,0 %
Vertragsart100,0 %100,0 %
Preis (netto)100,0 %100,0 %
Währung100,0 %100,0 %
Abrechnungszeitraum100,0 %100,0 %
Wirksam ab99,3 %100,0 %
Vertragsende100,0 %100,0 %
Kündigungsfrist (Monate)100,0 %100,0 %
Verzugsstrafe (% pro Tag)100,0 %100,0 %
Anwendbares Recht100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Vertragsklauseln · Tschechisch (150 Dokumente)

Beide sind gleich genau. Gemma 4 31B ist 1,1× günstiger.

KennzahlGemma 4 31BGPT-6 Luna
Richtige Felder100,0 %100,0 %
Fehlerfreie Dokumente99 %100 %
Pro 1.000 Dokumente0,23 €0,25 €
Zu korrigieren / 1.00070
Tempo (Median)6,0 Sek.2,6 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemma 4 31BGPT-6 Luna
Auftragnehmer100,0 %100,0 %
ID Auftragnehmer100,0 %100,0 %
Auftraggeber100,0 %100,0 %
ID Auftraggeber100,0 %100,0 %
Vertragsart100,0 %100,0 %
Preis (netto)100,0 %100,0 %
Währung100,0 %100,0 %
Abrechnungszeitraum100,0 %100,0 %
Wirksam ab99,3 %100,0 %
Vertragsende100,0 %100,0 %
Kündigungsfrist (Monate)100,0 %100,0 %
Verzugsstrafe (% pro Tag)100,0 %100,0 %
Anwendbares Recht100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden