ModelVerdict

Vergleich

Gemini 3.5 Flash Lite vs. Gemma 4 31B

Dieselben Dokumente, derselbe Prompt: wo welches Modell richtig liegt, was es wirklich kostet und wie schnell es antwortet.

Auf einen Blick

Aufgabe · DokumenteDeutschEnglisch (USA)TschechischSpanischFranzösisch
Rechnungsextraktion100,0 % / 94,9 %99,2 % / 97,6 %99,5 % / 96,1 %98,2 % / 95,4 %98,7 % / 93,6 %
E-Mail-Triage94,7 % / 95,1 %96,3 % / 96,5 %95,8 % / 97,1 %——
Erkennung personenbezogener Daten99,6 % / 99,9 %99,5 % / 99,9 %98,1 % / 99,8 %——
Vertragsklauseln98,0 % / 94,4 %100,0 % / 99,6 %99,9 % / 100,0 %——

Richtige Felder: Gemini 3.5 Flash Lite / Gemma 4 31B; das bessere fett. Klicken Sie auf eine Zelle für Details.

Rechnungsextraktion · Deutsch (150 Dokumente)

Gemini 3.5 Flash Lite ist um 5,1 Pp. genauer. Gemma 4 31B ist 5,2× günstiger.

KennzahlGemini 3.5 Flash LiteGemma 4 31B
Richtige Felder100,0 %94,9 %
Fehlerfreie Dokumente100 %64 %
Pro 1.000 Dokumente0,95 €0,18 €
Zu korrigieren / 1.0000360
Tempo (Median)1,5 Sek.7,7 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.5 Flash LiteGemma 4 31B
Lieferant100,0 %98,7 %
Lieferanten-ID (EIN, IČO…)100,0 %99,3 %
USt-IdNr.100,0 %94,0 %
Rechnungsnummer100,0 %99,3 %
Zahlungsreferenz100,0 %98,7 %
Rechnungsdatum100,0 %87,3 %
Leistungsdatum100,0 %92,0 %
Fälligkeitsdatum100,0 %90,7 %
Netto nach Steuersatz100,0 %94,7 %
Steuer nach Steuersatz100,0 %97,3 %
Gesamtbetrag100,0 %99,3 %
Währung100,0 %99,3 %
Bankverbindung100,0 %82,7 %

Dokumente, bei denen sie sich unterscheiden

Rechnungsextraktion · Englisch (USA) (150 Dokumente)

Gemini 3.5 Flash Lite ist um 1,6 Pp. genauer. Gemma 4 31B ist 5,2× günstiger.

KennzahlGemini 3.5 Flash LiteGemma 4 31B
Richtige Felder99,2 %97,6 %
Fehlerfreie Dokumente92 %81 %
Pro 1.000 Dokumente0,80 €0,15 €
Zu korrigieren / 1.00080187
Tempo (Median)1,7 Sek.8,9 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.5 Flash LiteGemma 4 31B
Lieferant100,0 %99,3 %
Lieferanten-ID (EIN, IČO…)100,0 %98,0 %
Rechnungsnummer100,0 %100,0 %
Zahlungsreferenz96,7 %99,3 %
Rechnungsdatum97,3 %98,7 %
Fälligkeitsdatum99,3 %98,7 %
Netto nach Steuersatz98,0 %95,3 %
Steuer nach Steuersatz100,0 %98,7 %
Gesamtbetrag100,0 %100,0 %
Währung100,0 %100,0 %
Bankverbindung100,0 %86,0 %

Dokumente, bei denen sie sich unterscheiden

Rechnungsextraktion · Tschechisch (150 Dokumente)

Gemini 3.5 Flash Lite ist um 3,4 Pp. genauer. Gemma 4 31B ist 4,9× günstiger.

KennzahlGemini 3.5 Flash LiteGemma 4 31B
Richtige Felder99,5 %96,1 %
Fehlerfreie Dokumente93 %67 %
Pro 1.000 Dokumente0,95 €0,19 €
Zu korrigieren / 1.00067333
Tempo (Median)1,8 Sek.10,4 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.5 Flash LiteGemma 4 31B
Lieferant100,0 %96,7 %
Lieferanten-ID (EIN, IČO…)100,0 %93,3 %
USt-IdNr.100,0 %96,7 %
Rechnungsnummer100,0 %100,0 %
Zahlungsreferenz95,3 %96,0 %
Rechnungsdatum100,0 %96,0 %
Leistungsdatum100,0 %95,3 %
Fälligkeitsdatum100,0 %94,0 %
Netto nach Steuersatz100,0 %98,0 %
Steuer nach Steuersatz100,0 %97,3 %
Gesamtbetrag100,0 %99,3 %
Währung98,7 %100,0 %
Bankverbindung99,3 %86,7 %

Dokumente, bei denen sie sich unterscheiden

Rechnungsextraktion · Spanisch (100 Dokumente)

Gemini 3.5 Flash Lite ist um 2,8 Pp. genauer. Gemma 4 31B ist 5,1× günstiger.

KennzahlGemini 3.5 Flash LiteGemma 4 31B
Richtige Felder98,2 %95,4 %
Fehlerfreie Dokumente79 %54 %
Pro 1.000 Dokumente0,97 €0,19 €
Zu korrigieren / 1.000210460
Tempo (Median)1,6 Sek.8,7 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.5 Flash LiteGemma 4 31B
Lieferant98,0 %95,4 %
Lieferanten-ID (EIN, IČO…)100,0 %93,1 %
USt-IdNr.83,0 %98,9 %
Rechnungsnummer100,0 %100,0 %
Zahlungsreferenz99,0 %95,4 %
Rechnungsdatum99,0 %98,9 %
Leistungsdatum98,0 %100,0 %
Fälligkeitsdatum100,0 %97,7 %
Netto nach Steuersatz100,0 %81,6 %
Steuer nach Steuersatz100,0 %100,0 %
Gesamtbetrag100,0 %100,0 %
Währung100,0 %100,0 %
Bankverbindung100,0 %79,3 %

Dokumente, bei denen sie sich unterscheiden

Rechnungsextraktion · Französisch (100 Dokumente)

Gemini 3.5 Flash Lite ist um 5,1 Pp. genauer. Gemma 4 31B ist 4,8× günstiger.

KennzahlGemini 3.5 Flash LiteGemma 4 31B
Richtige Felder98,7 %93,6 %
Fehlerfreie Dokumente85 %51 %
Pro 1.000 Dokumente0,98 €0,20 €
Zu korrigieren / 1.000150494
Tempo (Median)1,5 Sek.7,2 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.5 Flash LiteGemma 4 31B
Lieferant98,0 %96,6 %
Lieferanten-ID (EIN, IČO…)100,0 %77,0 %
USt-IdNr.100,0 %95,4 %
Rechnungsnummer99,0 %97,7 %
Zahlungsreferenz91,0 %96,6 %
Rechnungsdatum98,0 %96,6 %
Leistungsdatum98,0 %94,3 %
Fälligkeitsdatum100,0 %96,6 %
Netto nach Steuersatz100,0 %93,1 %
Steuer nach Steuersatz100,0 %100,0 %
Gesamtbetrag100,0 %100,0 %
Währung100,0 %98,9 %
Bankverbindung99,0 %73,6 %

Dokumente, bei denen sie sich unterscheiden

E-Mail-Triage · Deutsch (150 Dokumente)

Gemma 4 31B ist um 0,4 Pp. genauer. Gemma 4 31B ist 3,2× günstiger.

KennzahlGemini 3.5 Flash LiteGemma 4 31B
Richtige Felder94,7 %95,1 %
Fehlerfreie Dokumente57 %62 %
Pro 1.000 Dokumente0,44 €0,14 €
Zu korrigieren / 1.000433380
Tempo (Median)0,8 Sek.3,6 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.5 Flash LiteGemma 4 31B
Kategorie100,0 %100,0 %
Priorität76,0 %78,0 %
Stimmung76,7 %78,0 %
Kundenname99,3 %100,0 %
Bestellnummer100,0 %100,0 %
Rechnungsnummer100,0 %100,0 %
Betrag100,0 %100,0 %
Währung100,0 %100,0 %
Frist100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

  • Swantje Noack · E-Mail · Gemini 3.5 Flash Lite 8/9, Gemma 4 31B 9/9
  • Alexej Sauer · E-Mail · Gemini 3.5 Flash Lite 8/9, Gemma 4 31B 7/9
  • Raymund Weiß · E-Mail · Gemini 3.5 Flash Lite 8/9, Gemma 4 31B 9/9
  • Benedikt Speer · E-Mail · Gemini 3.5 Flash Lite 9/9, Gemma 4 31B 8/9
  • Roselinde Heinz · E-Mail · Gemini 3.5 Flash Lite 9/9, Gemma 4 31B 8/9
  • Linda Bähr · E-Mail · Gemini 3.5 Flash Lite 9/9, Gemma 4 31B 8/9
  • Sibille Lehmann · E-Mail · Gemini 3.5 Flash Lite 8/9, Gemma 4 31B 9/9
  • Helen Noack · E-Mail · Gemini 3.5 Flash Lite 8/9, Gemma 4 31B 9/9

E-Mail-Triage · Englisch (USA) (150 Dokumente)

Gemma 4 31B ist um 0,2 Pp. genauer. Gemma 4 31B ist 3,5× günstiger.

KennzahlGemini 3.5 Flash LiteGemma 4 31B
Richtige Felder96,3 %96,5 %
Fehlerfreie Dokumente69 %72 %
Pro 1.000 Dokumente0,39 €0,11 €
Zu korrigieren / 1.000313280
Tempo (Median)0,7 Sek.2,2 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.5 Flash LiteGemma 4 31B
Kategorie100,0 %100,0 %
Priorität84,0 %85,3 %
Stimmung82,7 %83,3 %
Kundenname100,0 %100,0 %
Bestellnummer100,0 %100,0 %
Rechnungsnummer100,0 %100,0 %
Betrag100,0 %100,0 %
Währung100,0 %100,0 %
Frist100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

  • Daniel Stewart · E-Mail · Gemini 3.5 Flash Lite 9/9, Gemma 4 31B 7/9
  • Allison Floyd · E-Mail · Gemini 3.5 Flash Lite 9/9, Gemma 4 31B 7/9
  • Robert Lewis · E-Mail · Gemini 3.5 Flash Lite 7/9, Gemma 4 31B 9/9
  • Luke Sims · E-Mail · Gemini 3.5 Flash Lite 8/9, Gemma 4 31B 9/9
  • Russell Bates · E-Mail · Gemini 3.5 Flash Lite 8/9, Gemma 4 31B 9/9
  • Jane Rubio · E-Mail · Gemini 3.5 Flash Lite 8/9, Gemma 4 31B 9/9
  • Gene Everett · E-Mail · Gemini 3.5 Flash Lite 9/9, Gemma 4 31B 8/9
  • Jason Davis · E-Mail · Gemini 3.5 Flash Lite 9/9, Gemma 4 31B 8/9

E-Mail-Triage · Tschechisch (150 Dokumente)

Gemma 4 31B ist um 1,3 Pp. genauer. Gemma 4 31B ist 3,2× günstiger.

KennzahlGemini 3.5 Flash LiteGemma 4 31B
Richtige Felder95,8 %97,1 %
Fehlerfreie Dokumente64 %75 %
Pro 1.000 Dokumente0,47 €0,15 €
Zu korrigieren / 1.000360253
Tempo (Median)0,7 Sek.2,5 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.5 Flash LiteGemma 4 31B
Kategorie100,0 %100,0 %
Priorität80,0 %85,3 %
Stimmung84,0 %88,7 %
Kundenname98,0 %100,0 %
Bestellnummer100,0 %100,0 %
Rechnungsnummer100,0 %100,0 %
Betrag100,0 %100,0 %
Währung100,0 %100,0 %
Frist100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Erkennung personenbezogener Daten · Deutsch (150 Dokumente)

Gemma 4 31B ist um 0,3 Pp. genauer. Gemma 4 31B ist 4,5× günstiger.

KennzahlGemini 3.5 Flash LiteGemma 4 31B
Richtige Felder99,6 %99,9 %
Fehlerfreie Dokumente97 %99 %
Pro 1.000 Dokumente0,42 €0,09 €
Zu korrigieren / 1.000277
Tempo (Median)0,8 Sek.1,9 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.5 Flash LiteGemma 4 31B
Namen97,3 %100,0 %
E-Mail-Adressen100,0 %100,0 %
Telefonnummern100,0 %100,0 %
Adressen100,0 %99,3 %
Geburtsdaten100,0 %100,0 %
Identifikationsnummern100,0 %100,0 %
Bankkonten100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

  • Rosi Karz · Text · Gemini 3.5 Flash Lite 6/7, Gemma 4 31B 7/7
  • Gunnar Zorbach · Text · Gemini 3.5 Flash Lite 7/7, Gemma 4 31B 6/7
  • Fritz Rogner · Text · Gemini 3.5 Flash Lite 6/7, Gemma 4 31B 7/7

Erkennung personenbezogener Daten · Englisch (USA) (150 Dokumente)

Gemma 4 31B ist um 0,4 Pp. genauer. Gemma 4 31B ist 4,8× günstiger.

KennzahlGemini 3.5 Flash LiteGemma 4 31B
Richtige Felder99,5 %99,9 %
Fehlerfreie Dokumente97 %99 %
Pro 1.000 Dokumente0,37 €0,08 €
Zu korrigieren / 1.000277
Tempo (Median)0,8 Sek.2,4 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.5 Flash LiteGemma 4 31B
Namen100,0 %100,0 %
E-Mail-Adressen99,3 %100,0 %
Telefonnummern100,0 %100,0 %
Adressen98,7 %99,3 %
Geburtsdaten98,7 %100,0 %
Identifikationsnummern100,0 %100,0 %
Bankkonten100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Erkennung personenbezogener Daten · Tschechisch (150 Dokumente)

Gemma 4 31B ist um 1,7 Pp. genauer. Gemma 4 31B ist 3,8× günstiger.

KennzahlGemini 3.5 Flash LiteGemma 4 31B
Richtige Felder98,1 %99,8 %
Fehlerfreie Dokumente88 %99 %
Pro 1.000 Dokumente0,42 €0,11 €
Zu korrigieren / 1.00012013
Tempo (Median)0,8 Sek.2,9 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.5 Flash LiteGemma 4 31B
Namen91,3 %100,0 %
E-Mail-Adressen100,0 %100,0 %
Telefonnummern100,0 %100,0 %
Adressen99,3 %98,7 %
Geburtsdaten96,0 %100,0 %
Identifikationsnummern100,0 %100,0 %
Bankkonten100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Vertragsklauseln · Deutsch (150 Dokumente)

Gemini 3.5 Flash Lite ist um 3,6 Pp. genauer. Gemma 4 31B ist 3,6× günstiger.

KennzahlGemini 3.5 Flash LiteGemma 4 31B
Richtige Felder98,0 %94,4 %
Fehlerfreie Dokumente84 %27 %
Pro 1.000 Dokumente0,73 €0,20 €
Zu korrigieren / 1.000160727
Tempo (Median)1,0 Sek.2,6 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.5 Flash LiteGemma 4 31B
Auftragnehmer100,0 %100,0 %
ID Auftragnehmer86,0 %100,0 %
Auftraggeber100,0 %100,0 %
ID Auftraggeber88,7 %100,0 %
Vertragsart100,0 %100,0 %
Preis (netto)100,0 %100,0 %
Währung100,0 %100,0 %
Abrechnungszeitraum100,0 %100,0 %
Wirksam ab100,0 %100,0 %
Vertragsende99,3 %100,0 %
Kündigungsfrist (Monate)100,0 %100,0 %
Verzugsstrafe (% pro Tag)100,0 %27,3 %
Anwendbares Recht100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Vertragsklauseln · Englisch (USA) (150 Dokumente)

Gemini 3.5 Flash Lite ist um 0,3 Pp. genauer. Gemma 4 31B ist 3,8× günstiger.

KennzahlGemini 3.5 Flash LiteGemma 4 31B
Richtige Felder100,0 %99,6 %
Fehlerfreie Dokumente99 %97 %
Pro 1.000 Dokumente0,64 €0,17 €
Zu korrigieren / 1.000727
Tempo (Median)1,0 Sek.2,5 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.5 Flash LiteGemma 4 31B
Auftragnehmer100,0 %98,0 %
ID Auftragnehmer100,0 %100,0 %
Auftraggeber100,0 %98,0 %
ID Auftraggeber100,0 %100,0 %
Vertragsart99,3 %100,0 %
Preis (netto)100,0 %100,0 %
Währung100,0 %100,0 %
Abrechnungszeitraum100,0 %100,0 %
Wirksam ab100,0 %99,3 %
Vertragsende100,0 %100,0 %
Kündigungsfrist (Monate)100,0 %100,0 %
Verzugsstrafe (% pro Tag)100,0 %100,0 %
Anwendbares Recht100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Beide Modelle hatten bei allen Beispieldokumenten gleich viele Felder richtig.

Vertragsklauseln · Tschechisch (150 Dokumente)

Gemma 4 31B ist um 0,1 Pp. genauer. Gemma 4 31B ist 3,4× günstiger.

KennzahlGemini 3.5 Flash LiteGemma 4 31B
Richtige Felder99,9 %100,0 %
Fehlerfreie Dokumente98 %99 %
Pro 1.000 Dokumente0,78 €0,23 €
Zu korrigieren / 1.000207
Tempo (Median)0,9 Sek.6,0 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.5 Flash LiteGemma 4 31B
Auftragnehmer99,3 %100,0 %
ID Auftragnehmer100,0 %100,0 %
Auftraggeber99,3 %100,0 %
ID Auftraggeber100,0 %100,0 %
Vertragsart99,3 %100,0 %
Preis (netto)100,0 %100,0 %
Währung100,0 %100,0 %
Abrechnungszeitraum100,0 %100,0 %
Wirksam ab100,0 %99,3 %
Vertragsende100,0 %100,0 %
Kündigungsfrist (Monate)100,0 %100,0 %
Verzugsstrafe (% pro Tag)100,0 %100,0 %
Anwendbares Recht100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden