Agentisches Gemini-Video verwendet bis zu 88 % weniger Tokens – was das für KI-NAS und die private Mediensuche bedeutet

Lauren Pan ist der Gründer von ZimaSpace und der Architekt hinter der renommierten ZimaBoard-Serie. Lauren verbindet Industriedesign mit Embedded Engineeringund gründete ZimaSpace mit einer klaren Mission: die Demokratisierung der persönlichen Cloud-Computing. Er ist überzeugt, dass Hardware sowohl "hackbar" als auch schön sein sollte— und so die Kluft zwischen industriellen Servern und Konsumgütern schließt. Heute leitet er das Engineering-Team, das Werkzeuge entwickelt, die Schöpfern volle Kontrolle über ihr digitales Leben.

Gemini Agentic Video verändert Video-KI, indem das Modell entscheiden kann, welche Momente Aufmerksamkeit verdienen, anstatt ein gesamtes Video mit einer festen Abtastrate zu verarbeiten. Google berichtet, dass die getesteten Workloads bis zu 88 % weniger Token benötigen, bis zu 66 % weniger kosten und die Qualität um bis zu 7 % verbessern können. Der entscheidende Wandel besteht nicht einfach in einer günstigeren Videoanalyse: Gemini kann die Zeitleiste durchsuchen, einen vielversprechenden Moment untersuchen und ihn anschließend mit höherer Detailgenauigkeit erneut betrachten, wenn die Frage dies erfordert.

Bei einem NAS mit jahrelangen Überwachungsaufnahmen, Familienvideos, Meetings oder Creator-Archiven bedeutet das nicht, dass Gemini plötzlich die gesamte Bibliothek lokal „ansehen“ kann. Gemini läuft weiterhin in Googles Cloud. Die interessantere Architektur besteht darin, ein großes privates Archiv lokal einzugrenzen und einem multimodalen Modell anschließend nur die Clips oder Zeitbereiche zu übergeben, die eine gründlichere Untersuchung verdienen. Anders gesagt: Das Infrastrukturproblem wird zu der Umwandlung von Videos im Speichermaßstab in Kontext im Abfragemaßstab.

Was ist Gemini Agentic Video Understanding?

Gemini Agentic Video Understanding ist ein Videoverarbeitungsmodus, mit dem Gemini aktiv durch ein Video navigieren kann, anstatt die Einzelbilder in einem einzigen Durchgang mit einer festen Rate zu laden.

Google führte diese Funktion am 1. September 2026 ein. Die ursprüngliche Ankündigung zum Start bezog sich zunächst auf Gemini 3.7 Flash, 3.6 Flash und 3.5 Flash-Lite; in Googles aktueller Entwicklerdokumentation wird außerdem Gemini 3.8 Flash als Modell aufgeführt, das agentische Videoverarbeitung unterstützt.

Laut Googles Ankündigung zu Agentic Video Understanding kombiniert das Modell Schlussfolgerungen mit nativen Videowerkzeugen, um relevante Ausschnitte von Einzelbildern, Audiodaten und Transkripten zu suchen, zu durchsuchen und zu untersuchen.

Verarbeitungsmodus So betrachtet es Videos Am besten geeignet für
Statisch Nimmt standardmäßig mit einer festen Rate von 1 FPS Einzelbilder auf und fügt sie in einem Durchgang in den Kontext ein Kurze oder vorhersehbare Clips
Agentisch Navigiert dynamisch durch die Zeitleiste und lädt nur relevante Einzelbilder, Transkriptabschnitte oder Audiodaten Lange Videos und Abfragen zu bestimmten Momenten

Der Unterschied ist wichtig, weil das Modell nun kein passiver Betrachter mehr ist.

Es kann eine interne Version von „Wo soll ich als Nächstes suchen?“ stellen.

Warum ist das Ansehen eines Videos mit einer festen Bildrate von 1 FPS ineffizient?

Die statische Videoverarbeitung ist einfach und vorhersehbar. Gemini tastet das Video mit einer festen Bildrate ab – standardmäßig 1 Einzelbild pro Sekunde – und verarbeitet diese abgetasteten Einzelbilder zusammen mit dem Audio.

Das funktioniert gut, wenn das Video kurz ist. Bei einer Eingabe von einer Stunde oder mehreren Stunden wird es deutlich weniger attraktiv.

STATISCHE VIDEOVERARBEITUNG

Video
  |
  v
Feste Abtastung mit 1 FPS
  |
  v
Einzelbild 1
Einzelbild 2
Einzelbild 3
Einzelbild 4
...
  |
  v
Großer Kontext
  |
  v
Modell
  |
  v
Antwort

Die aktuelle Gemini-Dokumentation zu Tokens von Google liefert ein nützliches Beispiel: Eine einstündige Vorlesung, die bei statischer Verarbeitung mit hoher Auflösung möglicherweise etwa 1,08 Millionen Tokens benötigt, könnte bei agentischer Verarbeitung abhängig von der Frage und dem Inhalt etwa 108.000 Tokens verwenden.

Dieser Unterschied besteht, weil die meisten Fragen nicht jede Sekunde eines Videos erfordern.

Wenn der Nutzer fragt: „Zu welcher Schlussfolgerung gelangte der Sprecher hinsichtlich der Speicherkosten?“, befinden sich die relevanten Hinweise möglicherweise in 90 Sekunden einer einstündigen Präsentation.

Die Verarbeitung der übrigen 58 Minuten führt nicht automatisch zu einer besseren Antwort.

Warum kann die Abtastung mit festen Einzelbildern weiterhin wichtige Ereignisse übersehen?

Der Token-Verbrauch ist nur die halbe Herausforderung. Eine feste Abtastung kann außerdem die falschen Momente erfassen.

Stellen Sie sich eine Überwachungskameraaufnahme vor, in der jemand zwischen zwei abgetasteten Einzelbildern ein Paket auf einer Veranda ablegt:

00:10.0
Leere Veranda
    |
    |  Paket hier abgelegt
    |
00:11.0
Paket auf der Veranda

Eine Ansicht mit 1 FPS kann den Zustand vor und nach der Handlung erfassen, während die Handlung selbst verpasst wird.

Google hebt die Wiedererkennung von Momenten im Subsekundenbereich ausdrücklich als eine der neuen Funktionen von Agentic Video hervor. Das Modell kann einen vielversprechenden Zeitbereich identifizieren und dieses Fenster dichter erneut abtasten, anstatt auf die gesamte Aufnahme eine hohe Bildrate anzuwenden.

Diese Art der gezielten Untersuchung ist besonders relevant für lokal gespeicherte Überwachungskameraereignisse und -aufnahmen, bei denen ein nützliches Ereignis möglicherweise nur wenige Sekunden innerhalb von stundenlangem Videomaterial einnimmt.

Das Prinzip ist einfach:

Mehr visuelle Bandbreite dort einsetzen, wo die Antwort wahrscheinlich zu finden ist.

Wie entscheidet Gemini, welche Teile eines Videos angesehen werden?

Agentic Video macht das Verstehen von Videos zu einem iterativen Prozess. Statt sich vor Beginn der Analyse auf eine einzige Sampling-Strategie festzulegen, kann Gemini seine Vorgehensweise bei der Untersuchung der Eingabe im Verlauf der Aufgabe ändern.

Google beschreibt das System als eine Auswahl dessen, was angesehen wird, mit welcher Geschwindigkeit und über welche Modalität.

BENUTZERANFRAGE
    |
    v
Überlegen, welche Belege benötigt werden
    |
    v
Videotimeline navigieren
    |
    +---------------------+
    |          |          |
    v          v          v
Transkript   Audio      Frames
    |          |          |
    +----------+----------+
               |
               v
      Relevanten Moment gefunden?
               |
          +----+----+
          |         |
         Nein        Ja
          |         |
          v         v
 Erneut suchen   Gründlicher inspizieren
               Höhere FPS
               Höhere Detailgenauigkeit
                    |
                    v
                  Antwort

Dadurch entsteht eine Untersuchungsschleife, die eher einer Recherche als einem gewöhnlichen multimodalen Prompting entspricht.

Ein Transkript kann zunächst ungefähr zeigen, wo ein Thema besprochen wird. Anschließend können Frames überprüfen, was auf dem Bildschirm zu sehen war. Wenn ein schnelles visuelles Ereignis wichtig ist, kann das Modell diesen kurzen Abschnitt mit einer höheren Bildrate inspizieren.

Die Modalität selbst wird Teil der Entscheidungsfindung.

Warum kann Agentic Video bis zu 88 % weniger Tokens verwenden?

Agentic Video spart Tokens, indem Medien vermieden werden, die nicht zur Antwort beitragen. Es komprimiert nicht einfach das gesamte Video um 88 %.

Googles aktuelle Hinweise zur Preisgestaltung besagen, dass der Tokenverbrauch variabel ist, da er davon abhängt, was das Modell dynamisch lädt. Abfragekomplexität, Videoinhalt und Abtasttiefe beeinflussen das Ergebnis.

Von Google gemeldetes Ergebnis Bedeutung
Bis zu 88 % weniger Tokens Durch selektives Laden kann die in den Modellkontext geladene Medienmenge drastisch reduziert werden
Bis zu 66 % geringere Analysekosten Eine geringere Token-Nutzung kann die Gesamtkosten senken, jedoch nicht im Verhältnis eins zu eins
Bis zu 7 % Qualitätsverbesserung Eine dynamische Inspektion kann außerdem Belege erfassen, die bei einer statischen Stichprobenanalyse übersehen werden

Dies sind Googles Ergebnisse für die getesteten Video-Workloads und keine festen Garantien für jede Eingabe.

Die aktuellen Hinweise zur Preisgestaltung der Gemini API besagen ausdrücklich, dass die Tokenanzahl von Agentic Video von den vom Modell geladenen Inhalten abhängt und nicht einfach von der vollständigen Dauer des Ausgangsvideos.

Eine schwierige Frage, die das Modell dazu bringt, viele Abschnitte erneut zu prüfen, kann deutlich mehr verbrauchen als eine einfache Abfrage nach einem bestimmten Moment.

Warum bedeuten 88 % weniger Tokens nicht 88 % niedrigere Kosten?

Agentic Video führt weiterhin Schlussfolgerungen und Navigation durch. Es kann Transkripte inspizieren, Frames laden, einen Abschnitt neu abtasten und eine abschließende Antwort erstellen.

Deshalb liegt Googles höchste gemeldete Token-Reduzierung bei 88 %, während die höchste gemeldete Reduzierung der Analyse-Kosten 66 % beträgt.

Die Token-Abrechnung kann mehrere Arten von Arbeit umfassen:

  • der ursprüngliche Text-Prompt,
  • Navigationslogik,
  • ein Transkript wird dynamisch geladen,
  • Frames werden zur Inspektion geladen,
  • Audio wird bei Bedarf geladen,
  • und die abschließend generierte Antwort.

Das Ziel ist daher nicht, die Verarbeitung auf null zu reduzieren. Stattdessen soll die Verarbeitung dort eingesetzt werden, wo sie den höchsten Informationswert hat.

Was kann agentische Videoanalyse finden, das einer statischen Analyse entgehen kann?

Google hebt mehrere Workloads hervor, bei denen eine adaptive zeitliche Inspektion wichtiger ist als die bloße Reduzierung der Tokenanzahl.

Anwendungsfall Warum agentische Inspektion hilft
Abruf von Momenten im Subsekundenbereich Überprüft kurze Zeitfenster erneut, die bei einer Abtastung mit 1 FPS möglicherweise übersehen werden
Die-Suche-nach-der-Nadel-im-Heuhaufen Durchsucht mehrstündige Aufnahmen, ohne jeden Moment gleich zu laden
Anomalieerkennung Verdächtige Zeiträume mit höherer Bildrate erneut abtasten
Schnelle Aktionen zählen Kann Aktivitäten mit unterschiedlichen Abtastraten erneut ansehen
Videobearbeitung Kann präzise visuelle Übergänge und Ereignisgrenzen lokalisieren

Diese Fähigkeiten sind besonders relevant für Sicherheitskameras, Sportaufnahmen, Tutorials, Meeting-Archive, Bildschirmaufzeichnungen und Medien von Creators.

In jedem Fall kann der relevante Moment im Vergleich zur Gesamtdauer des Mediums winzig sein.

Ist agentische Videoverarbeitung immer besser als statische Verarbeitung?

Nein. Kurze Videos können weiterhin bessere Kandidaten für die statische Verarbeitung sein.

Googles Optimierungsleitfaden besagt, dass der statische Modus bei latenzempfindlichen Clips von ungefähr weniger als fünf Minuten möglicherweise eine schnellere Zeit bis zum ersten Token bietet, da die agentische Verarbeitung vor der Antwortgenerierung schlussfolgern, navigieren und interne Tool-Aufrufe durchführen muss.

Situation Besserer Ausgangspunkt
30-sekündiger Produktclip Statisch
Kurzer Clip, bei dem die Antwortlatenz am wichtigsten ist Statisch
90-minütige Vorlesung Agentisch
Ein Ereignis in stundenlangem Filmmaterial finden Agentisch
Schnelle Aktion rund um einen Zeitstempel untersuchen Agentisch
Einfache Zusammenfassung eines kurzen Videos Statisch kann ausreichen

Die nützliche Erkenntnis lautet nicht: „Agentische Verarbeitung ersetzt statische Videoverarbeitung.“

Es geht darum, dass sich diese Videoverarbeitungsstrategie jetzt an die jeweilige Arbeitslast anpassen kann.

Ersetzt Gemini Agentic Video Video-RAG?

Nein. Die Videonavigation zur Abfragezeit und der dauerhafte Videoabruf lösen unterschiedliche Probleme.

Gemini Agentic Video beginnt mit einer Videoeingabe und entscheidet, welche Teile dieser Eingabe genauer untersucht werden sollten. Ein Video-RAG-System setzt typischerweise eine Stufe früher an: Es hilft zu bestimmen, welche Videos oder Segmente aus einer deutlich größeren Sammlung überhaupt das multimodale Modell erreichen sollen.

Video-RAG Agentisches Videoverständnis
Indiziert eine dauerhafte Sammlung Untersucht das bereitgestellte Video zur Abfragezeit
Ruft passende Videos oder Segmente ab Entscheidet, wie diese Kandidaten untersucht werden
Kann Transkripte, OCR, Metadaten und Embeddings verwenden Nutzt dynamisch Transkript, Audio und Einzelbilder
Nützlich in sehr großen Archiven Nützlich für tiefgehendes Schlussfolgern über ausgewählte Medien

Diese Unterscheidung wird durch die Forschung zum Verständnis langer Videos gestützt.

Die LongVideoBench-Forschung zum Schlussfolgern in stundenlangen Videos umfasst 3.763 Videos und 6.678 von Menschen annotierte Fragen aus 17 Kategorien. Die Autoren beschreiben die zentrale Herausforderung als das Abrufen und Schlussfolgern über detaillierte multimodale Informationen aus langen Eingaben.

Diese Formulierung ist wichtig: abrufen und schlussfolgern, nicht einfach „das Video in den Kontext einordnen“.

Wie unterscheidet sich Video-RAG davon, Gemini einfach ein langes Video zu geben?

Video-RAG wird besonders nützlich, wenn die Sammlung deutlich größer ist als eine einzelne Aufnahme.

Die VideoRAG-Forschung zu extrem langen Videosammlungen untersucht dieses Problem anhand eines Benchmarks mit mehr als 160 Videos und insgesamt über 134 Stunden.

Das vorgeschlagene System kombiniert die Verankerung in textuellem Wissen mit multimodalem Abruf, anstatt zu erwarten, dass eine einzelne Modellanfrage die gesamte Bibliothek verarbeitet.

Das spricht für eine nützliche zweistufige Architektur:

PHASE 1
DAUERHAFTER VIDEOABRUF

Videoarchiv
     |
     v
Transkripte
Metadaten
Szenen
OCR
Embeddings
Zeitstempel
     |
     v
Mögliche Videos
Mögliche Zeitbereiche

          |
          v

PHASE 2
AGENTISCHE VIDEOINSPEKTION

Ausgewähltes Segment
     |
     v
Navigieren
Erneut ansehen
FPS ändern
Audio / Transkript / Einzelbilder untersuchen
     |
     v
Tiefgehende Antwort

Die beiden Ebenen ergänzen einander.

Der Abruf entscheidet, welches Video untersucht wird; agentisches Videoverständnis entscheidet, wie gründlich es untersucht wird.

Warum sollten große Videobibliotheken vor einer tiefgehenden KI-Analyse durchsucht werden?

Ein persönlicher Medienserver kann 20 TB Videomaterial enthalten. Ein Sicherheitsarchiv kann deutlich größer werden. Dennoch kann die Frage eines Benutzers letztlich von acht Sekunden Videomaterial abhängen.

Dieser Unterschied verändert die Architektur.

Das multimodale Modell sollte nicht zum Index für das gesamte Archiv werden müssen.

Stattdessen:

50-TB-VIDEOARCHIV
        |
        v
Durchsuchbarer lokaler Index
        |
        v
20 mögliche Videos
        |
        v
3 mögliche Zeitbereiche
        |
        v
45 Sekunden relevantes Video
        |
        v
Tiefgehendes multimodales Schlussfolgern

Die genauen Zahlen dienen nur zur Veranschaulichung, aber das Prinzip lässt sich skalieren.

Die Herausforderung bei der Infrastruktur besteht darin, Videos im Umfang des Speichers in einen Kontext im Umfang der Abfrage zu verwandeln.

Je größer das Archiv wird, desto wichtiger wird diese Auswahlebene. Unser Leitfaden zu AI-NAS-Hardware für die Indizierung, Medienverarbeitung und große lokale Datensätze erklärt, warum Speicher, aktive SSD-Ebene, Netzwerk und KI-Rechenleistung als separate Ressourcen dimensioniert werden sollten, anstatt sie als eine allgemeine KI-Anforderung zu behandeln.

Wie könnte eine Video-Pipeline für ein AI-NAS aussehen?

Ein AI-NAS, das gespeicherte Medien indiziert und versteht, muss Gemini nicht selbst ausführen, um nützliche Intelligenz bereitzustellen. Es kann die dauerhaften und sich wiederholenden Aufgaben übernehmen, die den Originalmedien am nächsten sind.

Eine praktische hybride Architektur könnte folgendermaßen aussehen:

NAS-VIDEOARCHIV
Originalvideos
        |
        v
LOKALE VERARBEITUNG
Dateimetadaten
Transkripte
Szenengrenzen
Zeitstempel
OCR
Vorschaubilder
Objekt-Tags
Embeddings
        |
        v
LOKALE SUCHE
        |
        v
Kandidatenvideo
Kandidat-Zeitbereich
        |
        v
RICHTLINIE / BENUTZERENTSCHEIDUNG
        |
        +--------------------+
        |                    |
        v                    v
LOKALES MODELL          CLOUD-MODELL
                           |
                           v
                  Gemini Agentic Video
                           |
                           v
                  Tiefgehende Videoanalyse

Dies ist ein Architekturmuster, keine angekündigte Google-Integration mit NAS-Produkten.

Der Vorteil besteht darin, dass Speicher, Indizierung und Modellschlussfolgerungen nicht mehr auf derselben Maschine stattfinden müssen.

Ein persönlicher Cloud-NAS mit mehreren Laufwerken wie ZimaCube 2 kann als dauerhafte Medienspeicherebene bestehen bleiben. Eine lokale CPU oder GPU kann Metadaten erzeugen. Ein multimodales Cloud-Modell kann für Fragen reserviert werden, bei denen sein besseres zeitliches Schlussfolgern die Übertragung und API-Kosten rechtfertigt.

Bei einer aufgeteilten Einrichtung kann ein kompakter lokaler Server für Indizierung und Vorverarbeitung wie ZimaBoard 2 auch speichernahe Dienste ausführen, sodass der leistungsstarke Inferenzrechner nicht für jeden Hintergrundjob aktiv bleiben muss.

Sollten Videometadaten und KI-Indizes neben den Originaldateien liegen?

Das ist nicht zwingend erforderlich, aber wenn die durchsuchbare Ebene nahe am Archiv bleibt, können sich mehrere Aspekte eines privaten Medien-Workflows vereinfachen.

Lokale Datenschicht Warum sollte man ihn in der Nähe des Archivs aufbewahren?
Dateimetadaten Einfach neu zu generieren und zu aktualisieren, wenn sich Medien ändern
Transkripte Kann durchsucht werden, ohne jedes Video erneut zu öffnen
Szenen-Zeitstempel Bieten direkte Pfade zurück zum Originalmaterial
Vorschaubilder Ermöglichen leichtes visuelles Durchsuchen
Embeddings Ermöglicht die semantische Suche in der gesamten Sammlung
OCR-Text Macht Schilder, Folien, Benutzeroberflächen und Untertitel durchsuchbar

Stabile Pfade sind ebenfalls wichtig. Wenn im Index steht, dass ein Ereignis stattgefunden hat in camera-02/2026-09-01.mp4 um 18:41:12 benötigt das Abrufsystem eine zuverlässige Möglichkeit, dieses Original-Asset später wiederzufinden.

Bei langlebigen Mediensammlungen stehen Index und Archiv daher in engem Zusammenhang, auch wenn sie technisch in separaten Datenbanken oder Volumes gespeichert sind.

Dieselbe Speicheraufteilung findet sich auch in selbst gehosteten Foto- und Videosystemen. Beispielsweise trennt unser Immich-Hardwareleitfaden für Foto- und Videobibliotheken umfangreiche Originale von latenzsensitiven Workloads für Datenbank, Vorschaubilder, maschinelles Lernen und Videoverarbeitung.

Was ist eine Hot-, Warm- und Cold-Video-KI-Architektur?

Auch große Videoarchive müssen nicht jedes Datenelement auf derselben Verarbeitungsstufe speichern.

Ein sinnvolles Design unterteilt in drei Tiers:

Tier Inhalte Priorität
Cold-Archiv Ursprüngliche 4K-Aufnahmen, alte Aufzeichnungen, Überwachungsarchiv Kapazität und Langlebigkeit
Warm-KI-Index Transkripte, Zeitstempel, Miniaturansichten, OCR, Embeddings, Tags Durchsuchbarkeit
Hot-Arbeitsbestand Kandidatenclips, temporäre Ausschnitte, Segmente mit hoher Bildrate Schnelle KI-Analyse
COLD
20 TB ursprüngliche Medien
        |
        v
WARM
Durchsuchbare Metadaten + Indizes
        |
        v
HOT
Relevanter Clip mit 10–60 Sekunden Länge
        |
        v
KI-MODELL

Diese Architektur konzentriert die teure Analyse auf einen winzigen Bruchteil der ursprünglichen Daten.

Außerdem muss dadurch nicht jedes Mal dieselben grundlegenden Metadaten neu erstellt werden, wenn eine neue Frage gestellt wird.

Die Warm- und Hot-Tiers benötigen normalerweise deutlich weniger Kapazität als das ursprüngliche Videoarchiv, können aber von reaktionsschnellem SSD-Speicher für Datenbanken, Miniaturansichten, Embeddings, Indizes und temporäre Clips profitieren. Auf einem erweiterbaren Heimserver kann die PCIe-zu-NVMe-SSD-Erweiterung für aktive KI-Indizes und Caches diese Arbeitsdaten getrennt vom Massenspeicher auf Festplatten halten.

Kann Gemini Agentic Video private NAS-Aufnahmen analysieren, ohne sie hochzuladen?

Nein. Gemini Agentic Video selbst ist eine Cloud-Funktion. Daher müssen Videoinhalte, die Gemini analysiert, für Googles Dienst zugänglich werden.

Google unterstützt derzeit mehrere Wege für Videoeingaben, darunter hochgeladene Medien, die Registrierung in Cloud Storage, Inline-Daten für kleine Eingaben und öffentliche YouTube-URLs.

Die Dokumentation zur Gemini-Videovorverarbeitung empfiehlt die Files API für viele größere oder wiederverwendbare Medieneingaben.

Über die Gemini Files API hochgeladene Dateien werden laut Googles aktueller Dokumentation 48 Stunden lang gespeichert, bevor sie automatisch gelöscht werden.

Das ist etwas völlig anderes als die Aussage, dass das Videomaterial innerhalb des Heimnetzwerks bleibt.

In Googles aktueller Dokumentation zur API-Preisgestaltung für kostenpflichtige Tarife steht außerdem, dass Daten aus kostenpflichtigen Tarifen standardmäßig nicht zur Verbesserung der Produkte verwendet werden. Entwickler sollten jedoch vor dem Senden sensibler Aufnahmen an einen externen Dienst weiterhin Anforderungen an Aufbewahrung, Protokollierung, Regionen, Organisationen und Compliance prüfen.

Wie kann ein privates Videoarchiv Cloud-KI gezielter nutzen?

Ein hybrider Workflow kann reduzieren, wie viele private Medieninhalte extern verarbeitet werden müssen.

Der erste Durchlauf kann lokal bleiben:

  • Die Datei identifizieren,
  • Das Transkript durchsuchen,
  • Nach Kamera oder Datum filtern,
  • Bewegungen oder Szenenwechsel erkennen,
  • Kandidaten-Zeitstempel abrufen,
  • und einen kurzen Kandidatenclip erstellen.

Diese Art der Trennung folgt demselben Prinzip, das in unserem Leitfaden zum lokalen Verarbeiten von KI-Aufgaben in der Nähe privater Daten erläutert wird: Das NAS kann eine stabile Datenschicht bleiben, selbst wenn die rechenintensivere Inferenz an anderer Stelle erfolgt.

Erst dann entscheidet der Ablauf, ob eine Cloud-Analyse erforderlich ist.

PRIVATES VIDEOARCHIV
        |
        v
LOKALE SUCHE + FILTER
        |
        v
Relevantes Segment gefunden
        |
        v
Erfordert diese Frage
stärkere multimodale Analyse?
        |
    +---+---+
    |       |
   Nein      Ja
    |       |
    v       v
 Lokal   Freigegebener Clip
 Antwort       |
              v
        Gemini Agentic Video

Dadurch wird Gemini nicht lokal. Es wird lediglich die Datengrenze enger gezogen.

Anstatt ein gesamtes privates Archiv als potenziellen Cloud-Kontext zu betrachten, kann das System entscheiden, welche Medien eine Weiterleitung verdienen.

Wann sollte die Videoanalyse lokal bleiben und wann zu Gemini wechseln?

Die richtige Antwort hängt von Datenschutz, Schwierigkeit, Umfang, Hardware und dem erforderlichen Maß an multimodaler Analyse ab.

Videoaufgabe Wahrscheinlicher Ausgangspunkt
Das Transkript nach einer Phrase durchsuchen Lokal
Aufnahmen nach Datum oder Kamera filtern Lokal
Vorschaubilder erstellen Lokal
Grundlegende Bewegungserkennung Lokal
Embeddings für ein privates Archiv erstellen Lokal
Ein semantisch relevantes Video finden Die lokale Suche kann leistungsfähig sein
Eine komplexe Abfolge von Ereignissen interpretieren Fortgeschrittenes multimodales Modell
Eine subtile Aktion von weniger als einer Sekunde lokalisieren Agentische Videoanalyse kann hilfreich sein
Schlussfolgerungen aus Bildern, Sprache und zeitlicher Abfolge ziehen Fortgeschrittenes multimodales Modell
Hochsensible Sicherheitsaufnahmen Lokal belassen, sofern eine externe Verarbeitung nicht ausdrücklich akzeptabel ist

Bei kameraintensiven Einsätzen ist diese Entscheidung besonders wichtig, da kontinuierliche Aufzeichnung und Echtzeiterkennung unterschiedliche Arbeitslasten erzeugen. Unser Leitfaden zu privatem NVR-Speicher und lokaler Videoanalyse behandelt die Speicher- und die ständig aktive Erkennungsseite getrennt von der multimodalen Cloud-Analyse.

Das Ziel besteht nicht darin, entweder die lokale oder die Cloud-Verarbeitung zu maximieren.

Es geht darum, für jeden Teil der Aufgabe die günstigste und sicherste Ebene zu verwenden, die ihn lösen kann.

Verändert Gemini Agentic Video, was ein KI-NAS leisten sollte?

Ja – aber nicht, indem man das NAS in eine Maschine verwandelt, die jedes Bild mit dem größtmöglichen multimodalen Modell verstehen muss.

Die besser skalierbare Aufgabe besteht darin, die Mediensammlung für KI durchsuchbar zu machen.

Das bedeutet, die Originale zu bewahren und gleichzeitig Folgendes zu pflegen:

  • durchsuchbare Transkripte,
  • zeitlich ausgerichtete Metadaten,
  • Szenenindizes,
  • OCR,
  • Embeddings,
  • Vorschaubilder,
  • Berechtigungen,
  • und zuverlässige Verknüpfungen zurück zum Originalmaterial.

Dies ist die umfassendere Rolle, die von einem KI-NAS als lokaler Intelligenzebene für gespeicherte Daten beschrieben wird: Der Speicher bleibt das Fundament, während Indizes und KI-Dienste das Durchsuchen, Verstehen und Wiederverwenden dieser Daten erleichtern.

Sobald diese Ebene vorhanden ist, wird das Schlussfolgerungsmodell austauschbar.

Heute könnte es Gemini Agentic Video sein. Ein anderer Workflow könnte ein lokales multimodales Modell verwenden. Ein zukünftiges System könnte je nach Datenschutz, Kosten oder Genauigkeit mehrere Modelle kombinieren.

Das Archiv sollte nicht für jedes Modell neu aufgebaut werden müssen.

Dieselbe architektonische Erkenntnis zeichnet sich auch bei anderen Formen von KI-Daten ab: Das Modell benötigt nicht alle Informationen des Benutzers. Es benötigt den kleinsten korrekten Informationsausschnitt für die aktuelle Aufgabe.

Bei Text kann es eine Handvoll abgerufener Dokumente bedeuten.

Für den Speicher eines Agenten kann es eine kleine Sammlung strukturierter Wissensdateien bedeuten.

Bei Videos kann das zwölf Sekunden bedeuten, die in fünfzig Terabyte an Aufnahmen verborgen sind.

Gemini Agentic Video ist wichtig, weil es multimodales Schlussfolgern näher an dieses Modell heranführt. Anstatt Videos als einen riesigen Kontextblock zu behandeln, kann das System aktiv entscheiden, wo sich der Einsatz von Aufmerksamkeit lohnt.

Für große private Mediatheken ist der nächste Schritt noch wichtiger:

Das multimodale Modell sollte nicht zum Index werden. Es sollte zum Ermittler werden, der zum Einsatz kommt, nachdem der Index die Suche eingegrenzt hat.

FAQ: Gemini Agentic Video, KI-NAS und private Mediensuche

Was ist Gemini Agentic Video Understanding?

Es handelt sich um einen Modus zur Gemini-Videoverarbeitung, der dynamisch durch die Zeitleiste eines Videos navigiert, anstatt alle abgetasteten Einzelbilder in einem einzigen statischen Durchlauf zu verarbeiten. Das Modell kann Transkript, Audio und visuelle Einzelbilder gezielt untersuchen und die Abtastdetailgenauigkeit erhöhen, wenn ein vielversprechender Abschnitt eine genauere Analyse erfordert.

Wie viele Tokens weniger verwendet Gemini Agentic Video?

Google berichtet von bis zu 88 % weniger Tokens bei den getesteten Langform-Video-Workloads. Dies ist keine feste Reduzierung. Der tatsächliche Token-Verbrauch hängt vom Video, der Komplexität der Anfrage und davon ab, wie viele Inhalte das Modell zur Untersuchung auswählt.

Bedeutet eine Reduzierung um 88 % weniger Tokens, dass Gemini Agentic Video 88 % günstiger ist?

Nein. Google berichtet von Kostensenkungen bei der Analyse von bis zu 66 %. Die agentische Verarbeitung verwendet weiterhin Tokens für Navigation, Schlussfolgerungen, dynamisch geladene Videoinhalte und die abschließende Ausgabe.

Ist Gemini Agentic Video genauer als die statische Videoverarbeitung?

Google berichtet von Qualitätsverbesserungen von bis zu etwa 7 % in den getesteten Benchmarks. Der Vorteil ist besonders relevant, wenn das Modell kurze Ereignisse oder bestimmte Belege in langen Aufnahmen finden muss.

Welche Bildrate verwendet Gemini normalerweise für Videos?

Der standardmäßige Modus zur statischen Videoverarbeitung von Gemini erfasst visuelle Einzelbilder mit 1 FPS. Entwickler können andere Raten konfigurieren, während Agentic Video die Dichte der Untersuchung bestimmter Abschnitte dynamisch anpassen kann.

Ist Agentic Video für kurze Clips besser geeignet?

Nicht immer. Laut den Hinweisen von Google kann die statische Verarbeitung bei kurzen, latenzempfindlichen Videos eine schnellere Zeit bis zum ersten Token bieten, da der agentische Modus vor der Antwort zusätzliche Navigations- und Schlussfolgerungsschritte ausführt.

Ersetzt Gemini Agentic Video Video-RAG?

Nein. Video-RAG kann Kandidaten aus einem großen dauerhaften Archiv indizieren und abrufen. Agentic Video kann anschließend ein ausgewähltes Video oder Segment eingehender untersuchen. Der Abruf entscheidet, was geprüft wird; die agentische Videoanalyse entscheidet, wie es geprüft wird.

Kann Gemini Agentic Video direkt auf einem NAS ausgeführt werden?

Nein. Gemini Agentic Video ist derzeit eine von Google gehostete Funktion. Ein NAS kann die Originalmedien speichern und indizieren, aber an Gemini gesendete Inhalte müssen für den Cloud-Dienst von Google zugänglich sein.

Wie lange bewahrt Gemini hochgeladene Videodateien auf?

In der aktuellen Dokumentation der Google Files API heißt es, dass hochgeladene Dateien 48 Stunden lang gespeichert werden. Entwickler, die mit sensiblen Aufnahmen arbeiten, sollten vor dem Hochladen von Medien die aktuellen Richtlinien zur API, Protokollierung, Aufbewahrung und Datennutzung prüfen.

Was sollte ein KI-NAS außer den Originalvideos speichern?

Eine durchsuchbare Mediensschicht kann Transkripte, Zeitstempel, Vorschaubilder, OCR-Text, Szenengrenzen, Objekt- oder Ereignis-Tags, Einbettungen und weitere Metadaten enthalten, mit denen ein KI-System relevante Clips abrufen kann, ohne das gesamte Archiv wiederholt zu verarbeiten.

Benötigen KI-Videoindizes SSD- oder NVMe-Speicher?

Nicht jedes Videoarchiv benötigt NVMe für die ursprünglichen Mediendateien. Umfangreiches Videomaterial kann auf kapazitätsorientiertem Speicher verbleiben, während häufig aufgerufene Datenbanken, Vorschaubilder, Einbettungen, Indizes und temporäre Arbeitsclips von einer schnelleren SSD- oder NVMe-Ebene profitieren können. Das geeignete Speicherlayout hängt von der Größe der Bibliothek, der Indizierungsaktivität und den gleichzeitig ausgeführten Arbeitslasten ab.

Sollten Überwachungsaufnahmen lokal oder in der Cloud analysiert werden?

Sensibles Videomaterial eignet sich besonders für lokale Filterung, Indizierung und grundlegende Analyse. Cloud-Verarbeitung kann für anspruchsvollere multimodale Fragen sinnvoll sein, wenn der Nutzer oder die Organisation der externen Datenübertragung und den geltenden Aufbewahrungsrichtlinien ausdrücklich zustimmt.

Welche Architektur eignet sich am besten für eine sehr große KI-Videobibliothek?

Ein skalierbares Design trennt das ursprüngliche Archiv, eine dauerhaft durchsuchbare Metadatenschicht, eine kleine aktive Arbeitsmenge potenzieller Clips und das multimodale Schlussfolgerungsmodell. Dadurch wird aus einer großen gespeicherten Sammlung eine viel kleinere Menge an abfragebezogenem Kontext.

Tech- & KI-Zentrum

Mehr zum Lesen

Get More Builds Like This

Stay in the Loop

Get updates from Zima - new products, exclusive deals, and real builds from the community.

Stay in the Loop preferences

We respect your inbox. Unsubscribe anytime.