Canvas und Google Lens: Google erweitert den AI-Mode in der Suche um Dokumente

Google erweitert seinen KI-Modus in der Suche um neue Funktionen. So sollen Search Live mit Video beim Lernen sowie Canvas bei der Erstellung von Plänen unterstützen. Zudem erlaubt eine Upload-Funktion Fragen zu Bildern und PDF-Dateien.

Dokumente zusammenfassen und einbinden

Der KI-Modus war Anwendern bislang nur über die Google-App für Android und iOS zugänglich, nun hat Google diesen auf die Desktop-Suche ausgeweitet. In den kommenden Wochen soll zudem eine neue Upload-Funktion für PDF-Dateien folgen. Mit dieser können etwa im Unterricht oder im Arbeitsumfeld zur Weiterbildung erhaltene Dokumente hochgeladen und anschließend von der KI analysiert werden. Nutzer können sich diese dann unter anderem zusammenfassen lassen oder detaillierte Rückfragen dazu stellen. Darüber hinaus lassen sich die Dokumente auf Wunsch auch in die laufende Suche einbinden, um laut Google das Verständnis zum jeweiligen Thema zu vertiefen. Dies soll dadurch erreicht werden, dass die Suche Querverweise zu den relevanten Informationen im Dokument ausgibt.

In den nächsten Monaten plant Google, die Funktion auch auf weitere Formate und Bilder auszuweiten. Zusätzlich soll das Einbinden von Dateien aus Google Drive ermöglicht werden.

Mit Canvas schnell verschiedenste Pläne erstellen

Ebenfalls neu ist in diesem Zusammenhang Canvas, mit der sich laut Google auf einfache Weise Projektpläne erstellen lassen sollen. Dabei können sowohl eigene Inhalte als auch Informationen aus der Suche eingebunden und berücksichtigt werden. Diese lassen sich dynamisch anpassen und somit auch über mehrere Sitzungen hinweg weiterentwickeln. Als Anwendungsbeispiele nennt Google Reiseplanungen oder das Erstellen eines Lehrplans für eine anstehende Prüfung. Diese Pläne sollen sich mit nur einem Klick erstellen und anschließend bei Bedarf weiter verfeinern lassen, um sie den gewünschten Anforderungen anzupassen. Canvas kann auf Wunsch auch eigene Notizen in den Prozess einbeziehen.

Google will die neue Funktion in den kommenden Wochen zunächst nur in den USA und ausschließlich Teilnehmern des AI-Mode-Labs-Experiments über Desktop-Browser zur Verfügung stellen.

Google Lens nun mit AI-Live-Funktion

Darüber hinaus sollen in den nächsten Wochen mit Search Live mit Videoeingabe zahlreiche erweiterte Funktionen aus dem Project Astra direkt in den KI-Modus einfließen, der wiederum vollständig in Google Lens eingebunden ist. Bei der Nutzung soll es ausreichen, Google Lens zu öffnen, die Live-Funktion zu aktivieren, die Kamera auf das gewünschte Objekt zu richten und die entsprechende Frage in das Mikrofon zu sprechen. Die Funktion berücksichtigt laut Google auch den visuellen Kontext des Kamerabildes, wie beispielsweise verschiedene Perspektiven oder sich bewegende Objekte.

Search Live mit Videoeingabe wird noch in dieser Woche in den USA eingeführt – ebenfalls zunächst für Teilnehmer am AI-Mode-Labs-Experiment.

Möglichkeiten von Lens in Chrome ausgebaut

Die Kombination aus Lens und KI-Modus ermöglicht es künftig auch im Chrome-Browser nach allem zu suchen, was aktuell auf dem Bildschirm angezeigt wird – unabhängig davon, ob es sich um eine Website, ein PDF-Dokument oder einen anderen Inhalt handelt. Dafür erscheint fortan in den Dropdown-Vorschlägen der Adressleiste der Eintrag „Google nach dieser Seite fragen“, über den sich Lens im Browser schnell und direkt aufrufen lässt.