Die von Google entwickelte Technik geht dabei über die übliche optische Zeichenerkennung (Optical Character Recognition, OCR ), wie sie beim Scannen von Textdokumenten eingesetzt wird, hinaus. Funktioniert diese Technik, dann findet Google in Zukunft gesuchte Stichwörter nicht mehr nur Texten, sondern auch, wenn sie in Bildern oder in Videos auftauchen.
"Text in einem digitalen Bild, zum Beispiel einer Straßenszene, liefert oft Hinweise über die dargestellten Schauplatz oder den Ort. Eine typische Straßenszene beihnaltet etwa Text als Teil von Straßenschildern, Gebäudenamen, Hausnmmern oder Schildern im Schaufenster", heißt es in dem Patentantrag.
Dieses Beispiel und das dem Patentantrag angefügte Bild legen nahe, dass es Google mit der neuen Technik darum geht, die Bilder aus "
Street View" zu durchsuchen. Street View ist eine Erweiterung von Google Maps und zeigt Bilder der in der Landkarte aufgerufenen Straße. Dazu hatte Google eigens mit Kameras bestückte Fahrzeuge durch amerikanische Städte fahren lassen. Diese Straßenbilder enthalten genau jene Art von Textstücken, nach denen Google nun suchen will. Datenschützern, die ohnehin schon Vorbehalte gegen Googles Straßenbilder haben, dürfte das nicht gefallen.
Wie eine solche Suche aussehen kann, beschreibt der Patentantrag auch:
"Zum Beispiel: Ein Nutzer sucht nach McDonald's in einer bestimmten Stadt oder in der Nähe einer bestimmten Adresse. Das Landkarten-Anwendung zeigt dann den Weg zu McDonald's und gleich noch ein Bild der Filiale."