Apple po cichu wprowadziło funkcję „Rozszerzone wyszukiwanie wizualne”, która jest domyślnie włączona i działa poprzez wysyłanie informacji na serwer firmy.
Nowa funkcja Rozszerzone wyszukiwanie wizualne (ang. Enhanced Visual Search) w aplikacji Zdjęcia firmy Apple umożliwia wyszukiwanie zdjęć przy użyciu punktów orientacyjnych lub punktów zainteresowania. Twoje urządzenie prywatnie dopasowuje miejsca na Twoich zdjęciach do globalnego indeksu, który Apple utrzymuje na swoich serwerach. Stosuje homomorficzne szyfrowanie i prywatność różnicową oraz używa przekaźnika OHTTP, który ukrywa adres IP. Zapobiega to firmie Apple w uzyskaniu informacji na Twoich zdjęciach.
Co to jest Rozszerzone wyszukiwanie wizualne? Funkcja Rozszerzonego wyszukiwania wizualnego pozwala aplikacji Zdjęcia dopasowywać miejsca z Twoich zdjęc do globalnego indeksu prowadzonego przez Apple, aby umożliwić wyszukiwanie niemal każdego punktu orientacyjnego lub ważnego miejsca.
➔ PRZECZYTAJ TAKŻE: Co się dzieje w Vegas… zostaje na Twoim iPhonie…
Jednak inżynier oprogramowania Jeff Johnson zbadał i opisał w swoim wpisie na blogu, że takie zachowanie jest sprzeczne z tym, co firma deklaruje na temat praktyk bezpieczeństwa i prywatności.
Ustawienie Rozszerzone wyszukiwanie wizualne zostało wprowadzone wraz z najnowszymi wersjami systemu operacyjnego Apple dla komputerów Mac (macOS 15) i iPhone’ów (iOS 18), które zostały wydane 16 września 2024 roku.
Jednak Apple po raz pierwszy wspomniało o Rozszerzonym wyszukiwaniu wizualnym (Enhanced Visual Search) dopiero 24 października, i to dyskretnie. Funkcja ta umożliwia iPhone’owi identyfikację miejsc ze zdjęć, a dokładniej punktów orientacyjnych, w bibliotece zdjęć.
Na iPhonie istnieje funkcja wyszukiwania wizualnego do identyfikowania obiektów na zdjęciach i wideo.
Dzięki funkcji Wyszukiwanie wizualne możesz identyfikować i wyświetlać dodatkowe informacje między innymi na temat popularnych punktów orientacyjnych, roślin i zwierząt domowych widocznych na zdjęciach, obrazkach i nagraniach wideo. Funkcja Wyszukiwanie wizualne może także rozpoznawać dania na zdjęciach i sugerować powiązane przepisy.
Rozszerzone wyszukiwanie wizualne zdjęć, które umożliwia użytkownikowi przeszukiwanie biblioteki zdjęć pod kątem określonych lokalizacji, takich jak punkty orientacyjne i punkty zainteresowania, jest przykładem przydatnej funkcji opartej na połączeniu ML (uczenia maszynowego) z HE i wyszukiwaniami na prywatnym serwerze. Korzystając z PNNS, urządzenie użytkownika prywatnie przeszukuje globalny indeks popularnych punktów orientacyjnych i punktów zainteresowania utrzymywany przez Apple w celu znalezienia przybliżonych dopasowań do miejsc przedstawionych w bibliotece zdjęć.
— Apple, październik 2024
The Verge wyjaśnia, że funkcja zidentyfikuje określoną lokalizację, gdy przesuniesz palcem w górę zdjęcie budynku i stukniesz „Wyszukaj punkt orientacyjny”. Pojawi się karta z nazwą punktu orientacyjnego i linkiem do powiązanego artykułu.
Aby ustalić nazwę dowolnego punktu orientacyjnego, Twój iPhone użyje globalnego indeksu znanych punktów orientacyjnych i punktów zainteresowania przechowywanych przez Apple, aby znaleźć dopasowania do miejsc w Twoim albumie.
Model uczenia maszynowego (ML) na urządzeniu analizuje zdjęcie i decyduje, czy istnieje obszar zainteresowania (ROI), który może obejmować punkt orientacyjny. Jeśli odpowiedź jest twierdząca, zaszyfrowane żądanie jest wysyłane do serwera Apple, gdzie przeprowadza szereg procesów, takich jak stosowanie szyfrowania homomorficznego i prywatności różnicowej, i odsyła kandydackie punkty orientacyjne do iPhone’a. Następnie model ponownego rankingu na urządzeniu przejmuje kontrolę i przewiduje najlepszego kandydata.
Metadane zdjęcia są następnie aktualizowane etykietą punktu orientacyjnego, co pozwala na łatwe znalezienie go poprzez wyszukanie jego nazwy na Twoim iPhonie.
Chociaż istnieje wiele przypadków użycia tej funkcji i wiele osób może uznać ją za przydatną, nie powinna być domyślnie włączona, biorąc pod uwagę, że wysyła informacje związane ze zdjęciem do Apple’a.
Co gorsza, Apple nigdy nie ogłosiło publicznie tej funkcji. Ponadto, na wypadek gdybyście się zastanawiali, funkcja ta nie jest częścią Apple Intelligence.
Gdzie można wyłączyć funkcję „Rozszerzone wyszukiwanie wizualne”?
Funkcję Rozszerzone wyszukiwanie wizualne można wyłączyć lub włączyć w Ustawieniach systemu iOS 18 w obszarze Aplikacje ➔ Zdjęcia i pod systemem macOS 15 Zdjęcia ➔ Ustawienia… ➔ Ogólne.
➔ Obserwuj nas w Google News, aby być na bieżąco!
źródło: PhoneArena