Microsoft Copilot Vision może teraz skanować cały ekran – nowa era AI w Windows

Microsoft znacząco rozszerzył możliwości swojego asystenta AI Copilot Vision, wprowadzając funkcję, która pozwala sztucznej inteligencji “widzieć” i analizować całą zawartość ekranu użytkownika.

Ta aktualizacja oznacza przełom w integracji AI z systemem Windows, oferując pomoc w czasie rzeczywistym na podstawie tego, co dzieje się na pulpicie.

Ewolucja od przeglądarki do całego pulpitu

Copilot Vision zadebiutował jako funkcja ograniczona do przeglądarki Microsoft Edge, gdzie mógł analizować zawartość stron internetowych. Następnie rozszerzono jego możliwości o analizę zdjęć z kamer mobilnych. Teraz Microsoft wprowadza największą dotychczas aktualizację – możliwość skanowania całego pulpitu Windows.

Wcześniej Copilot Vision mógł jednocześnie obserwować maksymalnie dwie otwarte aplikacje. Teraz, po kliknięciu ikony okularów w aplikacji Copilot, użytkownicy mogą udostępnić dowolne okno – lub cały ekran – do analizy AI w czasie rzeczywistym.

Jak działa nowa funkcja

Aktywacja Copilot Vision jest prosta i intuicyjna. Aby rozpocząć korzystanie z Copilot Vision w Windows, należy otworzyć aplikację Copilot i kliknąć ikonę okularów w kompozytorze, wybrać okno przeglądarki lub aplikację, którą chcemy udostępnić, a następnie poprosić Copilot o pomoc w tym, nad czym pracujemy.

System działa podobnie do udostępniania ekranu podczas rozmowy wideo – użytkownik musi aktywnie włączyć funkcję, a AI nie będzie miał dostępu do zawartości ekranu bez wyraźnego zezwolenia. Aby przestać udostępniać, wystarczy nacisnąć “Stop” lub “X” w kompozytorze.

Praktyczne zastosowania

Copilot Vision oferuje szeroki wachlarz praktycznych możliwości:

Pomoc w pracy: AI może analizować dokumenty, prezentacje czy arkusze kalkulacyjne, oferując sugestie ulepszeń lub wyjaśnienia skomplikowanych danych.

Wsparcie edukacyjne: System może wyjaśniać trudne koncepcje widoczne na ekranie, pomagać w nauce nowych programów lub prowadzić przez skomplikowane procesy.

Rozrywka i gry: Copilot może być obok, udzielając wskazówek podczas grania w gry, przeglądania zdjęć i pokazywania, jak poprawić oświetlenie, aby były idealne, czy przeglądania programu podróży.

Dostępność: Dla użytkowników z niepełnosprawnościami funkcja może oferować ulepszone wsparcie w czytaniu ekranu lub nawigacji.

Funkcja Highlights – przewodnik krok po kroku

Jedną z najciekawszych nowości jest funkcja Highlights. Dzięki Highlights można poprosić Copilot “pokaż mi jak” wykonać konkretne zadanie, a system pokaże w aplikacji, gdzie kliknąć i co zrobić. To rewolucyjna funkcja, która przekształca AI w interaktywnego przewodnika po oprogramowaniu.

Kontrola prywatności i bezpieczeństwa

Microsoft kładzie duży nacisk na prywatność i kontrolę użytkownika. Vision jest całkowicie opcjonalne, więc użytkownik decyduje, kiedy włączyć to jako drugie oczy w sieci. Dodatkowo, po zakończeniu sesji z Vision, wszystkie dane o tym, co mówisz i kontekst, który dzielisz z Copilot, są usuwane.

Kluczowe różnice w porównaniu do kontrowersyjnej funkcji Recall:

  • Vision wymaga aktywnej zgody użytkownika
  • Nie działa w tle bez wiedzy użytkownika
  • Dane są usuwane po zakończeniu sesji
  • Użytkownik ma pełną kontrolę nad tym, kiedy funkcja jest aktywna

Ograniczenia i bezpieczeństwo

Copilot Vision współpracuje z większością stron internetowych. Nie działa na niektórych stronach i jest zablokowany na tych zawierających szkodliwe lub treści dla dorosłych. System odmawia również dyskusji o szkodliwych, obraźliwych lub nielegalnych tematach.

Copilot również nie może widzieć żadnych treści DRM, które są ograniczone przez system przechwytywania ekranu Windows.

Dostępność i wdrażanie

Copilot Vision w Windows jest dostępny teraz w USA dla Windows 10 i Windows 11, a wkrótce trafi do większej liczby krajów spoza Europy. Funkcja jest częścią Copilot Labs, ponieważ Microsoft kontynuuje udoskonalanie i wzbogacanie doświadczenia.

Aktualizacja (wersja 1.25071.125) jest stopniowo wdrażana za pośrednictwem Microsoft Store do użytkowników Windows Insider. Microsoft ostrzega, że nie wszyscy użytkownicy mogą mieć natychmiastowy dostęp do aktualizacji, ponieważ wdrożenie jest etapowe.

Przyszłość AI w Windows

Copilot Vision reprezentuje znaczący krok w kierunku bardziej zintegrowanego AI w systemie Windows. To główny krok naprzód w naszej podróży, aby uczynić Copilot codziennym towarzyszem: takim, który pracuje z tobą, widzi to, co widzisz, i pomaga załatwiać sprawy.

Funkcja wprowadza nową erę “AI, który widzi” – konkurując bezpośrednio z Google Gemini Live i nadchodzącą Apple Intelligence. Microsoft pozycjonuje się jako lider w tworzeniu proaktywnych, otaczających i głęboko zintegrowanych asystentów AI.

Perspektywy na przyszłość

Copilot Vision w Windows ewoluuje, kształtowany przez spostrzeżenia i doświadczenia tych, którzy z niego korzystają codziennie. Jesteśmy zobowiązani do udoskonalania i rozszerzania jego możliwości, z nowymi funkcjami i funkcjonalnością w perspektywie.

Ta aktualizacja może fundamentalnie zmienić sposób, w jaki użytkownicy wchodzą w interakcje z komputerami, oferując bardziej intuicyjne, kontekstowe wsparcie, które rozumie nie tylko słowa, ale także wizualny kontekst pracy użytkownika.

awatar autora
Piotr Olszewski
Previous Post

Google Discover wprowadza podsumowania AI – kolejne zagrożenie dla wydawców

Next Post

Jedna na pięć nowych gier na Steam korzysta z generatywnej AI – raport ujawnia skalę zjawiska