GPT-6.1 Terra computer use: test wypełniania formularza na zrzutach ekranu

👁 121 przeczytań

OpenAI reklamuje GPT-6.1 Terra jako model z „precyzyjnym computer use”, czyli obsługą komputera na podstawie zrzutów ekranu, i podaje wypełnianie formularzy jako jedno z zastosowań. Sprawdziłem to na dwustronicowym wniosku leasingowym: model widział tylko zrzut ekranu i mail od klienta z pułapkami, a każdą akcję - kliknięcie albo wpisanie tekstu - wykonywała przeglądarka. Terra wypełniła wniosek bezbłędnie w 4 próbach na 4, za każdym razem w 19 krokach, za ok. 0,047 USD i w niecałą minutę.

Co OpenAI obiecuje

W ogłoszeniu z 26.10.2026 OpenAI opisuje Terrę jako szybki model, który łączy dokładne rozumowanie wizualne z precyzyjną obsługą komputera. Wśród przykładów zastosowań jest wypełnianie formularzy, a w API - czytanie faktur i wpisywanie danych do programu księgowego. W teście OSWorld 2.1 (zadania na prawdziwym systemie operacyjnym) Terra na poziomie medium ma przekraczać najlepszy wynik GPT-5.6 Terra - liczby są tylko na wykresie (wg OpenAI).

W API obsługa komputera to narzędzie computer_use, dostępne tylko przez Responses API. Ja testowałem przez OpenRoutera, więc zbudowałem prostszą pętlę: model dostaje zrzut ekranu i zwraca jedną akcję w JSON, a skrypt w Playwright ją wykonuje i robi kolejny zrzut. To mniej niż pełne narzędzie OpenAI, ale sprawdza to samo: czy model trafia w pola i dobrze rozumie dane.

Formularz i mail z pułapkami

Formularz napisałem sam: krok 1 z danymi osobowymi i adresem, krok 2 z kwotą, okresem leasingu, przedmiotem i zgodami. Listy województw i okresów to własne rozwijane menu, a nie zwykłe pole wyboru, więc trzeba je otworzyć kliknięciem i trafić w opcję. Pola mają walidację: telefon 9 cyfr bez spacji, NIP 10 cyfr bez kresek.

Dane model brał z maila klienta. Pułapki:

• „Telefon: 601 234 567 - choć nie, przepraszam, ten numer jest służbowy (…) proszę używać prywatnego: 512 900 118” - w formularzu ma być 512900118.
• „NIP 521-301-72-28” - w polu bez kresek.
• „ploter tnący (…) leasing na trzy lata” - przedmiot to maszyna/urządzenie, okres 36 miesięcy.
• „Ofert marketingowych proszę mi nie wysyłać” - zgoda marketingowa ma zostać pusta, a zgoda RODO (wymagana) zaznaczona.
• Województwa w mailu nie ma - trzeba je wywnioskować z kodu 20-346 i Lublina.

Instrukcja dla modelu mieściła się w kilku zdaniach. Odpowiedź miała być jednym obiektem JSON w jednym z formatów:

{"akcja":"klik","x":123,"y":456}
{"akcja":"wpisz","x":123,"y":456,
 "tekst":"..."}
{"akcja":"przewin","dy":300}
{"akcja":"koniec"}

Jak pracowała Terra: 19 kroków

Pierwsza próba Terry na poziomie medium, akcje w kolejności (współrzędne w pikselach ekranu 1280 x 800):

1. wpisz (412,140) "Tomasz"
2. wpisz (792,140) "Wierzbicki-Nowak"
3. wpisz (408,203) "88030312342"
4. wpisz (789,202) "5213017228"
5. wpisz (420,277) "512900118"
...
10. klik (810,417)  lista województw
11. klik (690,501)  "lubelskie"
12. klik (301,461)  "Dalej"
13. wpisz (401,140) "24600"
14-15. klik  lista okresów, "36 miesięcy"
16-18. klik  "maszyna/urządzenie",
             zgoda RODO, "Wyślij"
19. koniec

Terra nie zrobiła żadnego zbędnego ruchu: każde pole wypełniła za pierwszym razem, nie trafiła ani razu w walidację i nie zaznaczyła zgody marketingowej. Telefon wpisała prywatny, NIP bez kresek, województwo wybrała sama. Jeden krok trwał średnio 2,6 s, a na wejściu każdego było 1700-2060 tokenów (zrzut ekranu plus historia akcji). Trzy kolejne próby wyglądały identycznie, także jedna na poziomie low - tyle samo kroków i ten sam wynik.

Jedna uwaga: e-mail wszystkie modele przepisały tak, jak był w mailu, wielkimi literami: „[email protected]”. Formularz tego nie zabraniał, więc to nie błąd, ale jeśli twój system rozróżnia wielkość liter, napisz to w poleceniu wprost.

Wyniki wszystkich modeli

• Sol zrobił dokładnie to samo co Terra, w tej samej liczbie kroków, ale za dwa razy wyższą cenę.
• Luna w jednej próbie najpierw kliknęła złe województwo, po czym sama otworzyła listę jeszcze raz i poprawiła wybór - stąd 21 kroków. Kosztowała 10 razy mniej niż Terra.
• Gemini 4 Argon z instrukcją w pikselach klikał obok pól - pierwsze imię wpisywał trzy razy w różne miejsca - i po 40 krokach nie wysłał formularza. To nie wina samego modelu: Argon podaje współrzędne w skali 0-1000. Po zmianie jednego zdania w instrukcji i przeliczeniu skali wypełnił wszystko bezbłędnie. Ta lekcja kosztowała mnie ok. 1 USD.

Co to znaczy w praktyce

Prosty formularz, nawet z własnymi listami i walidacją, to dla Terry zadanie rutynowe. Wynik nie różnił się od droższego Sol, a wychodził o połowę taniej. Przy 1000 takich wniosków koszt samego modelu to ok. 47 USD (185 zł po kursie NBP z 26.10.2026), na Sol ok. 94 USD, na Lunie ok. 5 USD.

Czego test nie sprawdza: prawdziwych stron z reklamami, okienkami cookies i CAPTCHA, długich zadań na wielu stronach ani pełnego narzędzia computer_use z Responses API. W ChatGPT podobną pracę wykonuje tryb Work - opisałem go w tekście ChatGPT Work: co to jest. Jak OpenAI udostępnia computer use programistom, opisałem przy Agents API od OpenAI. Pozostałe wyniki Terry, w tym test po polsku, są w przewodniku GPT-6.1 Terra.

Najczęstsze pytania

Czy GPT-6.1 Terra umie (zdanie urwane/niekompletne)e obsługiwać komputer?

Tak, to jedna z głównych zapowiedzianych funkcji. W moim teście wypełniła 15 pól dwustronicowego formularza w 4 próbach na 4, bez żadnego błędnego kliknięcia.

Ile kosztuje computer use z Terrą?

Płacisz za tokeny: zrzut ekranu z historią to ok. 2 tys. tokenów wejścia na krok. Mój formularz (19 kroków) kosztował 0,046-0,048 USD na próbę.

Terra czy Luna do automatyzacji formularzy?

Na prostym formularzu Luna też miała 15/15, za ok. 0,005 USD, ale raz kliknęła złą opcję i musiała ją poprawić. Terra działała szybciej i bez poprawek.

Czy computer use działa przez OpenRoutera?

Wysłanie zrzutu ekranu i odebranie akcji w JSON działa przez zwykłe API czatu - tak testowałem. Narzędzie computer_use OpenAI wymaga Responses API.

Źródła i data sprawdzenia

• OpenAI: Introducing GPT-6.1 Terra - computer use, formularze, OSWorld 2.1 (odczyt 26.10.2026)
• OpenAI API: model GPT-6.1 Terra - narzędzie computer_use, wymóg Responses API (odczyt 26.10.2026)
• NBP, tabela 208/A/NBP/2026 - 1 USD = 3,9293 zł (26.10.2026)
• Mój test: własny formularz HTML, Playwright (Chromium, 1280 x 800), OpenRouter, rozumowanie medium (jedna próba Terry na low), 26.10.2026, ok. 21:05-21:30; 11 prób, łączny koszt 1,49 USD