Computer use: inteligența artificială folosește ecranul

1. Despre acest articol

Computer use înseamnă că agentul AI se uită la imaginea ecranului dumneavoastră și folosește mouse-ul și tastatura în locul dumneavoastră. Agentul deschide meniuri, face clic pe butoane, scrie valori în ferestre și verifică rezultatul tot cu o captură de ecran.

Când se folosește?	De ce
Dacă ediția dumneavoastră StatiCAD nu are canal de terminal (Profesyonel, Standart, Betonarme, Yığma)	Agentul poate controla programul doar prin ecran.
Pentru operațiile fără comandă de terminal	De exemplu setările din ferestrele de dialog, selectarea, mutarea, vizualizarea și previzualizarea raportului.
Pentru verificarea vizuală	Pentru ca agentul să verifice cu propriii ochi modelul creat, în plan și în vizualizarea 3D.

info

Dacă există terminal, mai întâi terminalul: Computer use este mult mai lent decât comenzile de terminal și poate greși clicurile. În Ultimate și Hybrid, agentul trebuie să folosească mai întâi comenzile de terminal și să treacă la ecran doar când este nevoie. Primul prompt din articolul Claude Code spune deja acest lucru.

2. Cu ce instrumente?

Instrument	Situația în Windows	Plan necesar
Aplicația desktop Claude (Claude Code)	Disponibil (versiune de previzualizare pentru cercetare, research preview).	Claude Pro sau Max
OpenAI Codex	Disponibil; în Windows lucrează în prim-plan. Dezactivat în SEE (deci și în România), în Regatul Unit și în Elveția.	Plan ChatGPT
Google Antigravity	Nedocumentat pentru programele desktop.	—

3. Pregătiți calculatorul

1. Setați scalarea ecranului la 100% și, dacă este posibil, rezoluția la 1920×1080 (Setări Windows › Sistem › Afișaj). Ghidul utilizatorului StatiCAD și AGENTS.md au fost pregătite pentru această setare; scalările mari cresc erorile de clic.
2. Deschideți StatiCAD și măriți fereastra astfel încât să acopere ecranul; cheia hardware (dongle) trebuie să fie conectată.
3. Închideți ferestrele inutile. Mai ales ferestrele în care apar informații personale, precum e-mailul, banca sau managerul de parole.
4. Opriți temporar notificările Windows (Asistent focalizare / Nu deranjați); notificările care apar pot încurca clicurile.

4. Activarea computer use în Claude

1. Actualizați aplicația desktop Claude (dacă Claude nu se actualizează singură, reinstalați-o de pe claude.com/download).
2. În Settings (Setări) › secțiunea aplicației desktop (Desktop app), activați comutatorul Computer use. În Windows setarea intră imediat în vigoare.
3. Deschideți sesiunea în fila Code (Claude Code, Pasul 6).
4. Când va folosi ecranul pentru prima dată, Claude vă întreabă ce aplicații vrea să folosească; permiteți StatiCAD. La nevoie, întreabă separat și pentru alte aplicații.

info

Niveluri de permisiune: Claude poate folosi complet aplicațiile pe care le-ați permis. Din motive de siguranță, browserele de internet le poate doar vizualiza, iar în terminale și editoare de cod poate doar face clic (nu poate scrie). Aplicațiile permise sunt limitate la sesiunea respectivă.

5. Computer use în Codex

• Activați utilizarea calculatorului (computer use) din setările aplicației Codex.
• În Windows, cât timp Codex folosește ecranul, ferestrele vin în prim-plan; în acest timp nu atingeți mouse-ul și tastatura.
• Instalare și cont: articolul ChatGPT (Codex).

6. Exemple de prompturi

Ultimate și Hybrid: terminal + ecran la nevoie. Promptul din articolul Claude Code este suficient:

Citește fișierele AGENTS.md și YARDIM_AI_KOMUTLAR.md din folderul C:\StatiCAD\Ultimatex64; vreau să folosești programul (StatiCAD.exe) prin terminal și, la nevoie, cu computer use, ca să-mi creezi proiectele.

Edițiile fără terminal (exemplu Profesyonel; schimbați numele folderului după ediția dumneavoastră: V10StdX64, BAV10, YigmaV10ProX64, YigmaV10StdX64; la Betonarme fișierul programului este StatiCAD-Betonarme.exe, la Yığma StatiCAD-Yigma.exe):

Folosesc StatiCAD Profesyonel; fișierul programului este C:\StatiCAD\V10ProX64\StatiCAD.exe. Această ediție nu are canal de terminal, vei folosi programul prin ecran, cu computer use.
- Mai întâi, dacă în folderul C:\StatiCAD\V10ProX64 există AGENTS.md, citește-l; dacă nu, continuă citind ecranul.
- Dacă programul este deschis, nu-l porni a doua oară. Înainte de fiecare clic, verifică ținta cu o captură de ecran.
- Întreabă-mă înainte de a suprascrie fișiere existente și înainte de a închide programul.
Când ești gata, fă o captură a ecranului principal, descrie pe scurt ce vezi și întreabă-mă ce vreau să fac.

info

Fișierele de instrucțiuni pentru agenți: Fișierele de instrucțiuni pentru agenți (AGENTS.md și ghidul de lucru dedicat computer use: recunoașterea stării ecranului, clicuri sigure, puncte de așteptare, greșeli frecvente) există doar în instalarea Ultimate. În celelalte ediții, promptul de mai sus îi dă singur agentului cele mai necesare reguli din aceste fișiere.

În mijlocul sesiunii, pentru a îndrepta agentul spre ecran:

Pentru operațiile care nu se pot face cu comenzi de terminal folosește computer use: mai întâi fă o captură a ferestrei StatiCAD de pe ecran, apoi deschide meniul sau fereastra respectivă. Dacă un dialog rămâne deschis, comenzile de terminal așteaptă; verifică dialogul și închide-l. La final fă o captură de ecran a vizualizării 3D și rezumă-mi cum ai verificat modelul.

7. În timp ce agentul lucrează

• Nu atingeți mouse-ul și tastatura; clicurile agentului se amestecă cu ale dumneavoastră.
• Urmăriți ce face agentul în fereastra de chat. Dacă merge într-o fereastră sau într-un meniu greșit, întrerupeți lucrul cu butonul de oprire și scrieți din nou ce trebuie să facă.
• Dacă în StatiCAD a apărut o modificare nedorită, după oprire anulați-o cu Ctrl+Z.
• Cereți-i agentului ca la pașii importanți (de ex. la terminarea analizei, la previzualizarea raportului) să facă o captură de ecran și să rezume ce vede.

8. Siguranță

danger

Îi permiteți altcuiva să vă folosească ecranul:

• Agentul poate folosi doar aplicațiile pe care le-ați permis; înainte de a permite alte aplicații decât StatiCAD, întrebați de ce.
• Nu-l lăsați pe agent să scrie parole, date de card sau numere de identificare; dacă vedeți o asemenea cerere, opriți lucrul.
• Tot ce apare pe ecran (documente deschise, notificări) intră în imaginea trimisă companiei de inteligență artificială. Închideți informațiile confidențiale.
• Dacă agentul vede un avertisment de licență, precum „Cheia nu a fost găsită” („Kilit Bulunamadı”), trebuie să se oprească și să vă anunțe; operațiile legate de cheie și licență faceți-le dumneavoastră.

9. Depanare

Simptom	Cauză și soluție
Agentul face clic în locuri greșite	Scalarea ecranului nu este 100% sau fereastra este mică. Setați scalarea la 100%, măriți fereastra StatiCAD; cereți-i agentului să verifice cu o captură de ecran înainte de fiecare clic.
Opțiunea computer use nu apare	Aplicația nu este actualizată sau planul nu este potrivit (la Claude este necesar Pro/Max). Actualizați și încercați din nou.
Agentul nu găsește meniurile programului	Spuneți-i dumneavoastră numele meniurilor (de ex. „din meniul Analiză, EFECTUEAZĂ ANALIZA STATICĂ”) sau cereți-i să citească AGENTS.md (în folderul Ultimate).
Agentul a rămas blocat într-o fereastră	Poate fi o fereastră de întrebare sau de avertisment rămasă deschisă. Spuneți-i să verifice fereastra sau închideți-o dumneavoastră.
Calculatorul nu poate fi folosit cât timp lucrează Codex	În Windows, Codex lucrează în prim-plan; așteptați până se termină lucrul.

Denumirile planurilor, prețurile și numele meniurilor serviciilor Anthropic, OpenAI și Google se pot schimba în timp; pentru informații actuale consultați paginile oficiale indicate. Modelul creat și rezultatele produse de inteligența artificială trebuie verificate de inginerul responsabil.