chrome bridge automation

CRITICAL RULES — VIOLATIONS WILL BREAK THE WORKFLOW: Never run midscene commands in the background. Each command must run synchronously so you can read its output (especially screenshots) before deciding the next action. Background execution breaks the screenshot-analyze-act loop.

Run only one midscene command at a time. Wait for the previous command to finish, read the screenshot, then decide the next action. Never chain multiple commands together.

Allow enough time for each command to complete. Midscene commands involve AI inference and screen interaction, which can take longer than typical shell commands. A typical command needs about 1 minute; complex act commands may need even longer.

Automazione del browser basata sulla visione utilizzando la modalità Midscene Bridge. Funziona interamente tramite screenshot: non sono richieste DOM o etichette di accessibilità. Può interagire con tutti gli elementi visibili sullo schermo indipendentemente dallo stack tecnologico. Questa modalità si connette al browser Chrome desktop dell'utente tramite l'estensione Chrome Midscene, preservando cookie, sessioni e stato di accesso. Utilizza questa abilità quando l'utente desidera: - Sfoglia, naviga o apri pagine web nel browser Chrome dell'utente - Interagisci con pagine che richiedono sessioni di accesso, cookie o stato del browser esistente - Raschia, estrai o raccogli dati da siti Web utilizzando il browser reale dell'utente - Compila moduli, fai clic sui pulsanti o interagisci con elementi web - Verificare, convalidare o testare il comportamento dell'interfaccia utente del frontend - Cattura screenshot delle pagine web - Automatizza i flussi di lavoro web in più fasi - Controllare il contenuto o l'aspetto del sito Web Realizzato da Midscene.js (https://midscenejs.com) Fonte: web-infra-dev/midscene-skills.