🌅 Seaclic

Controlla il tuo computer usando solo la voce, i movimenti della testa e lo sguardo. Il riconoscimento vocale supporta l'utilizzo di CapisciAMe, il servizio ideato da Davide Mulfari per comprendere il parlato italiano di persone con disartria. Cerca elementi sullo schermo, muovi il cursore, esegui macro personalizzate, rimappa input fisici, gioca ai videogiochi e controlla il PC con gli occhi — tutto senza toccare mouse o tastiera.

📖 Inizia qui — Guida rapida

Sei modalità, infinite possibilità

Seaclic offre sei modi indipendenti per interagire col PC. Puoi attivarli tutti insieme o usarli singolarmente. Tracking e Gaze operano in thread dedicati, in parallelo rispetto alle modalità vocali.

🔍
Trova + Spiega

Pronuncia il nome di qualsiasi elemento sullo schermo e Seaclic lo trova e ci clicca sopra. Con Spiega, l'IA descrive lo schermo e risponde alle tue domande a voce.

🖱️
Mouse

Di' "destra", "su", "click" o "doppio click" per controllare il cursore del mouse interamente con la voce, senza toccare nulla.

🎤
Comandi

Associa parole a tasti, combinazioni di tasti, pulsanti del gamepad o azioni speciali. Perfetto per i videogiochi e le macro personalizzate.

⌨️
Input

Rimappa qualsiasi input fisico — tasti, pulsanti mouse, pulsanti gamepad — in azioni custom. Ideale per switch access e controller alternativi.

📷
Tracking

Muovi la testa davanti alla webcam per controllare il cursore, lo stick di un gamepad virtuale o premere tasti direzionali. Calibrazione guidata in 5 passi.

👁
Gaze

Controlla il mouse con lo sguardo tramite webcam o eye tracker Tobii ET5. Attiva Eye Button sullo schermo fissandoli e clicca ammiccando un solo occhio.

Scopri tutte le modalità in dettaglio →

Come funziona?

Installa e avvia Seaclic

Scarica l'installer, fai doppio clic e segui le istruzioni. In meno di un minuto sei pronto.

Scegli le modalità che ti servono

Attiva una o più modalità: Trova per cliccare sugli elementi, Mouse per muovere il cursore, Comandi per le tue macro, Tracking per i movimenti della testa, Gaze per controllare col lo sguardo.

Premi START e parla

Quando sei pronto, premi il pulsante START (o pronuncia la parola di attivazione). Seaclic ascolta e agisce.

Il gioco è fatto!

Naviga nel computer, gioca ai videogiochi o usa qualunque programma — senza toccare mouse o tastiera.

Funzionalità principali

🔍 Ricerca intelligente sullo schermo

Grazie alla tecnologia OCR (riconoscimento testo) e all'intelligenza artificiale GroundingDINO (riconoscimento oggetti), Seaclic può trovare qualunque cosa visibile sullo schermo. Sono disponibili anche il backend VLM locale (Qwen2.5-VL via Ollama, nessun dato in rete) e il backend Cloud (Azure OpenAI / GPT-4.1) che comprende l'intento: dire "chiudi Word" troverà il pulsante ✕ anche senza pronunciarne il nome esatto.

🔍🖥️

💬 Spiega — l'IA descrive lo schermo

La modalità Spiega permette di chiedere all'IA di descrivere ciò che appare sullo schermo e di intrattenere una conversazione multi-turno con domande di approfondimento. La risposta viene letta ad alta voce con TTS automatico. Particolarmente utile per utenti ipovedenti. Richiede backend VLM locale o Cloud.

💬🤖

🎮 Gamepad virtuale per i videogiochi

Seaclic crea un controller XBox 360 virtuale riconosciuto da qualunque gioco. Puoi associare comandi vocali a pulsanti, trigger analogici e joystick — oppure usare il face tracking per controllare lo stick direzionale muovendo la testa. Il Voice Joystick Overlay garantisce la coesistenza tra comandi vocali e tracking/gaze sugli stessi assi analogici.

🎮🕹️

⌨️ Input binding: rimappa qualsiasi tasto

La modalità Input intercetta input fisici (tasti, pulsanti mouse, pulsanti gamepad) e li trasforma in qualsiasi azione supportata da Seaclic. Trigger configurabile su pressione, rilascio o mantenimento, con opzione di sopprimere l'input originale per un remapping completo. Ideale per switch access e dispositivi alternativi.

⌨️🔄

📷 Tracciamento facciale

Con una semplice webcam, Seaclic traccia i movimenti della tua testa in tempo reale a 30 fotogrammi al secondo. Ogni direzione (su, giù, sinistra, destra) può essere mappata a un tasto, un pulsante gamepad, un trigger analogico o un asse del joystick. Calibrazione guidata in 5 passi e auto-drift per compensare i cambi di postura nel tempo.

📷👤

👁 Tracciamento oculare (Eye Tracking)

La modalità Gaze usa la webcam o un Tobii Eye Tracker 5 per seguire il tuo sguardo e spostare il cursore sullo schermo. I bottoni Eye Button si attivano fissandoli per un istante (dwell). Puoi anche cliccare ammiccando un singolo occhio. Calibrazione a 9 punti e profili multipli per diversi contesti d'uso.

👁🖱️

🏠 Domotica: Broadlink IR, Alexa, Google Home

Associa comandi vocali, Eye Button o input fisici a segnali infrarossi per controllare TV, condizionatori e altri dispositivi IR via Broadlink RM4 Mini. Oppure integra con Home Assistant per inviare comandi ad Amazon Alexa e Google Home dalla voce o dallo sguardo.

🏠📡

A chi è rivolto?

Accessibilità motoria

Pensato per chi ha difficoltà a usare mouse e tastiera tradizionali. Controlla il computer in modo alternativo con voce, movimenti del capo e sguardo. Supporto speciale per il parlato italiano di persone con disartria (CapisciAMe).

🎮
Videogiochi accessibili

Il gamepad virtuale, il face tracking e l'eye tracking permettono di giocare a qualunque videogioco che supporti un controller — senza toccare alcun dispositivo fisico.

👁
Utenti ipovedenti

La modalità Spiega, con TTS automatico e conversazione multi-turno con l'IA, permette di capire qualsiasi schermata senza doverla necessariamente guardare.

🏠
Controllo ambientale

Tramite Eye Button, comandi vocali e integrazione con Broadlink IR, Alexa e Google Home, Seaclic diventa uno strumento di controllo ambientale domestico.

Pronto per iniziare?

Consulta la guida rapida per installare Seaclic, configurarlo e scoprire le combinazioni più interessanti.

📖 Guida rapida