Desktop Tutor
Um tutor de desktop com IA que estuda a tela, localiza o elemento, guia visualmente o clique e verifica — sem nunca clicar pelo usuário.
- Registro
- PROJ // DESKTOP-TUTOR
- Classificação
- Em desenvolvimento
Esquema abstrato do ciclo de tutoria; não é uma captura de tela do produto.
Não é só “Desktop Tutor”.
Desktop Tutor usa um agente para estudar a tela, achar um elemento por acessibilidade (UIA), mover o cursor nativo até o alvo, mostrar um overlay de orientação e verificar o clique.
O humano é quem clica: pedagogia e segurança antes de automação cega.
Componentes incluem overlay click-through, sondagem por UIA com DPI por monitor e verificação universal de clique.
O que precisa deixar de ser frágil.
Ensinar alguém a operar um software na tela costuma depender de atenção síncrona ou capturas rígidas; um tutor orienta passo a passo sobre a tela real.
Transforma guias de desktop em fluxos passo a passo verificáveis, com o usuário sempre no controle do clique.
Arquitetura e limites.
- Nunca clicar pelo usuário — o humano executa o clique.
- Usar acessibilidade (UIA) para localizar elementos, com DPI por monitor.
- Mover o cursor nativo do agente até o alvo com física real.
- Verificar cliques com hook de mouse.
O que o sistema ensinou.
- Uma boa tutoria deixa o humano no controle do clique e separa orientação de automação.
- Acessibilidade por UIA dá alvos precisos mesmo com DPI variados.
Tem um sistema difícil de explicar?
Infraestrutura, automação, agentes, ferramentas locais ou um problema que atravessa camadas demais para caber num ticket convencional.