OpenAI lança Computer Use para automatizar tarefas manuais no desktop

OpenAI lançou o plugin Computer Use para o Codex, que automatiza tarefas manuais em desktops Mac e Windows. A ferramenta simula cliques, digitação e navegação entre apps em background, acelerando fluxos repetitivos.

• Operação com cursor próprio em background no macOS, sem travar o sistema.
• Suporte básico no Windows, sem controle total do cursor ainda.
• Integração com mais de 90 plugins de apps como Gmail, Slack, Photoshop, Premiere.
• Permissões configuráveis, mas com riscos de privacidade e segurança.

Lide

OpenAI anunciou o lançamento do plugin Computer Use para seu agente de codificação AI Codex, permitindo a automação de tarefas manuais em aplicativos locais no desktop, principalmente para usuários de macOS. A funcionalidade entrou em rollout inicial em 16 de abril de 2026 para usuários que acessam o Codex via ChatGPT, com suporte básico para Windows em desenvolvimento. O plugin simula ações humanas — clicar, digitar e navegar — para executar fluxos de trabalho repetitivos em background, reduzindo significativamente o tempo gasto em operações manuais em software como Photoshop, Premiere, Slack e navegadores.

Recursos técnicos

• O plugin funciona com controle de cursor próprio em background no macOS, permitindo múltiplos agentes rodando paralelamente sem interferir no usuário.
• No Windows, é possível acessar dados de apps, porém ainda não há controle total do cursor para automação completa.
• Mais de 90 plugins integrados cobrem apps populares, incluindo Gmail, Google Drive, Slack, GitHub e Microsoft Suite, instaláveis via CLI ou app.
• O Codex pode executar tarefas complexas como debugar páginas web, exportar arquivos no Photoshop, limpar projetos no Premiere e renomear lotes de arquivos automaticamente.
• Inclui recursos avançados como memória para preferências do usuário, agendamento de jobs futuros e sugestões baseadas em contexto.

Funcionalidades avançadas

• Suporte a workflows multi-step envolvendo múltiplos aplicativos, interagindo com UIs complexas em background.
• Customização do navegador padrão e fallback para plugins específicos de apps quando disponíveis.
• Geração de mockups conceituais com o gpt-image-1.5 e multitasking com múltiplas abas de terminal.

Riscos e limitações

• O plugin requer aprovação explícita para operar com permissões totais em apps locais, o que pode expor dados sensíveis se mal configurado.
• Limitado a macOS para controle completo do cursor, com Windows oferecendo capacidade reduzida até o momento.
• Problemas potenciais com interfaces de usuário dinâmicas podem gerar erros em cliques automáticos, especialmente em apps complexos como Premiere.
• Regiões como União Europeia e Reino Unido não terão acesso imediato devido a regulamentações de privacidade.
• Dependência de autenticação de terceiros pode causar falhas ou riscos de segurança se servidores intermediários forem comprometidos.

Impacto e mercado

A ferramenta promete transformar o desktop tradicional em ambiente “AI-native”, aumentando em até dez vezes a produtividade em fluxos locais manuais. Contudo, pode gerar preocupações quanto à substituição de algumas funções manuais, especialmente em setores como QA e assistentes virtuais básicos. O rollout inicial é gratuito para usuários do ChatGPT, com possibilidades de acesso corporativo e educacional futuramente.

Vídeo demonstração

Veja o vídeo oficial da OpenAI demonstrando o Computer Use em ação:

Fontes oficiais e reportagens detalhadas podem ser consultadas para mais informações.

Links de referência: TheRundown, MacRumors, VentureBeat.