A OpenAI lançou recentemente uma nova atualização de recurso “Uso do computador” para seu aplicativo de desktop Codex na plataforma macOS, permitindo que este agente de codificação inteligente opere remotamente aplicativos autorizados pelo usuário, mesmo quando o Mac está bloqueado. Essa mudança significa que os usuários podem executar tarefas no Codex em seus telefones e ele executará uma série de ações em seus Macs enquanto a tela estiver desligada e o computador bloqueado.
De acordo com um exemplo de captura de tela postado pela equipe de desenvolvedores OpenAI na plataforma social
Para habilitar esse recurso, os usuários precisam instalar o plug-in Computer Use e conceder-lhe permissões de gravação de tela e acessibilidade nas configurações do sistema. Uma vez configurado, o Codex pode realizar operações como clicar em janelas, inserir texto, navegar em menus e acessar a área de transferência em aplicativos explicitamente autorizados pelo usuário, simulando comportamentos normais de uso humano em interfaces gráficas. OpenAI disse que esse recurso visa principalmente cenários de uso difíceis de cobrir com ferramentas de linha de comando, como reproduzir bugs que aparecem apenas na interface gráfica, ajustar configurações de aplicativos ou executar processos específicos em aplicativos de desktop que o Codex está ajudando a desenvolver.
Em termos de segurança e controle de permissão, o Codex obterá o consentimento do usuário antes de assumir cada novo aplicativo pela primeira vez. Os usuários também podem optar por definir “Sempre permitir” para aplicativos específicos para reduzir operações repetidas de confirmação. A OpenAI também enfatizou que este recurso não estará aberto a usuários no Espaço Econômico Europeu, no Reino Unido e na Suíça no estágio inicial de lançamento, e não pode ser usado em aplicativos de terminal automatizados, aplicativos do próprio Codex e janelas de prompt de permissão de administrador em nível de sistema. Esta limitação reflete as compensações regionais que a OpenAI ainda precisa fazer em torno dos limites de conformidade e segurança, ao mesmo tempo que fortalece as capacidades de automação e operação remota.
Esta atualização também dá continuidade à recente série de expansões de recursos do Codex, incluindo a recém-lançada função “Appshots” e “/goal mode”. Entre eles, o Appshots permite que os usuários injetem capturas de tela da janela atual do aplicativo Mac e conteúdo de texto relacionado na conversa do Codex com um clique, clicando duas vezes na tecla Command (atalho Command-Command), para que o agente possa entender o contexto da interface e fornecer operações ou sugestões direcionadas. O modo /goal permite que o Codex trabalhe continuamente por horas ou até dias em torno de um objetivo claro, proporcionando maior continuidade e recursos de planejamento em cenários como agentes de codificação, automação de operações de desktop e avanço de tarefas de longo prazo.