O aplicativo do Codex para macOS foi atualizado recentemente com duas grandes novidades: um novo recurso de captura contextual da tela denominado Appshots e a possibilidade de o agente operar no computador mesmo quando ele estiver bloqueado.
Começando pelo primeiro recurso, o Appshots pode ser ativado por meio do atalho ⌘ command ⌘ command e, quando acionado, envia para uma conversa do Codex o contexto da janela ativa do sistema — incluindo tanto uma captura de tela quanto os textos presentes nela.
Posts relacionados
- OpenAI amplia disponibilidade do recurso Biblioteca no ChatGPT
- OpenAI disponibiliza Codex no app do ChatGPT para iOS
- OpenAI anuncia novas integrações para o Codex e o ChatGPT
Esses dados são fornecidos ao app a partir de APIs de Acessibilidade do macOS e permitem que o Codex obtenha não somente o conteúdo que estiver visível na tela — o que é importante para que o app tenha uma compreensão mais ampla em documentos extensos, por exemplo.
Outro ponto interessante é que, caso você faça mais de um Appshot dentro de um intervalo de 60 segundos, eles serão agrupados em um único chat — o que facilitará a análise de múltiplas telas pelo Codex de uma única vez.
Computer Use com a tela bloqueada
Desde o ano passado, já era possível usar o Computer Use para permitir que o Codex veja e opere aplicativos no macOS. Com a nova atualização, isso pode ser feito de forma remota, e mesmo com a tela bloqueada.
Para que isso seja possível, o Codex suspende a proteção da tela temporariamente para realizar a tarefa solicitada e a “cobre” ativamente para ocultar o que está sendo processado, garantindo a privacidade do usuário.
Além disso, se o sistema detectar qualquer entrada física de teclado ou mouse, o Mac é bloqueado novamente de forma imediata e a tarefa é pausada até que você o desbloqueie manualmente.
O Appshots e o Computer Use estão disponíveis para usuários do Codex, incluso nos planos Plus, Pro, Business, Edu e Enterprise do ChatGPT. Por tempo limitado, o Codex também pode ser usado nos planos gratuito e Go.