Computer Use
Uso do Computador
O uso do computador permite que um modelo visualize uma tela e retorne ações como clicar, digitar ou rolar. Um mecanismo de aplicação verifica e executa cada ação permitida.
screen → action → harness → next screentela atual: expense.testUm agente abre um aplicativo de despesas de teste e preenche um rascunho de $248. Ele faz uma pausa antes de enviar e registra cada tela e ação.captura de teladigite o valorpermitir · executarscreen → model action → harness check/execute → next screenOPSOutro exemplo
Um agente abre um aplicativo de despesas de teste e preenche um rascunho de $248. Ele faz uma pausa antes de enviar e registra cada tela e ação.
Partes principais
- 01Tela atual
- 02Ação retornada
- 03Alvo e argumentos
- 04Verificação de arnês
- 05Resultado da ação
- 06Aprovação, log e parar
Use-o quando
Use-o quando uma interface visual precisar ser operada e nenhuma API estável for adequada. Adicione isolamento, limites de ação, confirmação e regras de parada.
Não o use quando
Prefira uma API testada quando houver uma disponível. Exija que uma pessoa confirme pagamento, exclusão, entrada de segredo ou alterações de conta.
Nome usado no código
screen → model action → harness check/execute → next screen Antes de lançar
Check the model and prompt versions, source data, versioned evaluation set, and measures. Verify links to evidence, tool permissions, privacy, common failures, decline-to-answer and fallback behavior, human review, monitoring, cost, speed, and rollback.
Outcome: Complete the task with Uso do Computador (Computer Use). User context: Um agente abre um aplicativo de despesas de teste e preenche um rascunho de $248. Ele faz uma pausa antes de enviar e registra cada tela e ação. AI method or concept: Uso do Computador (Computer Use). Why it fits: Use-o quando uma interface visual precisar ser operada e nenhuma API estável for adequada. Adicione isolamento, limites de ação, confirmação e regras de parada. Do not use it when: Prefira uma API testada quando houver uma disponível. Exija que uma pessoa confirme pagamento, exclusão, entrada de segredo ou alterações de conta. AI requirements: Define the input and source evidence. Set model and tool permissions. Use versioned evaluation data and measures. Define failure, decline-to-answer, privacy, speed, and cost limits. Operational safeguards: Keep a clear trace and hide sensitive log data. Show users a safe fallback. Mark steps that need human review. Define how to roll back the model or prompt. Acceptance criteria: Record baseline and target measures on a versioned evaluation set. Test edge cases and hostile inputs. Verify fallback, monitoring, permissions, and rollback. Evidence and limits (evidence boundary): É oficial para essa fonte. Outras plataformas ou equipes podem usar o termo de outra maneira. Unknowns to confirm: Target task, model and version, evaluation owner, source data, risk limit, tool permissions, and production fallback.
Conferir este pedido
Review how Uso do Computador (Computer Use) is used now. Definition: O uso do computador permite que um modelo visualize uma tela e retorne ações como clicar, digitar ou rolar. Um mecanismo de aplicação verifica e executa cada ação permitida. Release checks: Check the model and prompt versions, source data, versioned evaluation set, and measures. Verify links to evidence, tool permissions, privacy, common failures, decline-to-answer and fallback behavior, human review, monitoring, cost, speed, and rollback. Before changing code, list the evidence, gaps, severity, and the smallest safe fix.