Como automatizar um site que não tem API
Use a interface que o site já oferece quando não há endpoint: portais, consoles administrativos, sistemas legados e ferramentas internas.
Quando um site não tem API, a interface é a superfície de integração. Um agente de navegador lê a página, executa as mesmas ações que uma pessoa executaria e verifica o resultado, o que torna portais de fornecedores, consoles administrativos e ferramentas internas legadas automatizáveis sem esperar por um endpoint que talvez nunca exista.
A integração que nunca chega
A maioria dos softwares de negócio tem, na melhor das hipóteses, cobertura parcial de API. O fluxo de trabalho de que você precisa costuma estar atrás de uma tabela, uma tela administrativa, um portal de fornecedor ou uma ferramenta interna legada, e o endpoint está ausente, sem documentação, limitado por taxa, ou trancado atrás de um plano que você não tem.
O navegador é a camada comum em tudo isso. Qualquer coisa que uma pessoa consiga fazer em uma aba é automatizável, o que torna o navegador a superfície de integração de último recurso e, muitas vezes, a única disponível.
- Portais de fornecedores e parceiros sem API pública
- Consoles administrativos em que a API não cobre a ação exata que você precisa
- Sistemas internos legados que ninguém vai migrar de plataforma
- Planos de SaaS que colocam o acesso à API atrás de um plano superior
Fazendo isso com responsabilidade
Acesso via navegador não é permissão para ignorar as regras de um site. Use um agente somente onde você está autorizado, e respeite os termos de serviço, as instruções de robots.txt quando aplicável, os limites de taxa, as obrigações de privacidade e a lei aplicável. Esta é uma ferramenta para trabalho legítimo, não um jeito de contornar controles de acesso ou proteção antibot.
Na prática, isso significa: suas próprias contas, seus próprios portais de fornecedor, sistemas que sua organização tem o direito de usar, e uma pessoa revisando qualquer coisa consequente.
Tornando isso confiável
Dê ao agente o menor escopo que ainda completa a tarefa, comece a partir da página em vez de pedir para ele encontrar o site, e exija aprovação antes de qualquer gravação. Verifique o resultado do jeito que uma pessoa verificaria: releia a página depois da ação e confirme que a mudança realmente aconteceu.
- Comece na aba que já tem o registro aberto
- Mantenha o escopo em Esta aba, a menos que a tarefa realmente abranja várias
- Aprove antes de enviar, publicar, pagar ou excluir
- Peça a evidência, não só a conclusão
Perguntas frequentes
Isso é o mesmo que web scraping?
Relacionado, mas mais amplo. Web scraping lê. Um agente de navegador também consegue agir: preencher um formulário, atualizar um registro, mover informação entre sistemas. Os dois carregam a mesma responsabilidade de respeitar termos e lei.
Ele quebra quando o fornecedor redesenha o portal?
Muito menos que um script de seletores, porque o agente mira no significado, não na estrutura DOM. Um redesenho que quebraria um script costuma ser só uma releitura para um agente.
Ele funciona atrás de um login?
Sim. Ele roda no seu navegador de verdade, em uma aba que você conecta, então usa a sessão em que você já está logado. Ele nunca digita senhas.
