Aplicando inteligência artificial generativa em testes automatizados

Essa talk tem o objetivo de compartilhar com a comunidade os desafios e resultados obtidos na construção da voidr.co, uma solução AI powered que gera testes automatizados a partir da navegação de usuários em aplicações web e APIs.

Saiba mais em voidr.co

Talk completa aqui:
https://youtu.be/OuPIN1rlsCg?t=9329

Transcript

1. Aplicando inteligência artificial generativa em testes automatizados Milson Júnior Founder & CEO voidr.co Aplicando inteligência artificial generativa em testes automatizados - 26/04/2024
2. Milson Júnior Founder & CEO na voidr linkedin.com/in/milsonjr/
3. Monitoramento sintético com testes automatizados gerados com IA para aplicações web e APIs Saiba mais em voidr.co
4. O que aprendemos sobre automação de testes no Brasil
5. Aprendizados do processo de Discovery - 59% dizem que testes manuais são ineficientes - 65% focam em remediar e não prevenir - 77% dizem que devs devem garantir qualidade - 82% dizem que devs não possuem tempo para garantir qualidade - 6% estão satisfeitos com suas pipelines de testes automatizados *Dados coletados em processo de discovery com 272 empresas
6. Oportunidade para uso de IA Novo paradigma focado em times de alta performance Times não possuem tempo hábil para automatizar testes ❌
7. Onde está o maior gargalo? Testar comportamentos reais dos usuários de forma contínua ✅ Times gastam milhares de horas por mês em testes manuais ❌
8. Hipótese de funcionamento da solução É possível usar IA generativa para criar cenários de teste? É possível abstrair toda infraestrutura? É possível tornar troubleshooting mais eficiente? ⭐
9. Começando o MVP usando GenAI do jeito errado 🥲
11. ❌ Lento
12. ❌ Lento ❌ Custo inviável
13. ❌ Lento ❌ Custo inviável ❌ Resultados ruins
14. 😎 Dividir para conquistar
15. Problema #1 Coletar dados de forma estruturada
16. Problema #2 Identificar módulos e casos
17. Problema #3 Gerar scripts de automação
18. Coleta de dados
19. Categorização de casos (RAG)
20. Categorização de módulos e casos
21. Categorização de módulos e casos
22. Categorização de módulos e casos
23. Categorização de módulos e casos
24. Categorização de módulos e casos
25. Categorização de módulos e casos
26. Categorização de módulos e casos
27. Categorização de módulos e casos
28. Categorização de módulos e casos
29. Categorização de módulos e casos
30. Categorização de módulos e casos
31. Categorização de módulos e casos
32. Geração de scripts de automação
33. Geração de scripts de automação
34. Geração de scripts de automação
35. Geração de scripts de automação
36. Geração de scripts de automação
37. Geração de scripts de automação
38. Geração de scripts de automação
39. Geração de scripts de automação
40. Juntando as peças Módulos sumarizados
41. Suites categorizadas de acordo com o uso da aplicação Juntando as peças
42. Scripts de automação gerados e atualizados por IA generativa Juntando as peças
43. Juntando as peças
44. Juntando as peças
45. Desafios Redact de dados sensíveis 👀 Alucinações em flaky tests 🤪 Assertividade dos outputs em tarefas complexas 🪄
46. Resultados Planejamento de testes, cenários e casos 18x mais rápido 🔥 Criação e atualização de scripts de automação 8x mais rápido ⚡ Economia de 80% em horas para manter suites de teste 💰
47. Milson Júnior Founder & CEO voidr.co linkedin.com/in/milsonjr/ Muito obrigado! ⚡Acesse voidr.co