Teste de desempenho do site
O Guia Final
Embora existam literalmente centenas de diferentes tipos de testes de software, talvez um dos tipos mais críticos e desafiadores seja o teste de desempenho. O que é teste de desempenho? A definição de teste de desempenho pode ser resumida como o processo de testar um sistema sob carga para identificar gargalos de desempenho. Dentro do guarda-chuva de teste de desempenho, há subconjuntos de testes de desempenho, como testes de carga, testes de estresse, testes de resistência, testes de pico, testes de volume e testes de escalabilidade. Testes de carga e testes de estresse são tipicamente os tipos de teste de desempenho mais populares e conhecidos, mas cada tipo de teste de desempenho se propõe a descobrir e resolver problemas específicos relacionados ao desempenho.
Se você está planejando uma promoção durante as compras da Black Friday e Cyber Monday, por exemplo, você vai querer garantir que seu site possa lidar com um número esperado de visitantes navegando pelo seu site ao mesmo tempo. Criar e executar um cenário de teste de desempenho antes do grande feriado de compras permite simular o que aconteceria com seu site quando centenas ou milhares de visitantes aparecessem no seu site ao mesmo tempo. Como resultado do teste, os dados resultantes podem ajudar a descobrir problemas com velocidade do site, estabilidade, tempos de resposta e recursos. Saber onde ocorrem gargalos de desempenho pode preparar melhor seu site para o tráfego antecipado e proporcionar uma melhor experiência ao usuário para seus visitantes.
Por que o teste de desempenho é importante?
Testes de desempenho são importantes por muitas razões, mas oferecer uma experiência de classe mundial para seus visitantes e clientes está no topo da lista. Não só garantir que seus sites e aplicativos tenham um desempenho sob carga, ou estresse, importante, pode ter um impacto direto nas vendas. Por exemplo, se seu site ou aplicativo não carregar rapidamente ou executar as expectativas de um visitante, eles provavelmente deixarão seu site e encontrarão o que estão procurando em outro lugar. Isso significa perder o que teria sido um cliente em potencial, além de perder receita para um concorrente.
Testes de desempenho não são algo que se faz uma vez por ano. Por exemplo, existem grandes feriados de compras online quase todos os meses do ano. A execução de testes regulares de desempenho garante que seus sistemas, sites e aplicativos se comportem normalmente, estão funcionando de forma eficiente e estão continuamente fornecendo uma melhor experiência geral em momentos de alto tráfego. Quaisquer problemas ou gargalos que sejam descobertos durante os testes podem ser corrigidos continuamente, de modo a não impactar os visitantes reais no ambiente ao vivo. Isso também dá aos seus stakeholders de negócios internos mais confiança de que seus sites e aplicativos serão capazes de gerenciar o fluxo de visitantes e picos de tráfego ao lançar a próxima grande promoção.
Benefícios do Teste de Desempenho
Como mencionamos, o principal benefício dos testes de desempenho é proporcionar uma ótima experiência ao usuário. Como alguém que visita seu site pela primeira vez, é fundamental que ele não seja prejudicado pelo carregamento lento de páginas da Web ou aplicativos que expiram continuamente ou não funcionam corretamente. Isso é especialmente verdade para a experiência móvel, já que mais usuários estão abandonando desktops para dispositivos móveis. O desempenho do dispositivo móvel é mais impactado pelas condições da rede, portanto, garantir que seu site seja otimizado para carregar rapidamente e ter um bom desempenho, mesmo sob as condições mais lentas da rede, pode fazê-lo ou quebrá-lo para um visitante.
Testes de desempenho podem garantir que não só seus sites e aplicativos possam ser realizados durante grandes aumentos em usuários simultâneos, mas também mostrar como seu sistema responde, para que você possa ver como ele é dimensionado à medida que a carga é colocada no sistema e como os recursos são implantados para atender a essa demanda. Embora a velocidade e o tempo de carga seja tipicamente o principal fator por trás dos testes de desempenho, problemas de escalabilidade podem levar a erros e afetar o uso de disco e CPU. Obter uma visão de referência e holística de onde seu sistema está, do ponto de vista de desempenho, pode lhe dar os dados necessários para o planejamento de capacidade e atualização do hardware, se necessário.
O que acontece se você pular testes de desempenho?
O teste de desempenho é um dos mais importantes tipos de testes de software, mas muitas organizações não realizam regularmente testes de desempenho, seja porque não acham que é importante ou talvez devido a razões orçamentárias. Seja qual for o caso, as organizações correm o risco de perder muito ao não incluir testes de desempenho no ciclo de desenvolvimento. Como mencionamos antes, a experiência do usuário pode fazer ou quebrar uma venda. Se você é site ou aplicativo não está funcionando como planejado, os visitantes vão começar a saltar. E quando isso acontece, já é tarde demais para recuperá-los. Testes de desempenho teriam ajudado a identificar gargalos que poderiam ter sido corrigidos bem antes de qualquer coisa ser colocada no ambiente de produção ao vivo.
Se você tem um site ou aplicativo que será acessado e usado por muitos visitantes, clientes ou usuários internos, é vital que os testes de desempenho não sejam ignorados. Suas equipes de marketing e vendas fizeram seu trabalho para promover, engajar e vender serviços e produtos para as massas. Ao não ter seu site ou aplicativo preparado para funcionar de forma ideal e executar sob carga, você corre o risco de ter visitantes e clientes insatisfeitos, perdendo qualquer lealdade de marca que eles potencialmente possam ter tido antes de pousar em seu site. Não arrisque perder potenciais clientes por não gastar algum tempo e investimento em testes de desempenho.
Sem cartão de crédito, sem contrato.
Teste de desempenho vs. Teste de carga vs. Teste de Estresse
Qual é a diferença?
Como mencionamos anteriormente, existem vários tipos de testes que se enquadram na categoria de teste de desempenho. Normalmente, quando alguém fala sobre testes de desempenho, provavelmente está se referindo a testes de carga ou estresse, pois são os tipos mais comuns de testes realizados. E embora existam semelhanças entre testes de carga e testes de estresse, falaremos mais detalhadamente sobre testes de carga e testes de estresse, qual a diferença entre eles, como eles são usados, bem como os outros tipos de testes de desempenho.
O teste de desempenho é uma forma de teste não funcional. Ao contrário dos testes funcionais que buscam testar se certas funcionalidades de software funcionam ou não, testes não funcionais verificam os aspectos não funcionais, como usabilidade, desempenho e confiabilidade de um aplicativo. O teste funcional é realizado antes dos testes de desempenho. Em comparação com testes não funcionais, os testes funcionais podem ser realizados rapidamente e podem ser feitos manualmente. Os testes não funcionais estão um pouco mais envolvidos e normalmente precisam ser automatizados.
Como exemplo, testes funcionais testariam se os usuários podem ou não entrar em seu portal ou conta. Simplificando, essa função funciona ou não. O teste de desempenho leva os testes funcionais para o próximo nível e testaria quantos usuários simultâneos podem fazer login nesse portal ou conta. Isso permitiria que você entendesse como seu sistema lida e se comporta sob estresse, para que você possa encontrar gargalos e áreas para melhorar, seja otimizando o código, diminuindo o tempo de carga ou adicionando capacidade de hardware.
Todos os tipos de testes de desempenho envolvem simular condições específicas e cargas de trabalho pré-definidas em um aplicativo ou site. Quando se trata de testes de desempenho, quanto mais você pode simular condições do mundo real, melhores são os resultados dos testes. Os testes de desempenho devem ser realizados regularmente, mas definitivamente devem ser feitos antes de novas versões de software, eventos em que você espera um grande aumento de visitantes em seu site ou se os usuários comentam que suas páginas ou aplicativos são lentos. Testes de carga e estresse podem ajudar a identificar quais elementos estão vacilando e dar dados que ajudarão você a identificar o que precisa ser corrigido.
O teste de carga implica colocar uma carga pré-definida ou esperada em um sistema, aplicativo ou site, a fim de ver como o sistema gerencia a carga e onde existe degradação de desempenho. O objetivo do teste de carga é garantir que o sistema possa gerenciar a carga dentro de limites de desempenho específicos. Por outro lado, um teste de estresse simplesmente empurra um aplicativo, local ou sistema com aumentos de carga até que o sistema atinja seu ponto de ruptura. Quando o teste de carga definir uma carga de trabalho pré-definida, o teste de estresse aumentará continuamente a carga até que ocorra degradação ou falha completa. Agora, é possível que um teste de carga se torne inesperadamente um teste de estresse se acontecer de você empurrar seu sistema para além do ponto onde há recursos disponíveis.
Então, quando você deve escolher um teste de carga em vez de um teste de estresse? Como mencionamos, um teste de estresse aumentará continuamente a carga, o mais rápido possível, até que o sistema atinja o ponto de ruptura. Os testes de carga, por outro lado, incluirão pausas que simulam ações reais do usuário, comportamento e tráfego, sob limites específicos de carga de trabalho, que são usados para medir o desempenho desse site ou aplicativo. Ao contrário dos testes de estresse, você não está procurando empurrar o sistema à beira do fracasso e vendo como ele se recupera, você está realmente procurando entender como seu sistema funciona em condições específicas do mundo real.
Ferramentas de teste de desempenho
Os testes de desempenho costumavam ser um processo que teve grandes investimentos em hardware, recursos, orçamento e tempo. As organizações teriam que contar com especialistas em testes de desempenho treinados e o processo poderia levar semanas, ou até meses. À medida que os avanços na tecnologia foram feitos e o ciclo de vida de desenvolvimento de software encurtou para seguir as práticas ágeis e devOps, as soluções de teste de desempenho puderam ser desenvolvidas e lançadas como plataformas baseadas em SaaS. As plataformas baseadas em SaaS não exigiam os investimentos pesados, como suas contrapartes de teste de desempenho no local exigiam.
Hoje, existem muitas ótimas soluções e ferramentas de teste de carga, desde versões de código aberto até versões comerciais, e tudo mais. Se você está no mercado e procurando uma ferramenta de teste de desempenho ou solução para suas necessidades, pode ser bastante difícil encontrar a certa. As necessidades de cada organização são diferentes e nem todas as ferramentas de teste de desempenho são criadas da mesma forma. Algumas ferramentas de teste de desempenho são limitadas e só podem suportar algumas tecnologias e protocolos, enquanto algumas suportam uma variedade de protocolos, tecnologias de aplicações web, permitindo uma infinidade de recursos de teste de desempenho. Discutiremos as vantagens e desvantagens dos diferentes tipos de ferramentas de teste de desempenho, como versões pagas, gratuitas e de código aberto, para que você possa ter uma ideia melhor do que é certo para você e sua organização.
E mesmo que as ferramentas de teste de desempenho baseadas na Web ajudem a reduzir o custo dos testes de desempenho, não exigindo que as empresas invistam em injetores adicionais de hardware e carga, o custo ainda pode ser uma grande barreira para organizações menores que procuram incluir um teste de desempenho em seu ciclo de desenvolvimento.
Ferramentas gratuitas vs. de teste de desempenho pago
Quando se trata de procurar qualquer tipo de software, o maior fator sempre parece se resume ao quanto custa. Os requisitos de teste de desempenho variam entre indústrias e organizações, por isso é realmente uma questão de encontrar uma solução que atenda às suas necessidades e se encaixe no seu orçamento. Existem muitas ferramentas de teste de desempenho gratuito no mercado, mas a compensação é que você tem que gerenciar seus próprios servidores e injetores de carga virtual. Nem todo mundo tem o conhecimento técnico ou a habilidade de fazer isso. Além disso, se você está procurando executar testes de desempenho em pequena escala, uma ferramenta de teste de desempenho gratuita pode lhe servir muito bem, já que pagar por uma ferramenta que tem um conjunto de recursos extenso seria desnecessário. No entanto, algumas das desvantagens de uma ferramenta de teste de desempenho gratuito é que normalmente não há uma equipe de suporte dedicada, recursos limitados e a execução de testes em larga escala pode não ser possível.
No entanto, se você é uma pequena organização sem a equipe ou recursos certos para configurar, gerenciar e executar testes de carga com sua própria infraestrutura, uma ferramenta de teste de desempenho pago pode ser o ajuste certo. Existem muitas opções comerciais que incluem uma ampla gama de recursos e opções para se adequar ao seu orçamento específico. Essas ferramentas de teste de desempenho baseadas na Web fornecem tudo o que você precisa para se levantar e funcionar, sem ter que se preocupar em configurar seu próprio ambiente. Algumas das outras vantagens das ferramentas de teste de desempenho pago é que você tem acesso a uma equipe de suporte dedicada, interfaces fáceis de usar e opções avançadas de relatórios.
Ferramentas de teste de desempenho gratuitos
Como discutimos acima, nem toda organização tem a largura de banda e tempo de recursos para realizar testes de desempenho, no entanto, qualquer teste de desempenho é melhor do que nenhum teste de desempenho. Cada aplicativo terá um desempenho diferente sob carga, de modo que qualquer ferramenta que você possa colocar as mãos para testar seus aplicativos para garantir que seus usuários e visitantes obtenham uma grande experiência é uma obrigação. Para pequenas equipes ou organizações, ferramentas gratuitas de teste de desempenho podem oferecer tudo o que precisam. Por um tempo, não há investimento inicial (quem não gosta disso), mas pode levar algum tempo para sua equipe aprender a usar o software, então planeje algum tempo para uma curva de aprendizado inicial.
Falamos sobre algumas das desvantagens das ferramentas de desempenho gratuitas, que elas não estão repletas de recursos e algumas exigem a configuração do seu próprio ambiente de teste de desempenho, mas novamente, se você está apenas procurando executar testes em pequena escala, então ferramentas de teste de desempenho gratuitos podem se encaixar na conta. No entanto, a chave para qualquer grande teste de desempenho é configurar o ambiente o mais próximo possível do ambiente de produção ao vivo. Nosso conselho é pesquisar ferramentas gratuitas que atendam às suas necessidades e tirem algum tempo para encontrar uma que funcione para você e sua equipe.
Ferramentas de teste de desempenho de código aberto
Abordamos brevemente alguns dos benefícios e desvantagens das ferramentas de teste de desempenho de código aberto, ou gratuitas, mas como mencionamos, o fato de que o software de código aberto pode ser modificado e alterado pode ser uma grande vantagem para as organizações. Não existe tamanho único quando se trata de testes de desempenho, então ser capaz de personalizar software para o seu ambiente específico é uma enorme vantagem. Isso também significa que a ferramenta de teste de desempenho de código aberto está sempre evoluindo e mudando. No entanto, embora possa haver centenas de pessoas trabalhando continuamente em atualizações, mas elas não são necessariamente suporte ao cliente. Você pode se encontrar perdendo tempo vasculhando a documentação on-line para corrigir um problema específico.
Ferramentas de teste de desempenho pago
Como tocamos em ferramentas de teste de desempenho pagas anteriores, podem oferecer-lhe os recursos, funcionalidades e facilidade de uso ao realizar testes de desempenho. Ao contrário das ferramentas de teste de desempenho de código aberto que normalmente só suportam testes baseados em HTTP/protocolo, as ferramentas de teste de desempenho pagos oferecem a capacidade de executar testes reais baseados em navegador, vários locais de teste e ótimos relatórios e análises. Obviamente, para equipes com orçamento limitado, encontrar a ferramenta e o plano certos é um ato delicado de equilíbrio. A grande coisa sobre soluções de teste de desempenho pago é que elas normalmente oferecem vários níveis de preços e você não está preso em um contrato de longo prazo, então as equipes devem ser capazes de encontrar um plano que atenda às suas necessidades.
As ferramentas de teste de desempenho pago também removem muito do trabalho que você normalmente teria que realizar com ferramentas de teste de desempenho aberto, ou gratuitas, como ter que garantir que você tenha a capacidade e hardware para configurar seu próprio ambiente de teste de carga e instanciar seus próprios servidores injetoras de carga. O tempo e o custo da economia apenas desse processo sozinhos são suficientes para justificar ir com uma ferramenta de teste de desempenho pago. Por fim, se você estiver em dúvida sobre uma solução de teste de desempenho pago, você normalmente pode experimentá-la por um tempo limitado antes de decidir.
Aplicativos web de teste de desempenho
O desempenho de seus aplicativos web impacta diretamente a experiência do usuário e a linha de fundo do seu negócio. O investimento que você colocou no desenvolvimento e polimento de suas aplicações web será tudo em vão se você não testá-los de desempenho. Obviamente, o pior cenário seria que seu aplicativo web está inundado de tráfego e ele falha completamente e cai. É aí que o teste de desempenho de suas aplicações web, seja através de uma série de testes de carga ou testes de estresse, é fundamental para realizar para que você possa identificar e corrigir problemas de desempenho para evitar uma situação potencialmente desastrosa.
As aplicações web de hoje podem ser construídas com várias tecnologias e frameworks, como AJAX, Java, JavaScript, PHP, NodeJS, AngularJS e muito mais. Além disso, muitos aplicativos dependem de componentes de terceiros para funcionar corretamente. Esses plugins e componentes de terceiros são ótimos para desenvolver e criar aplicativos web, pois facilita o processo, no entanto, quando chega a hora de testes de desempenho, você pode encontrar problemas com plugins de terceiros que você não tem controle sobre. Os aplicativos web de teste de desempenho não devem apenas se concentrar no desempenho do lado do servidor, mas no desempenho até o nível do usuário/cliente. Perceber onde os gargalos ocorrem dentro de seus aplicativos web é essencial para identificar áreas de melhoria para que você possa proporcionar uma melhor experiência ao usuário.
Orientação de teste de desempenho para aplicações web
À medida que mais organizações adotaram práticas ágeis de desenvolvimento de software, o desenvolvimento de aplicativos web tornou-se mais eficiente através das fases de construção, teste e implantação. No entanto, o processo ainda não está completo. Determinar o desempenho do seu aplicativo web no mundo real é outra questão totalmente diferente. Felizmente, existem ferramentas e soluções que podem ajudar a guiá-lo através do processo de teste de desempenho. Falaremos sobre algumas das etapas críticas e considerações que você precisa tomar ao implementar testes de desempenho para seus aplicativos web.
Um dos aspectos mais importantes das aplicações web de teste de desempenho é garantir que você configure seus cenários de teste para corresponder às condições do que sua aplicação web enfrentará no mundo real. Se sua aplicação já foi lançada em produção, então você provavelmente deve ter uma boa ideia de que tipo de condições de tráfego sua aplicação será submetida, mas é sempre bom rever condições normais e de pico de tráfego. Outro fator importante no teste de desempenho de aplicações web é ser capaz de scriptar e automatizar seus testes. Foram-se os dias de depender de pessoas reais para fazer seus testes. As ferramentas de script podem percorrer seus aplicativos como um usuário cotidiano faria e esses scripts podem ser usados para testes de desempenho.
E por último, se você estiver usando uma ferramenta de teste de desempenho baseada em nuvem, você provavelmente será capaz de executar testes de várias regiões. É provável que seus visitantes não venham de apenas uma única região do mundo. Ser capaz de configurar seus testes para executar a partir de regiões geográficas específicas é fundamental para entender as variações de desempenho em todo o mundo. Ser capaz de ver como o desempenho de aplicativos web em todas as regiões se compara, lhe dará uma visão adicional sobre a experiência do seu usuário.
AWS e teste de desempenho explicados
A organização de hoje tem muitas opções quando se trata de implantar seus aplicativos e sites web. Provedores de nuvem como AWS, Google Cloud e Microsoft Azure fornecem uma maneira de descarregar recursos de hardware, software e servidor para provedores de nuvem para ajudar a cortar custos e se tornar mais eficiente. As organizações são então cobradas apenas pelos recursos que usam. No espaço do provedor de nuvem, a AWS tem sido o jogador dominante. A AWS fornece centenas de produtos e soluções diferentes que atendem a diferentes propósitos, como AWS Lamda, AWS EC2, AWS Lightsail, entre muitos outros.
Em termos de implantação de aplicativos web, a AWS Lambda é o serviço específico de escolha. A AWS Lambda oferece aos desenvolvedores a capacidade de se concentrar no desenvolvimento de aplicativos e não gastar tempo em questões operacionais ou recursos de provisionamento. Por tudo o que a AWS Lambda fornece, existem algumas desvantagens quando se trata de testes de desempenho. Por exemplo, eles estabelecem limites de concorrência para garantir que uma única função não consuma todos os recursos e fique sobrecarregada, e como uma medida de economia de custos. Se você planeja seu aplicativo web para acessar por milhares de usuários ao mesmo tempo, você pode querer testar esse aplicativo com uma ferramenta de terceiros que pode gerar a carga que você precisa, que pode ser mais econômica, além de lhe dar melhores relatórios e análise de dados.
Microsserviços e Testes de Desempenho
O termo microsserviços tornou-se um tema muito popular e de tendência nos últimos anos. Embora o termo exista há muito tempo, é finalmente algo que as organizações podem aproveitar totalmente, devido às tecnologias de containerização. Ao contrário da abordagem tradicional de desenvolvimento de software, onde os aplicativos foram desenvolvidos em uma abordagem mais monolítica, onde todas as funções e serviços, como UI, lógica de aplicação e camada de dados, foram construídos como uma única unidade. Os microsserviços essencialmente separam essas funções e serviços e os executam como sua própria entidade individual. O benefício aqui é que mudanças podem ser feitas em diferentes serviços, simultaneamente, sem impactar os demais, tornando a implantação mais rápida e simples. Além disso, como os serviços são independentes uns dos outros, eles podem ser construídos com diferentes linguagens de programação. No entanto, devido a essa abordagem distribuída, pode tornar os testes de desempenho um pouco mais tediosos.
Os microsserviços são normalmente conectados através de APIs RESTful, então você gostaria de testá-los com as mesmas ferramentas e plataformas que suportam testar APIs de DESCANSO e seus pontos finais. No entanto, ao testar microsserviços de desempenho, há muito mais do que apenas medir a solicitação e respostas. Devido à sua natureza distribuída, a atividade nos bastidores precisa ser observada, como por que os tempos de resposta são lentos, as condições da rede, etc. Cada serviço pode ser executado de forma diferente, dependendo dos recursos disponíveis.
Teste de desempenho para aplicações angulares
Angular é uma estrutura de aplicativos web de código aberto que foi desenvolvida pelo Google. Angular é normalmente usado para a construção de SPAs (aplicativos de página única). O benefício dos SPAs é que eles funcionam dentro do navegador e não exigem que as páginas sejam recarregadas toda vez que o usuário navega para uma nova página. Ele é carregado uma vez, e do ponto de vista do usuário, funciona como uma página padrão da Web, mas o desempenho e a usabilidade são aprimorados porque o navegador não precisa carregar uma nova página cada vez. Isso é ótimo do ponto de vista do usuário, mas do ponto de vista de teste de desempenho, adiciona uma camada de dificuldade, já que ele não carrega uma nova URL a cada vez.
Por essa razão, é necessário usar uma ferramenta que possa roteirizar as ações do usuário dentro do navegador e, em seguida, usar esses cenários para realizar testes de desempenho. Você não pode confiar em ferramentas padrão de teste de desempenho de protocolo HTTP, como JMeter e HP LoadRunner. Mesmo que você implante seu aplicativo a partir de um serviço de nuvem como o AWS Lambda, existem limitações para testes de desempenho, como você deve criar e gateway de API. Isso pode ser demorado para configurar. E mesmo assim, você ainda pode testar apenas no nível de protocolo. Você não será capaz de medir o desempenho do ponto de vista da interação de um usuário com seu aplicativo Angular.
Ferramenta de teste de desempenho/recomendações de software
Quando chega a hora de escolher uma ferramenta de teste de desempenho, há muitas considerações a serem consideradas para fazer antes de seguir em frente com uma. Abordamos brevemente alguns dos benefícios e desvantagens entre ferramentas de software de teste de desempenho gratuito, pago e de código aberto, mas nesta seção, mergulharemos em algumas das soluções de teste de desempenho mais populares do mercado atualmente. Vamos fazer uma breve revisão detalhando o que os torna ótimos, e como eles se comparam um ao outro. As estruturas e tecnologias de site, aplicação web e API estão em constante evolução, por isso encontrar uma ferramenta de teste de desempenho que possa suportar suas necessidades tecnológicas atuais e futuras, é altamente recomendado. Alguns outros itens a considerar, pois você está procurando uma ferramenta de teste de desempenho incluem o seguinte:
- Interface fácil de usar
- Crie e personalize scripts de teste
- Teste de vários locais geográficos
- Integra-se com ferramentas que sua equipe já usa
- Fornece relatórios e dashboards configuráveis
- Ótimo suporte ao cliente
Por fim, você deseja que seus testes de carga reflitam como seu site, aplicativos e APIs serão usados. Uma boa plataforma de teste de desempenho fornecerá a você a capacidade de criar, configurar e executar testes facilmente em navegadores reais, assim como seus usuários e visitantes usam. Simular a experiência do usuário o mais de perto possível é fundamental para entender o desempenho real que seus usuários experimentam.
LoadView
LoadView by Dotcom-Monitor é uma solução completa de teste de desempenho para sites, aplicativos web, APIs e mídia de streaming. O LoadView fornece testes de desempenho baseados em navegador reais. Os usuários não têm que se preocupar em adicionar qualquer infraestrutura ou hardware à medida que a solução gerencia os injetores de carga para você. A ferramenta fornece aos usuários uma variedade de recursos, como a capacidade de escolher entre múltiplas curvas de teste, selecionar entre mais de 20 locais/regiões geográficas para executar testes e fornecer relatórios completos pós-teste, gráficos de cachoeira e painéis. Para testar aplicativos web, o LoadView fornece o EveryStep Web Recorder, uma ferramenta de scripting de ponto e clique que suporta todas as tecnologias e frameworks populares de aplicativos web. O gravador pode ser usado para criar scripts para ações e caminhos do usuário, como caminhos de carrinhos de compras, seleções de menus e outros cenários complexos. O LoadView fornece vários planos para atender às suas necessidades, incluindo um plano sob demanda para executar testes de desempenho conforme necessário.
Cemitério de Chama
BlazeMeter é uma solução de teste de carga baseada no JMeter, que é um software baseado em Java de código aberto usado para executar testes funcionais e testes de desempenho para aplicações web. O BlazeMeter suporta outras ferramentas de teste de desempenho de terceiros, como, Apache JMeter, Selenium, The Grinder e muito mais, para que as equipes possam carregar scripts dessas plataformas no BlazeMeter. O BlazeMeter tem mais de 50 locais globais para executar testes e pode empurrar centenas para milhões de usuários virtuais. Uma nota importante sobre o BlazeMeter, em comparação com outras ferramentas de teste de desempenho no mercado, é que o JMeter não é um navegador, por isso não suporta a execução de JavaScript ou AJAX. O BlazeMeter pode levar algum tempo para aprender, pois requer conhecimento técnico, mas é uma das ferramentas de teste de desempenho mais populares do mercado.
LoadNinja
LoadNinja da SmartBear é uma plataforma de teste de carga para sites, aplicativos web e APIs e utiliza navegadores reais para obter resultados mais precisos do mundo real. LoadNinja também fornece uma ferramenta de scripting de ponto e clique, chamada de gravador InstaPlay. O gravador suporta muitas das tecnologias usadas no desenvolvimento de sites e aplicativos web, permitindo que os usuários criem facilmente scripts de teste para testes de carga. LoadNinja fornece menos de 10 locais globais para executar testes. LoadNinja também fornece um plugin API ou Jenkins para ajudar a automatizar testes de desempenho em plataformas de CI/CD. A plataforma LoadNinja também está fortemente alinhada com os outros produtos da SmartBear, como zephyr para JIRA, para melhor gerenciamento de testes. Os planos podem ser adquiridos mensalmente ou anualmente.
WebLOAD
WebLOAD do RadView é um software de teste de carga usado para executar testes de desempenho contra sites, aplicativos web e APIs. A plataforma suporta uma grande variedade de protocolos, aplicativos em nuvem e aplicativos corporativos e se integra com muitas ferramentas de terceiros que sua equipe provavelmente já usa, como Git, Atlassian Bamboo e muitos outros. Além disso, o WebLOAD pode se integrar com jenkins para automatizar testes de desempenho em modelos de entrega contínua e implantação contínua. O WebLOAD pode ser implantado de várias maneiras, incluindo no local, baseado em nuvem ou através de seu provedor de nuvem. O WebLOAD fornece alguns modelos de preços, Free, Professional e Enterprise. O plano Professional é limitado a 1.000 usuários simultâneos e três locais injetores de carga, então se você está procurando executar testes de desempenho maiores, você precisará se mudar para o modelo Enterprise.
LoadRunner
LoadRunner da MicroFocus é outra ferramenta popular de teste de desempenho que tem tido forte participação de mercado no espaço de software de teste de desempenho por um longo tempo. A ferramenta suporta uma ampla gama de protocolos para testes de desempenho de todos os tipos de sites e aplicativos, incluindo móveis, tornando-o uma ferramenta muito flexível. LoadRunner é uma ferramenta complexa e deve ser implantada no local, no entanto, no entanto, o MicroFocus oferece uma solução baseada na Web para requisitos de curto prazo chamado LoadRunner Cloud. A solução principal do LoadRunner, LoadRunner Professional, em comparação com as outras ferramentas de teste de desempenho nesta lista, é cara. O LoadRunner Professional é mais voltado para clientes de nível corporativo que têm capacidade, infraestrutura e equipes de desenvolvimento para apoiar essa ferramenta.
NeoLoad
NeoLoad da Neotys é outra ferramenta de teste de desempenho no local para sites, aplicativos e APIs. Em comparação com as soluções baseadas em SaaS, as soluções no local exigem capacidade de hardware adicional, requisitos específicos do sistema e recursos para manter e gerenciar essas condições adicionais. Com isso em mente, o NeoLoad suporta uma grande variedade de protocolos, frameworks, serviços web e aplicativos populares. Em termos de suporte ao script, o NeoLoad usa um gravador proxy, por isso há limitações quando se trata de scripting cenários de usuários e dispositivos móveis nativos. O gravador só captura tráfego HTTP, por exemplo, o que significa que requer muito trabalho manual para criar scripts que emulam usuários reais. O NeoLoad oferece aos usuários a opção de executar geradores de carga de sua máquina local ou nuvem, no entanto, qualquer coisa mais do que testar 30.000 usuários deve vir de seus geradores de nuvem, o que é um custo adicional.
Gatling
Gatling é outra ferramenta de teste de desempenho de código aberto usada para testar os limites das aplicações web. Gatling é projetado principalmente para dutos e ambientes CI/CD e pode gerar muita carga dentro de uma única máquina. Com Gatling, os desenvolvedores podem testar e detectar problemas de desempenho e tempos lentos de resposta do aplicativo dentro do ciclo de desenvolvimento. Como JMeter e LoadRunner, Gatling utiliza um gravador proxy para criar scripts. E para scripting mais complexo ou manual, você deve ter amplo conhecimento em linguagem de programação do Scala. Eles também oferecem a opção de um conversor HAR (ARQUIVO HTTP), que dá aos desenvolvedores um pouco mais de controle e menos sobrecarga.
Flood.io
Flood.io é uma ferramenta de teste de desempenho da Tricentis que pode ser implantada a partir da nuvem, com uma solução chamada Element, ou no local, com uma solução chamada Agent. As diferentes ferramentas podem realizar testes de carga em aplicativos web, sites e APIs. Flood.io permite que os usuários criem seus próprios scripts de teste através do Test Builder ou reuusem scripts de testes de outras soluções de teste de desempenho, como Gatling, JMeter e Selenium. Cada uma dessas opções requer algum nível de conhecimento de programação, mas o benefício é que eles podem criar rapidamente scripts baseados em protocolos, que são menos intensivos em recursos do que testes reais do navegador. A desvantagem é que você não pode capturar os passos complexos do usuário que você poderia com uma ferramenta de scripting que suporta navegadores reais.
k6
K6, anteriormente conhecido como LoadImpact, é uma plataforma de teste de carga de código aberto e SaaS para equipes de desenvolvimento. Como algumas das outras ferramentas desta lista, o K6 foi projetado especificamente para se integrar com integrações contínuas e soluções de implantação contínua, como Jenkins, GitLab, Circle CI, Team City e muito mais. Para testes de desempenho da API, o K6 conta com o Carteiro. Os usuários devem exportar suas coleções de Carteiro, convertê-las em scripts JavaScript e executar seus testes de carga. Os usuários do k6 podem usar qualquer um dos mais de 15 locais globais para executar seus testes de carga, no entanto, a fim de executar testes de vários locais simultaneamente, você deve estar em um de seus planos Team ou Pro.
Tempestade de Carga
LoadStorm é uma plataforma de teste de carga baseada em nuvem usada para testar o desempenho de aplicativos web, sites e APIs. Ao desenvolver aplicativos, é fundamental conseguir descobrir problemas de desempenho o mais cedo possível na fase de desenvolvimento, para não impactar os usuários na produção. LoadStorm oferece aos usuários a capacidade de criar scripts usando diferentes navegadores, como Chrome, Firefox, Internet Explorer, Android e iOS. No entanto, ao contrário de algumas das outras ferramentas reais baseadas no navegador nesta lista, os scripts são criados com arquivos HAR e arquivos XML de seus respectivos navegadores, então você está perdendo a imagem de desempenho do lado do cliente. LoadStorm usa oito locais globais (Estados Unidos, Europa, Ásia e América do Sul) para gerar carga a partir de. LoadStorm oferece vários níveis de preços, bem como um pagamento conforme você vai planejar.
Tudo a partir de uma solução conveniente de teste de carga.
Testes de desempenho Melhores Práticas
Discutimos por que os testes de desempenho são importantes. Seus clientes, usuários e visitantes querem uma experiência rápida e ininterrupta. Páginas de carga lenta e aplicativos difíceis de navegar vão fazê-los virar. E isso resultará em usuários infelizes e perdas de receita que irão diretamente para a carteira do seu concorrente. Se seu site ou aplicativo vai ser usado e acessado por um monte de centenas de milhares de usuários simultaneamente, você precisará entender como ele se sai nessas condições. Promoções de marketing podem, intencionalmente ou não, direcionar muito tráfego para o seu site, de modo que testes de desempenho sob uma variedade de condições, picos de tráfego e de diferentes locais geográficos são necessários para entender a experiência do usuário, do ponto de vista do usuário.
Organizações bem-sucedidas entendem a necessidade não apenas de testes de carga, mas também os vários testes funcionais que precisam ser executados durante o ciclo de desenvolvimento, como testes de integração, testes unitários, testes de fumaça, bem como outros. Quaisquer deficiências encontradas durante esses testes podem ajudar a melhorar o desempenho e aliviar quaisquer problemas quando chegar ao ponto de teste de desempenho. Discutiremos esses fatores e outras melhores práticas a serem consideradas na realização de testes de desempenho.
Noções básicas de teste de desempenho (para iniciantes)
Discutimos as muitas razões para implementar testes de desempenho, as várias ferramentas de teste de desempenho e o que procurar em uma ferramenta de teste de desempenho, mas agora explicaremos qual é o desempenho em um nível básico. Se você nunca ouviu falar de testes de desempenho ou apenas começar a investigar testes de desempenho para sua própria pesquisa, explicaremos o que é o teste de desempenho, o processo de teste de desempenho e diferentes abordagens a serem consideradas ao realizar testes de desempenho. Quando desenvolvedores e engenheiros falam sobre testes de desempenho, eles normalmente estão falando sobre testes de carga, testes de estresse, testes de volume ou testes de resistência, já que estes são os mais realizados durante os últimos estágios de desenvolvimento de aplicativos. No entanto, os testes de desempenho também incluem testes de conformidade, testes de recuperação, testes de usabilidade e muito mais.
O teste de desempenho é uma forma de teste não funcional. O teste não funcional consiste em testar como um sistema opera, em vez de testar como e se, componentes específicos funcionam. O objetivo é entender como seus sites, aplicativos ou APIs, por exemplo, funcionam quando empurrados para seus limites por usuários simulados, ou carga, e como os recursos do sistema respondem. Dessa forma, você pode identificar como o sistema se comporta, onde existem gargalos de desempenho e onde as melhorias precisam ser feitas, seja para o próprio código de aplicativos ou infraestrutura/hardware.
Teste de desempenho intermediário
Quando chega a hora de executar testes de desempenho, existem muitos cenários, tecnologias e componentes diferentes que você pode testar. Por exemplo, você pode executar testes contra seu site, aplicativos web, APIs e mídia de streaming. Cada um deles requer diferentes níveis de configuração, execução e considerações. Por exemplo, quando se trata de testar seu site, você vai querer considerar se você vai apenas testar no nível de protocolo, o que significa apenas empurrar usuários simultâneos contra uma URL e confirmar que seu site está disponível e não há erros. O benefício deste tipo de teste é que ele pode ser configurado relativamente rapidamente e você pode executar um alto número de usuários simultâneos sem usar até uma tonelada de recursos.
Os testes baseados em protocolos ainda são importantes e usados regularmente hoje, mas os navegadores de hoje são mais complexos e dependem de elementos dinâmicos muito mais do que há apenas alguns anos. alguns dos cenários de teste de desempenho mais intermediários consistem em testar seu site ou aplicativo usando navegadores reais. O benefício de usar navegadores reais para seus testes de desempenho é que você pode ver todos os elementos individuais, componentes de terceiros e código como HTML, CSS e JavaScript. Isso lhe dá uma visão total das respostas do servidor back-end, além de componentes front-end que podem estar afetando o desempenho. Além disso, quanto mais perto você pode chegar de testar o desempenho simulando a maneira como seus usuários e visitantes acessam seus sites e aplicativos, melhores dados e análises você recebe de volta. A desvantagem dos testes reais baseados no navegador é que ele precisa de mais recursos e é tipicamente mais caro em comparação com testes de desempenho HTTP.
Teste avançado de desempenho
Quando se trata de proporcionar uma ótima experiência para seus clientes e visitantes, você precisa ser capaz de se colocar no banco do motorista e ver como eles percebem o desempenho de seus sites e aplicativos. Quando se trata de métodos avançados de teste de desempenho, ser capaz de simular a experiência criando scripts que emulam fluxos e cenários críticos do usuário e, em seguida, testando esses scripts contra altos níveis de usuários simultâneos e simultâneos de vários pontos ao redor do mundo. Falamos sobre as muitas ferramentas de teste de desempenho e algumas delas forneceram opções de scripting mais fáceis de usar. Algumas das soluções e ferramentas no local exigem um conhecimento aprofundado de tecnologias específicas, enquanto algumas, como LoadView e LoadNinja, oferecem uma ferramenta de scripting de ponto e clique, que não exigem experiência anterior de scripting.
No entanto, ter experiência em script é importante quando se trata de técnicas avançadas de teste de desempenho, como configurar e personalizar seus scripts. Vai tornar todo o processo mais fácil e menos demorado. Por exemplo, algumas ferramentas permitem que você defina atrasos entre ações, cliques e velocidade de texto, para melhor corresponder aos comportamentos do usuário. Algumas ferramentas podem lhe dar valores predefinidos, mas você pode querer defini-los de acordo para corresponder às ações do seu visitante e defini-las manualmente. Outros métodos avançados incluem como configurar suas curvas de carga para o teste. Algumas ferramentas permitem que você apenas defina o número máximo de usuários durante um determinado período de tempo, mas algumas soluções, como o LoadView, dão várias opções de curva de carga, incluindo uma opção para aumentar ou diminuir os níveis de carga durante um teste para ver como seu sistema responde em tempo real.
Benchmarking de teste de desempenho
Como parte do processo de teste de desempenho, todos os softwares e aplicativos devem ser testados para garantir que ele satisfaça os requisitos de desempenho e negócios. Parte desse processo inclui testes de benchmark e testes de linha de base. Embora soem semelhantes, são bem diferentes. O objetivo dos testes de linha de base é garantir um produto consistente. Para isso, a equipe testará o software e medirá diferentes aspectos de desempenho, como código, rede, hardware. Os resultados do teste são registrados e documentados. Se o software ou aplicativo for atualizado, ele será testado nas mesmas condições para ver como os resultados se comparam com o teste anterior.
Benchmarking é um pouco diferente. Os testes de benchmark comparam essencialmente o desempenho de um aplicativo com outros aplicativos ou um padrão do setor para garantir que ele atenda ou exceda os estandes de qualidade. Isso é especialmente importante para as organizações que procuram estabelecer padrões de qualidade ou atender a acordos específicos de nível de serviço (SLAs) de seus aplicativos e softwares para seus usuários e parceiros. O benchmarking é muito impulsionado pelo negócio e organização, ajudando a fornecer confiança com potenciais clientes e mostra sua organização como líder em seu espaço.
O ciclo de vida de teste de desempenho explicado
Como descrevemos anteriormente, o teste de desempenho consiste em testar os aspectos não funcionais de um aplicativo de software, como comportamento do aplicativo, usabilidade e confiabilidade, bem como entender como o sistema responde e como os recursos são usados. O ciclo de vida de teste de desempenho (PTLC) consiste em diferentes fases e estratégias. Vamos mergulhar nos vários componentes do ciclo de vida de teste de desempenho.
As primeiras e mais críticas etapas de qualquer tipo de teste de software é garantir que o sistema que será testado esteja completo. Os testes de desempenho essencialmente começam onde os testes funcionais pararam. É essencial que o software e o sistema funcionem, para que você possa testar e medir resultados com precisão.
O próximo passo é chegar à estratégia de teste. Isso inclui preparar o escopo do teste, os modelos de carga de trabalho e identificar os cenários que serão testados. Além disso, as equipes definirão as métricas que serão usadas para medir o sucesso, no entanto, às vezes isso mudará assim que os testes forem executados e os dados forem revisados. É possível que algo inesperado aconteça, o que afetaria o processo de teste.
Em seguida, é hora de projetar o teste em si junto com a execução. Dependendo da solução de teste de desempenho que você está usando, isso pode ocorrer ao mesmo tempo ou pode ser etapas separadas. Esta etapa consiste em criar os scripts de teste e as ações do usuário que foram definidas na estratégia de teste. Em seguida, esses scripts são preparados para testes de desempenho contra os modelos de carga de trabalho acordados.
Por fim, uma vez concluído o teste de desempenho, os engenheiros de desempenho podem visualizar os dados do teste e analisar os resultados e iniciar o processo de fazer recomendações para melhorias. É também aqui onde as linhas de base são definidas, para que quaisquer testes adicionais de desempenho possam ser usados para comparar resultados.
Profissionais e Contras de Teste de Desempenho
O teste de desempenho de seus sites, aplicativos Web e APIs é essencial para a experiência do usuário. Garantir que seus sites e aplicativos operem de forma eficiente e rápida, mesmo sob altas quantidades de tráfego, é fundamental para a geração de receita para apoiar os objetivos dos negócios. Como falamos na seção anterior, os testes de desempenho podem ajudar a descobrir problemas que os testes funcionais não detectarão. Por exemplo, sites ou aplicativos que carregam mais rápido têm melhores taxas de retenção do que páginas ou aplicativos que carregam lentamente. Os visitantes que encontrarem páginas de carga lenta provavelmente nunca mais revisitarão esse site. As primeiras impressões são tudo, então, obviamente, há muitos benefícios para os testes de desempenho.
Embora o teste de desempenho tenha muitas vantagens, ele vem com algumas desvantagens. Geralmente, com qualquer tipo de teste, há um investimento de custo e tempo que precisa ser considerado. Nem todas as equipes e organizações são iguais, por isso pode exigir mais esforço para algumas equipes. No entanto, muitas das ferramentas de teste de desempenho baseadas na Web no mercado podem ajudar a aliviar esse problema. Ao contrário de muitas das ferramentas no local, que tendem a ser mais caras e exigem know-how técnico, as ferramentas de teste de desempenho baseadas em SaaS removem muitos dos problemas demorados, como configurar seu próprio hardware/infraestrutura e gerenciar taxas de licenciamento. Por fim, testes de desempenho podem descobrir problemas inesperados que requerem capacidade e upgrades adicionais do sistema, que podem acabar custando mais do que você planejou.
Lista de verificação de teste de desempenho
Normalmente, uma vez que os testes funcionais foram concluídos e o aplicativo está perto do fim do ciclo de vida de desenvolvimento de software, o próximo passo é testar o aplicativo e funções sob cargas de trabalho específicas para ver como seu aplicativo e sistema subjacente responde. Em processos de desenvolvimento mais ágeis, os testes de desempenho são regularmente concluídos para verificar o desempenho durante todo o ciclo de vida do desenvolvimento, de modo que, quando a aplicação chega ao fim do desenvolvimento, a maioria dos gargalos e problemas foram abordados.
Para ajudar no processo de teste de desempenho, criar uma lista de verificação de teste de desempenho pode ajudar a definir as etapas e cenários que precisam ser realizados e ajudá-lo a seguir melhor o seu plano. Uma lista de verificação de teste de desempenho deve incluir considerações para o aplicativo, requisitos de cliente/usuário/SLA, seu sistema e ambiente e quaisquer outros fatores internos que você identificar. O benefício de documentar sua lista de verificação serve a muitos propósitos, como manter o plano de teste nos trilhos, mas também permite que você modifique e inclua procedimentos e considerações adicionais que surgem durante o próprio processo de teste. A lista de verificação de teste de desempenho também pode servir de validação para os clientes, para que você possa mostrá-los em primeira mão e levá-los através do plano detalhado que você colocou em prática, o que pode ajudar a construir mais confiança, fornecer valor agregado e validar todo o processo.
Ambiente de produção vs. Ambiente de Teste de Desempenho
Tradicionalmente, os testes de desempenho não seriam realizados até depois da QA, o que muitas vezes causava problemas, pois qualquer problema de desempenho faria com que o produto fosse adiado, pois os gargalos precisavam ser resolvidos. À medida que os ciclos de desenvolvimento se tornaram mais curtos, ele pressionou os testes de desempenho para começar mais cedo. Nos ambientes DevOps de hoje, o desempenho é continuamente validado no nível de componente/código e, em seguida, o teste completo de desempenho completo é uma vez que o aplicativo é construído. desempenho de até que seu aplicativo ou site foi empurrado ao vivo.
A criação de um ambiente de teste, também chamado de sandbox, permite que as equipes de desenvolvimento realizem testes sem afetar a produção ou o ambiente ao vivo. Embora a criação de um ambiente duplicado adicione custos e recursos adicionais, reduz consideravelmente o risco de problemas inesperados surgidos no ambiente produtivo. Por exemplo, executar testes de carga em seu site no ambiente ao vivo pode inadvertidamente fazer com que seu teste se torne um teste de estresse e faça com que o site falhe. Agora, existem algumas situações em que o teste é produção é ok, mas essas devem ser melhor executadas quando o tráfego para o seu site é leve para minimizar o impacto para os usuários.
Entendendo relatórios de teste de desempenho
Discutimos em detalhes a maioria dos aspectos dos testes de desempenho, mas uma coisa que não discutimos é provavelmente as peças mais importantes do quebra-cabeça: os relatórios de teste de desempenho. Esses relatórios, dashboards e métricas são o que são usados para entender onde existem gargalos e quais melhorias no sistema são necessárias para impulsionar seus sites, aplicativos e APIs. Embora os relatórios variem para as várias soluções de teste de desempenho, e alguns elementos podem ser chamados de forma diferente, ainda existem algumas métricas de desempenho principais que precisam ser inspecionadas e examinadas nos relatórios de teste de desempenho. Além disso, a maioria das ferramentas permite compartilhar facilmente esses relatórios com outros, para que você possa receber e coletar feedback de vários departamentos.
Se você fez um bom trabalho ao planejar seus objetivos e executar seu teste de desempenho, será fácil identificar nos relatórios de desempenho onde existem problemas. Se não, pode apenas adicionar mais confusão e exigir que você volte ao início e reavalie seus testes de desempenho. Em comparação com os testes funcionais, onde o resultado é fácil de identificar, já que é apenas passar ou falhar, o teste de desempenho é um pouco mais complexo e requer análises adicionais.
Um dos visuais mais importantes que as ferramentas de teste de desempenho criam é o gráfico de cachoeiras. Dentro do gráfico de cachoeiras, há uma miríade de informações e dados a serem analisados. Por exemplo, uma das métricas de teste de desempenho mais importantes para se observar é o tempo de carga. Lembre-se, os visitantes são mais propensos a abandonar suas páginas se o tempo de carga da página for muito lento. No seu plano de requisitos de teste de desempenho, se você exigiu que seu site carregasse menos de 3 segundos sob a carga especificada do usuário, os relatórios mostrarão isso, juntamente com todos os tempos de carga e resposta dos componentes individuais.
Juntamente com o gráfico de cachoeira que exibe tempos de carga, tempos de resposta e tamanhos de arquivo de todos os elementos que compõem sua página web, os usuários normalmente receberão métricas adicionais e dashboards que exibem erros, como códigos de erro HTTP ou possivelmente erros de tempo de conclusão se os elementos demorarem muito tempo para carregar. Todos esses fatores e métricas devem ser investigados para garantir que estejam dentro de limites de desempenho especificados e não impactando negativamente o desempenho.
Visuais e relatórios adicionais incluem mostrar o plano de execução de testes de desempenho, onde você pode ver como o número de usuários virtuais durante o período de teste afeta os tempos de resposta. Você pode comparar esses dados com o gráfico de cachoeiras para entender melhor quais componentes específicos podem estar dificultando o desempenho. Outro gráfico importante é a contagem de sessões cumulativas. Este relatório pode mostrar em que ponto novas sessões não poderiam começar e resulta em erros.
Trabalhos de teste de desempenho
O que os engenheiros de desempenho web fazem?
A engenharia de desempenho é uma das posições mais complexas e exigentes dentro das equipes da DevOps. As pessoas dentro dessas posições normalmente têm uma combinação de skillsets, pois esses trabalhos exigem conhecimento sobre todo o ciclo de vida de desenvolvimento de software, incluindo testes de desempenho, scripting, UI, engenharia de sistemas, etc. Alguém que é engenheiro de desempenho geralmente tem experiência em outras posições ou antecedentes, como testes de QA, codificação ou administrador de rede/banco de dados, por exemplo. É uma posição que requer um conjunto diversificado de conhecimento e experiência para realizar implantações de software bem sucedidas. Um bom engenheiro de desempenho não só será capaz de entender como construir um produto de sucesso, mas também entender os requisitos do negócio, para que o produto seja desenvolvido com as melhores práticas e padrões do setor em mente.
A forma como as aplicações são desenvolvidas hoje e completamente diferente do processo foi há apenas uma década. Os ciclos de vida de desenvolvimento tornaram-se cada vez mais curtos, em parte devido ao cumprimento das demandas dos usuários, mas também à implementação de novas estratégias de desenvolvimento de software. As metodologias e práticas de engenharia de desempenho estão alinhadas com o processo Ágil e os testes de shift-left. Os engenheiros de desempenho também são responsáveis por sugerir aos stakeholders de negócios onde e quando os investimentos em infraestrutura e capacidade precisam ser feitos, bem como afinar e monitorar continuamente o sistema.
Perguntas da entrevista de teste de desempenho
Você está procurando uma carreira como engenheiro de testes de desempenho? Se assim for, aqui estão algumas das principais perguntas de entrevista de teste de desempenho que você pode ser feita. Use-os como uma diretriz para o processo de entrevista para se preparar para o que você pode ser solicitado.
- Você pode descrever uma época em que você executou testes de desempenho e me levou através dos passos que você deu?
- Com que tipo de teste de desempenho você tem experiência?
- Você já encontrou uma situação em que os testes de desempenho foram ignorados, e isso teve um efeito prejudicial para uma aplicação? Se sim, o que você fez para remediar a situação?
- Que tipo de problemas de desempenho os usuários mais encontraram?
- Qual a importância da experiência do usuário para você? E o que isso significa ao desenvolver software?
- Pode me dizer algumas das ferramentas de teste de desempenho que você usou?
- Quais ferramentas de teste de desempenho você encontrou foram as mais bem sucedidas?
- Testes de desempenho exigem trabalho em equipe e colaboração. Pode me dizer o tempo que exigiu que você fosse além e trabalhasse com equipes diferentes?
- Com que tipo de dados e relatórios de teste de desempenho você trabalhou?
- Houve algum momento em que um aplicativo caiu inesperadamente, e você foi chamado para restaurar o aplicativo? Se sim, quais foram os passos que você deu e foi bem sucedido? Qual foi o impacto para usuários ou visitantes?
- Que erros de teste de desempenho você cometeu? E como superou esses erros?
O melhor teste de desempenho faq
Testes de desempenho podem ser um processo complexo e demorado, mas com a ferramenta de planejamento e teste de desempenho correta, pode se tornar mais fácil e repetitivo. O teste de desempenho é um passo crítico no ciclo de vida do desenvolvimento de software. Ele reduz o risco de implantar um aplicativo que pode se tornar instável sob carga pesada e dar aos usuários uma experiência negativa. Abaixo estão algumas perguntas e respostas frequentes para testes de desempenho.
Tabela de Conteúdos
- Como é realizado um teste de estresse?
- Como você testa o desempenho do site online?
- Como os testes de desempenho diferem dos testes de carga?
- O que são ferramentas de teste de desempenho?
- Quem realiza testes funcionais?
- Como é realizado o teste de aceitação em sites?
- Quem realiza testes de aceitação?
- O que é teste de desempenho de software?
- Como os testes de desempenho de software diferem dos testes de desempenho do site?
- Como calcular o número de usuários em testes de desempenho?
- Como você avalia o desempenho do site?
- O que é tempo de resposta em testes de desempenho?
- Como os testes de compatibilidade do navegador estão relacionados aos testes de desempenho?
- Qual é a melhor estrutura de automação de testes de desempenho?
- Qual é a melhor ferramenta de teste de desempenho?
Como é realizado um teste de estresse?
Um teste de estresse é um tipo de teste de desempenho que visa empurrar um sistema, um aplicativo ou site, aumentando continuamente o número de usuários simultâneos até um ponto onde o desempenho começa a se degradar, mesmo ao ponto de falhar. Testes de estresse são feitos para mostrar onde está o ponto de ruptura de um sistema, em que ponto os recursos são totalmente consumidos e como o sistema responde e se recupera. Por outro lado, os testes de carga usam uma carga pré-definida para medir o desempenho e o comportamento de um sistema, definir linhas de base de desempenho e planejar a capacidade. Os testes de carga não foram projetados para empurrar intencionalmente o aplicativo ou o sistema para a falha.
Como você testa o desempenho do site online?
Testar o desempenho do site pode ser feito de várias maneiras diferentes. Uma maneira é executar um teste de velocidade do site em suas principais páginas da Web. Existem muitas ferramentas gratuitas de teste de velocidade de sites que desenvolvedores e web designers podem acessar para executar um teste de velocidade rápida para ver rapidamente quais elementos da página podem estar afetando os tempos de carga. A grande coisa sobre essas ferramentas de teste de velocidade do site é que eles normalmente incluem vários servidores de teste, para que você possa escolher quais locais melhor atender de onde seus visitantes vêm.
A outra maneira de testar o desempenho do seu site é executando testes de desempenho. Testes de desempenho podem levar os testes de velocidade do site para o próximo nível simulando centenas ou milhares de usuários acessando seu site durante um determinado período de tempo. Os testes de desempenho descobrirão gargalos, como problemas de CPU, memória e rede que surgem quando levados aos limites.
Como os testes de desempenho diferem dos testes de carga?
O teste de desempenho é uma forma de teste não funcional que inclui um subconjunto de vários tipos de testes, incluindo testes de carga, testes de estresse, testes de pico, testes de resistência, testes de escalabilidade e testes de volume. Todos esses tipos de teste de desempenho buscam determinar vários aspectos e métricas à medida que a carga é colocada no sistema.
O que são ferramentas de teste de desempenho?
As ferramentas de teste de desempenho são softwares que podem ser usados para determinar o desempenho eficiente de seus aplicativos, sites ou APIs, bem como para ajudar a identificar gargalos de rede e/ou componentes que estão causando problemas de desempenho. Testes de desempenho são cruciais para garantir que você esteja entregando um produto de qualidade ao mercado. As ferramentas de teste de desempenho podem vir em uma variedade de sabores, incluindo no local, baseado em nuvem ou, em alguns casos, ambos. Uma das vantagens das ferramentas no local é que você tem controle total sobre o ambiente de testes, no entanto, isso significa recursos adicionais para configurar ambientes de teste. As ferramentas de teste de desempenho baseadas em nuvem permitem que os desenvolvedores se levantem e em execução, já que o ambiente de teste é completamente gerenciado pelo provedor.
Quem realiza testes funcionais?
Testes funcionais é um tipo de teste de software que é realizado por engenheiros e equipes de QA. Testes funcionais são realizados para descobrir se funções específicas funcionam ou não. Por exemplo, um método de teste funcional para aplicativos pode ser se um usuário pode navegar por páginas específicas sem problemas. Os testes funcionais não estão preocupados com o desempenho, mas sim com o objetivo principal do teste funcional, apenas se preocupando em validar funções e relatar quaisquer erros ou preocupações de usabilidade. Dentro do ciclo de vida de desenvolvimento de software, testes funcionais são realizados antes dos testes de desempenho. Você tem que garantir que seu software funcione antes de iniciar testes de desempenho ou os resultados serão distorcidos.
Como é realizado o teste de aceitação em sites?
O teste de aceitação do usuário, ou teste UAT, é a última parada no ciclo de desenvolvimento de software antes que o site seja oficialmente lançado. O teste de aceitação é a revisão final para garantir que um site funcione corretamente e que ele atenda a todos os requisitos pré-definidos para seus usuários ou seus clientes, bem como para o negócio. Se algum erro for encontrado, as equipes de desenvolvimento podem trabalhar com QA para resolvê-los antes do prazo final. É mais caro corrigir esses problemas na produção, então a UAT pode acabar economizando dinheiro e evitar possíveis frustrações com os usuários.
Quem realiza testes de aceitação?
Os testes UAT são normalmente realizados manualmente por grupos de testadores, embora, ele possa ser automatizado com base em uma série de scripts. Uma vez que o aplicativo ou site esteja pronto para testes UAT, vários cenários do mundo real devem ser definidos que os usuários podem passar. Por exemplo, se você gerenciar um site de comércio eletrônico, você pode testar individualmente diferentes opções de pagamento e suas etapas associadas, para garantir um processo perfeito.
O que é teste de desempenho de software?
O teste de desempenho de software é o processo de determinar o desempenho, a disponibilidade e a escalabilidade de um software sob uma carga de trabalho pré-definida. Os tipos de testes de desempenho de software incluem testes de carga, testes de estresse, testes de pico e testes de resistência e geralmente são realizados logo após a conclusão dos testes funcionais.
Como os testes de desempenho de software diferem dos testes de desempenho do site?
As diferenças entre testes de desempenho de software e testes de desempenho no site não são tão diferentes. Isso realmente se resume às definições deles. Um site é uma coleção de páginas da Web que podem ser acessadas pela Internet através de um navegador. Um software é um programa ou aplicativo que pode ser executado em um navegador e acessado através de páginas da Web. Outra maneira de pensar sobre isso é que as páginas da Web são tipicamente estáticas e informacionais, onde aplicativos web tendem a ser interativos. No entanto, você pode obter uma explicação diferente dependendo de quem você perguntar como as linhas entre eles estão borradas. Normalmente, ao testar aplicativos de software de teste de desempenho, você gostaria de criar scripts para simular as diferentes ações e caminhos do usuário. Se você está testando um site de desempenho, você pode apenas querer ver como seu site lida com o tráfego e se há algum problema cliente-servidor. Você não está realmente preocupado em testar caminhos de usuários com testes de desempenho de sites.
Como calcular o número de usuários em testes de desempenho?
Saber quantos usuários você quer simular durante seus testes de desempenho pode parecer fácil no início, mas você não quer fazer as suposições erradas, então como você calcula corretamente o número certo de usuários simultâneos? Uma maneira é rever ferramentas de análise de sites, como o Google Analytics, visualizar visitantes e avarias de visitantes por hora, dia ou visitas semanais. Em seguida, você vai querer descobrir qual é o seu pico de tráfego. Você não quer basear seu teste fora do tráfego médio, pois será significativamente menor do que o pico. Você vai querer definir seus usuários simultâneos mais do que o seu pico, para que você saiba que seu site pode lidar com o pico de carga. Com esses fatores, você pode então calcular os usuários simultâneos. Para calcular os usuários simultâneos, faça suas visitas de pico por hora e multiplique isso pela duração média do visitante (em segundos) e, em seguida, divida isso por 60, o número de minutos em uma hora.
Como você avalia o desempenho do site?
Como já dissemos antes, sites de carregamento rápido são fundamentais para a experiência do usuário e para o resultado final de uma empresa. É por isso que é importante avaliar o desempenho do seu site. Uma maneira de fazer isso é executar o teste de velocidade do site de diferentes locais ao redor do mundo, pois isso simulará melhor a experiência do mundo real e lhe dará melhores dados em troca. Ao fazer benchmarking no desempenho do site, você vai querer manter o registro de algumas métricas na página, como velocidade de carga da página, tempos de resposta, tamanho da página, tempo para o primeiro byte (TTFB), primeira pintura contente (FCP), tempo para interativo (TTI) e muito mais. Você vai querer então comparar essas métricas com os padrões do setor e descobrir se você tem alguma lacuna de desempenho. A partir daí, você pode usar ferramentas de monitoramento de sites para garantir que seu site esteja continuamente dentro dessas diretrizes de desempenho.
O que é tempo de resposta em testes de desempenho?
No tempo de resposta do teste de desempenho é o tempo que leva para uma solicitação ser enviada e recebida. Por exemplo, quando você clica em um botão em uma página da Web, o tempo que sua solicitação leva para ser enviada e recebida pelo servidor e concluída é o tempo de resposta. Os tempos de resposta serão exibidos em gráficos de cachoeira e resultados de desempenho. Algumas métricas importantes a seguir no teste de desempenho são o tempo médio de resposta e o tempo máximo de resposta, para que você possa identificar quando os elementos não estão funcionando como planejado.
O teste de compatibilidade do navegador, também conhecido como teste de navegador cruzado, é o processo de testar se um site ou aplicativo web é compatível e funciona dentro de vários navegadores. Ao executar testes de desempenho, você vai querer ter certeza de que você testa seu site e aplicativos web dentro dos navegadores que seus usuários normalmente usam. Isso pode significar navegadores desktop e/ou móveis. Os navegadores desktop e móveis renderizam elementos de forma diferente, então você vai querer ter certeza de realizar testes de desempenho para identificar quaisquer inconsistências e corrigi-los rapidamente, para que eles não acabem prejudicando a experiência do usuário. Isso é especialmente importante para dispositivos móveis, pois as velocidades da rede do usuário variam de acordo com a localização.
Qual é a melhor estrutura de automação de testes de desempenho?
As estruturas de automação de testes são benéficas para os desenvolvedores, pois podem permitir a capacidade de automatizar e reutilizar códigos para fins de teste, removendo a necessidade de gastar tempo para criar testes redundantes, bem como custos associados que acompanham isso. Isso permite que as equipes testem seu código de forma mais rápida e eficiente, tornando os ciclos de teste mais curtos. Existem diferentes tipos de ferramentas de automação. Algumas das estruturas de automação de teste mais populares são Pepino, Selênio, Appium e Chipre. No entanto, uma das melhores estruturas de automação de testes de desempenho é jenkins. Jenkins é um servidor de automação de código aberto que dá aos desenvolvedores a capacidade de construir, testar e implantar seus aplicativos de software.
Qual é a melhor ferramenta de teste de desempenho?
A melhor ferramenta de teste de desempenho é o LoadView. O LoadView oferece várias opções de teste de desempenho, como sites, APIs, aplicativos web e mídia de streaming. A solução pode realizar testes baseados em protocolos, bem como testes reais baseados em navegador. Para aplicações web, a ferramenta vem com uma ferramenta de scripting de ponto e clique, chamada everyStep Web Recorder, que suporta todas as tecnologias e frameworks da Web populares, tornando a criação de scripts para cenários de usuários uma brisa. Os testes podem ser configurados para serem executados a partir de qualquer um dos mais de 20 servidores globais em nuvem em todo o mundo, portanto, não há necessidade de utilizar suas máquinas locais ou investir em qualquer hardware local para o seu teste. Os resultados dos testes incluem relatórios aprofundados e dashboards que podem ser facilmente compartilhados com as partes interessadas. Eles fornecem vários níveis de preços, incluindo uma opção sob demanda, e seu suporte ao cliente está disponível 24 horas por dia, 7 dias por semana.
Próximo Nível
Experimente recursos incomparáveis com escalabilidade ilimitada. Sem cartão de crédito, sem contrato.