A edição de julho da revista webdesign (nº 79), traz uma entrevista com Ruy Carneiro, diretor da WA Consulting e presidente do Comitê de Web Analytics do IAB Brasil, junto com nossos amigos Daniella Morier da Avantare e Stephan Berwanger da TV1, sobre Testes A/B e MVT (Multivariável).

Revista webdesign nº 79

Na entrevista foram abordados temas como:

  • utilização de testes como meio de se criar uma cultura de mudanças nas empresas
  • como os testes podem melhorar a experiência dos visitantes
  • quando utilizar o teste A/B e o MVT
  • etapas necessárias para a aplicação dos testes
  • trabalho em conjunto entre o grupo de design e o grupo de análise
  • dicas de leitura.

Vale a pena dar uma olhada!

Até o próximo post.

Teste A/B e Multivariável

Em um mercado em constante mudança como o mercado de internet com mudanças tecnológicas e de comportamento das pessoas, é comum os profissionais de marketing ter uma quantidade enorme de idéias de como reagir a estas mudanças. Mas como saber qual a melhor maneira de fazê-lo? Qual a idéia que melhor se adéqua a um público específico? Qual o custo de errarmos? Como podemos melhorar a conversão de nosso site? Com estas dúvidas na mente de seus clientes, é que as empresas de Web Analytics entraram em um novo nicho, o de testes.

A WebTrends entrou neste mercado em dezembro de 2006 com a compra da ClickShift. Em setembro de 2007, por US$ 65 milhões, a Omniture adquiriu uma das líderes do mercado de testes A/B e multivariável, a Offermatica. Google criou o serviço Google Website Optimizer, que pode ser facilmente integrado ao Google Analytics. Além de outras soluções que continuam independentes como o SiteSpect.

Mas antes de usar esta ou qualquer um destes serviços, alguns devemos ter em mente alguns pontos:

·         Comece simples, tanto tecnicamente como projetos de fácil implementação

·         Planeje o que você irá fazer

          o   Objetivo – A hipótese que será testada

                             §  Qual email terá mais conversão?

                            §  Qual banner terá mais clique

                            §  Qual elemento devo mudar em minha página de entrada para gerar mais conversão?

                            §  Qual a variação de preço que devo usar e qual o potencial de compra desta oferta?

          o   Métricas que serão utilizadas

                            §  Taxa de conversão

                            §  Taxa de clique

          o   Sistema de Mensuração

                            §  Web Analytics

                            §  Ad´Server

          o   Período do Teste

          o   Métricas para referência

                            §  Quantidade atual de conversão

                            §  Média de cliques nas últimas campanhas

          o   Como será a análise estatística

          o   Tarefas a serem executadas e responsáveis

Agora é mãos a obra e ver os resultados?

Até o próximo post!

Em Janeiro passado foi lançada a idéia de criarmos um eBook com textos dos profissionais da nossa lista de discussão de Web Analytics. Agora em Setembro esta idéia tornou-se realidade!

Com texto de profissionais como Fabrizio Bruzetti, Sergio Rodrigues, Gabriel Oyarzabal, Paulo Teixeira, Gustavo Loureiro, Roberto Eckersdorff, André Fatala, Phillip Klein, Jessé Rodrigues, Andrassy
Santos
, Gabrielle Ferreira, Paris Piedade, Celina Uemura, Miguel Dornelles, Marcos Giuntini, Daniella Morier e Ruy Carneiro, o livro teve o prefácio escrito por Jim Stern e a introdução da Cris Rother.

Este livro, apesar dos problemas e desistências, me deu um enorme prazer em organizar, e gostaria de fazer um agradecimento especial ao pessoal do IAKU.org, Rodrigo Pazzini e Vicente Pessoa, que fizeram a
versão final, capa, tudo… :-) .

O download, gratuito, esta na área de downloads da WA Consulting:

http://www.waconsulting.com.br/downloads.php?tipo=2

Agora é começar o eBook II… :-)

Parabens a todos os que participaram!

Tags:
 

Teste A/B – Avaliação Estatística

Após analisar suas métricas de ”Bounce” de uma “Landing Page” ou na escolha entre duas peças (eMail, Banner, PPC, etc) você escolheu usar o Teste A/B para ver a melhor aceitação pelos seus clientes. Você fez o planejamento do seu teste, fez a implementação e coleta de dados.

Agora chegou o momento da análise dos dados! Para te auxiliar disponibilizamos, em nossa área de download (http://www.waconsulting.com.br/downloads.php),  uma planilha desenvolvida por nós para que você possa incluir os dados de quantidade de peças A e B para teste e o retorno de cada um deles. A planilha irá calcular automaticamente o índice de respostas, o desvio padrão e a análise do desvio padrão para que você tenha segurança que há diferença nos 2 modelos em teste para que você possa escolher o que te dará maior retorno.

Agora mãos a obra! J

?

 

Analisar os dados do Web Analytics é só o começo

Fazer as análises dos números de um serviço de web analytics e criar o relatório de análise não é a ponta final do nosso trabalho. Nesta hora é que descobrimos, entre outras coisas, os pontos a serem melhorados em nosso site.

Por exemplo, em uma análise de funil podemos identificar em que ponto a pessoa que visita nosso site esta saindo do caminho que gostaríamos que ela trilhasse para fazer uma determinada ação. A partir deste ponto podemos contar com algumas opções:

  • A experiência do analista que pode, rapidamente, identificar a fonte de um problema
  • Realizar um teste A/B com uma página similar para vermos se podemos aumentar a conversão
  • Realizar um teste multivariável para analisar mais de uma mudança na página problemática, criando assim várias opções de teste

Vamos tratar cada um destes casos, um exemplo do primeiro aconteceu quando uma empresa fez uma campanha e analisando o funil de conversão descobriu a seguinte situação:

  • Passo 1 – Landing Page – 100 vistas
  • Passo 2 – Escolha do Produto – 45 visitas
  • Passo 3 – Cadastro – 70 visitas
  • Passo 4 – Finalização – 10 visitas

Sendo que cada passo era obrigatório para chegar a aquisição do produto. Quando feita a análise descobriu-se que o sistema de cadastro apresentava dois problemas, um acontecia quando o cliente errava no preenchimento e cadastro zerava todos os campos e a pessoa era obrigada a preencher tudo de novo, o outro erro que não vou me lembrar agora, mas lembro que forçava o erro da pessoa. J

Uma alteração na rotina do cadastro foi o suficiente para resolver o problema, mas e quando o problema é o design da página?

Teste A/B

É o mais simples dos testes, mas nem por isso devemos eliminar o planejamento dele, consiste em testar duas peças que são enviadas aleatoriamente para os visitantes para vermos qual das duas faz o melhor trabalho de conversão. Este tipo de teste é usado para landing pages, assim como para email´s ou banners.

Melhoras significantes podem ser sentidas com uma alteração do texto, layout, inclusão ou exclusão de imagens, cores, ou o que você imaginar que possa ser trocado para fazer seu visitante cumprir a ação que você deseja. Mas uma coisa você deve ter em mente, modifique somente uma coisa de cada vez.

Para testar uma única mudança, este tipo de teste é bastante rápido e recomendável, além de quase todos os web analytics de mercado terem suporte nativo para estes testes. Mas e quando queremos testar mais de um elemento de nossa peça? Ai partimos para um outro tipo de teste:

Teste multivariável

Este tipo de teste ainda é pouco usado no Brasil, mas ganha força em mercados mais avançados no uso de web analytics. Consiste em criarmos várias peças com variações entre elas, e da mesma forma que no teste