← Menu

Teste A/B 28/09 → 30/09

Metade das oficinas elegíveis de cada frente entra na fila e metade não recebe ligação nenhuma. A diferença entre os dois grupos é o efeito da ligação — é o que separa "comprou depois que ligamos" de "comprou porque ligamos".
O sorteio é por oficina e vale para as duas frentes ao mesmo tempo: a mesma oficina nunca é poupada por uma e ligada pela outra. É determinístico, então o grupo de cada oficina não muda de um dia para o outro.
A régua aqui é diferente da das abas. Nas abas, cada busca, cotação e compra é atribuída à conversa que a precede; no grupo de controle não existe conversa. Aqui os dois grupos são medidos pela mesma janela de calendário. Por isso estes números não batem com os das abas — são perguntas diferentes.

Hoje

28/09
Reativação
EtapaLigamosNÃO ligamosDiferença
Oficinas no grupo199172—
Falamos com3 1,5%0 0,0%+1.5 p.p.
Buscaram15 7,5%13 7,6%-0.1 p.p. -1%
Cotaram10 5,0%4 2,3%+2.7 p.p. +117%
Formaram carrinho8 4,0%7 4,1%-0.1 p.p. -2%
Compraram2 1,0%2 1,2%-0.2 p.p. -17%
Carrinhos abertos88—
Pedidos22—
GMVR$ 715,25R$ 378,25—
Ticket médioR$ 357,62R$ 189,12—
GMV por oficina do grupoR$ 3,59R$ 2,20+R$ 1,39 +63%
Ainda sem volume para leitura: 2 compras no grupo que ligamos e 2 no que não ligamos. Com menos de ~10 compras somadas, a diferença que aparece é ruído.
Engajamento
EtapaLigamosNÃO ligamosDiferença
Oficinas no grupo131167—
Falamos com4 3,1%0 0,0%+3.1 p.p.
Buscaram6 4,6%10 6,0%-1.4 p.p. -23%
Cotaram3 2,3%1 0,6%+1.7 p.p. +283%
Formaram carrinho6 4,6%3 1,8%+2.8 p.p. +156%
Compraram2 1,5%2 1,2%+0.3 p.p. +25%
Carrinhos abertos63—
Pedidos22—
GMVR$ 1.192R$ 519,91—
Ticket médioR$ 595,90R$ 259,95—
GMV por oficina do grupoR$ 9,10R$ 3,11+R$ 5,99 +193%
Ainda sem volume para leitura: 2 compras no grupo que ligamos e 2 no que não ligamos. Com menos de ~10 compras somadas, a diferença que aparece é ruído.
As duas frentes
EtapaLigamosNÃO ligamosDiferença
Oficinas no grupo330339—
Falamos com7 2,1%0 0,0%+2.1 p.p.
Buscaram21 6,4%23 6,8%-0.4 p.p. -6%
Cotaram13 3,9%5 1,5%+2.4 p.p. +160%
Formaram carrinho14 4,2%10 2,9%+1.3 p.p. +45%
Compraram4 1,2%4 1,2%+0.0 p.p. +0%
Carrinhos abertos1411—
Pedidos44—
GMVR$ 1.907R$ 898,16—
Ticket médioR$ 476,76R$ 224,54—
GMV por oficina do grupoR$ 5,78R$ 2,65+R$ 3,13 +118%
Ainda sem volume para leitura: 4 compras no grupo que ligamos e 4 no que não ligamos. Com menos de ~10 compras somadas, a diferença que aparece é ruído.

Acumulado do teste

28/09 → 28/09
Reativação
EtapaLigamosNÃO ligamosDiferença
Oficinas no grupo199172—
Falamos com3 1,5%0 0,0%+1.5 p.p.
Buscaram15 7,5%13 7,6%-0.1 p.p. -1%
Cotaram10 5,0%4 2,3%+2.7 p.p. +117%
Formaram carrinho8 4,0%7 4,1%-0.1 p.p. -2%
Compraram2 1,0%2 1,2%-0.2 p.p. -17%
Carrinhos abertos88—
Pedidos22—
GMVR$ 715,25R$ 378,25—
Ticket médioR$ 357,62R$ 189,12—
GMV por oficina do grupoR$ 3,59R$ 2,20+R$ 1,39 +63%
Ainda sem volume para leitura: 2 compras no grupo que ligamos e 2 no que não ligamos. Com menos de ~10 compras somadas, a diferença que aparece é ruído.
Engajamento
EtapaLigamosNÃO ligamosDiferença
Oficinas no grupo131167—
Falamos com4 3,1%0 0,0%+3.1 p.p.
Buscaram6 4,6%10 6,0%-1.4 p.p. -23%
Cotaram3 2,3%1 0,6%+1.7 p.p. +283%
Formaram carrinho6 4,6%3 1,8%+2.8 p.p. +156%
Compraram2 1,5%2 1,2%+0.3 p.p. +25%
Carrinhos abertos63—
Pedidos22—
GMVR$ 1.192R$ 519,91—
Ticket médioR$ 595,90R$ 259,95—
GMV por oficina do grupoR$ 9,10R$ 3,11+R$ 5,99 +193%
Ainda sem volume para leitura: 2 compras no grupo que ligamos e 2 no que não ligamos. Com menos de ~10 compras somadas, a diferença que aparece é ruído.
As duas frentes
EtapaLigamosNÃO ligamosDiferença
Oficinas no grupo330339—
Falamos com7 2,1%0 0,0%+2.1 p.p.
Buscaram21 6,4%23 6,8%-0.4 p.p. -6%
Cotaram13 3,9%5 1,5%+2.4 p.p. +160%
Formaram carrinho14 4,2%10 2,9%+1.3 p.p. +45%
Compraram4 1,2%4 1,2%+0.0 p.p. +0%
Carrinhos abertos1411—
Pedidos44—
GMVR$ 1.907R$ 898,16—
Ticket médioR$ 476,76R$ 224,54—
GMV por oficina do grupoR$ 5,78R$ 2,65+R$ 3,13 +118%
Ainda sem volume para leitura: 4 compras no grupo que ligamos e 4 no que não ligamos. Com menos de ~10 compras somadas, a diferença que aparece é ruído.

Integridade do teste

·o controle não pode receber ligação de frente nenhuma
Nenhuma oficina do grupo de controle recebeu ligação. O experimento está íntegro.