A entrega não termina no deploy. Nos primeiros sete dias eu acompanho poucos números, todos combinados com o time antes do lançamento.
Adoção
Quantas pessoas que poderiam usar a funcionalidade chegaram até ela. Se a adoção está baixa, o problema costuma ser de descoberta: o ponto de entrada está escondido ou a mensagem não explica o benefício.
Conclusão
Das pessoas que começaram, quantas terminaram a tarefa. Aqui eu olho o funil passo a passo para achar onde as pessoas param.
Retorno
Quem usou uma vez voltou a usar? Em sete dias o dado ainda é curto, então trato como sinal e não como conclusão.
Efeitos colaterais
Escolho uma métrica que não deveria piorar, como tickets de suporte ou tempo de carregamento. Ela evita que uma melhoria em um lugar esconda um problema em outro.
Quando eu mexo
Não mudo nada nos primeiros três dias, a não ser que exista um erro claro. Depois disso, se algum número está muito abaixo do esperado na hipótese, marco uma conversa curta com design e engenharia para decidir entre ajustar, esperar mais uma semana ou desligar.
Registro tudo em uma nota de uma página, que vira a base da revisão do mês.