Quatro testes que valem 20 minutos
Pergunte algo cuja resposta você já conhece, algo realmente difícil do seu trabalho, algo perto do limite do seu assunto e depois mantenha uma única conversa por 15 mensagens. Os 4 testes cobrem precisão, capacidade, filtro e memória, que é tudo o que vai afetar você.
O uso casual mostra como um produto parece e esconde como ele falha. São as falhas que decidem se você continua usando algo, então vale provocá-las de propósito e logo no começo.
Leia a seguir
Nesta página
A resposta conhecida
Uma pergunta da sua área em que você consegue julgar a resposta com precisão. É o único teste que mede exatidão e não fluência, e é o que as pessoas pulam porque a resposta não lhes serve para nada. O ponto não é a resposta, e sim calibrar o quanto confiar no resto.
A pergunta realmente difícil
Algo com que você de fato penou. Perguntas fáceis são bem respondidas por qualquer produto, então não distinguem nada. A dificuldade é o que separa os produtos, e só o seu próprio trabalho fornece o nível certo.
O caso limite
Um exemplo real do seu trabalho que fica perto de um assunto sensível. Não é uma provocação: é uma pergunta legítima que um filtro cauteloso poderia barrar. Isso mostra se o produto serve para a sua área, coisa que nenhuma resenha vai dizer.
A conversa longa
Quinze mensagens sobre um mesmo tema e depois uma referência a algo da mensagem 2. Isso mede a janela de memória e o desvio, e é onde os produtos mais diferem e onde as resenhas menos olham. A maior parte da decepção com um assistente é, na verdade, decepção na mensagem 30.
O que as pessoas perguntam antes de trocar
Devo usar os mesmos testes em todo lugar?
Sim, e anote-os. A comparabilidade é todo o valor, e perguntas lembradas de cabeça mudam de um produto para outro.
20 minutos bastam mesmo?
Para descartar produtos inadequados, de sobra. Para escolher entre 2 bons, uma semana de trabalho real decide melhor.
E se ele falhar em um teste?
Depende de qual. Falhar no caso limite elimina o produto para a sua área; falhar na conversa longa é chato, mas dá para contornar.
Faça os 4 testes aqui e compare com o que você usa agora.
Abrir o chat