NotTrack AI
Entrar Abrir chat

Quatro testes que valem 20 minutos

2 min de leitura

Quatro testes que valem 20 minutos

Pergunte algo cuja resposta você já conhece, algo realmente difícil do seu trabalho, algo perto do limite do seu assunto e depois mantenha uma única conversa por 15 mensagens. Os 4 testes cobrem precisão, capacidade, filtro e memória, que é tudo o que vai afetar você.

O uso casual mostra como um produto parece e esconde como ele falha. São as falhas que decidem se você continua usando algo, então vale provocá-las de propósito e logo no começo.

Nesta página
  1. A resposta conhecida
  2. A pergunta realmente difícil
  3. O caso limite
  4. A conversa longa
  5. O que as pessoas perguntam antes de trocar

A resposta conhecida

Uma pergunta da sua área em que você consegue julgar a resposta com precisão. É o único teste que mede exatidão e não fluência, e é o que as pessoas pulam porque a resposta não lhes serve para nada. O ponto não é a resposta, e sim calibrar o quanto confiar no resto.

A pergunta realmente difícil

Algo com que você de fato penou. Perguntas fáceis são bem respondidas por qualquer produto, então não distinguem nada. A dificuldade é o que separa os produtos, e só o seu próprio trabalho fornece o nível certo.

O caso limite

Um exemplo real do seu trabalho que fica perto de um assunto sensível. Não é uma provocação: é uma pergunta legítima que um filtro cauteloso poderia barrar. Isso mostra se o produto serve para a sua área, coisa que nenhuma resenha vai dizer.

A conversa longa

Quinze mensagens sobre um mesmo tema e depois uma referência a algo da mensagem 2. Isso mede a janela de memória e o desvio, e é onde os produtos mais diferem e onde as resenhas menos olham. A maior parte da decepção com um assistente é, na verdade, decepção na mensagem 30.

O que as pessoas perguntam antes de trocar

Devo usar os mesmos testes em todo lugar?

Sim, e anote-os. A comparabilidade é todo o valor, e perguntas lembradas de cabeça mudam de um produto para outro.

20 minutos bastam mesmo?

Para descartar produtos inadequados, de sobra. Para escolher entre 2 bons, uma semana de trabalho real decide melhor.

E se ele falhar em um teste?

Depende de qual. Falhar no caso limite elimina o produto para a sua área; falhar na conversa longa é chato, mas dá para contornar.

Faça os 4 testes aqui e compare com o que você usa agora.

Abrir o chat

Como escolher entre chats de IA