Evidências
Uma tarefa mais rápida pode produzir uma entrega melhor?
Velocidade, qualidade e trabalho de revisão são medidas diferentes. Um experimento ajuda a entender por que elas não caminham sempre juntas.
É fácil perceber que um texto apareceu em poucos segundos. É mais trabalhoso perceber se ele contém uma omissão importante, se responde à pergunta certa ou se cria uma nova etapa de conferência. Quando se discute produtividade com inteligência artificial, medir apenas a rapidez de produção deixa parte da atividade fora do quadro.
Um experimento, tarefas diferentes
A pesquisa apresentada pela Harvard Business School em 2023 avaliou 758 consultores em tarefas de trabalho intelectual. Dentro do conjunto de atividades bem atendidas pela ferramenta, houve ganhos de velocidade e de qualidade avaliada. O estudo chamou atenção para uma fronteira irregular: tarefas aparentemente próximas podem ter resultados bastante diferentes com assistência de IA.
O interesse desse caso está na variação entre atividades. Seus percentuais não devem ser transferidos para qualquer empresa, ferramenta ou período. A amostra, o desenho das tarefas, o modelo utilizado e os critérios de avaliação pertencem àquele experimento.
Qualidade precisa de um nome
“Ficou melhor” pode significar clareza, correção, completude ou adequação ao destinatário. Essas qualidades se sobrepõem em alguns trabalhos, mas não são equivalentes. Uma resposta elegante pode ser incompleta; um levantamento extenso pode não conter o dado que orienta a decisão.
Em um exemplo hipotético, dois resumos de uma reunião podem ter o mesmo tamanho. O primeiro registra os assuntos discutidos. O segundo distingue o que foi decidido, o que ficou pendente e quem deverá agir. A comparação depende do uso pretendido. Sem esse critério, a avaliação corre o risco de premiar apenas uma apresentação convincente.
O tempo que desaparece da demonstração
Uma demonstração costuma começar com materiais já preparados e terminar quando a resposta surge. O trabalho real inclui escolher os documentos, explicar o contexto, verificar o resultado e corrigir o que não serve. Essas etapas merecem entrar na mesma conta.
- Tempo de preparação: reunir dados e formular a demanda.
- Tempo de produção: obter e ajustar a primeira resposta.
- Tempo de validação: conferir fatos, cálculos, condições e exceções.
- Tempo posterior: corrigir uma entrega devolvida ou esclarecer uma interpretação.
Uma comparação que admite resultados mistos
Uma experiência pode economizar tempo e exigir mais supervisão. Pode melhorar a consistência de documentos simples e não ajudar em situações excepcionais. Registrar essa combinação oferece uma informação mais útil do que resumir tudo em sucesso ou fracasso.
Também vale preservar exemplos que contrariem a impressão inicial. A tarefa na qual a ferramenta não ajudou permite compreender um limite do uso. O objetivo da comparação é reconhecer onde a combinação entre pessoas, dados e sistema funciona, e sob quais condições.
Ficha de estudo · consultoria
Como ler um ganho sem perder a tarefa que o produziu
A pesquisa com 758 consultores da BCG examinou atividades de criação, análise e redação. A apresentação institucional descreve resultados com GPT-4 em 2023; não é uma avaliação de todas as ferramentas atuais.
| Recorte | Leitura do estudo |
|---|---|
| Comparação | Desempenho nas tarefas do experimento, com e sem assistência. |
| Medidas | Tempo, quantidade concluída e qualidade atribuída por avaliadores humanos. |
| Resultado | Houve ganhos nas atividades bem atendidas pela ferramenta; a utilidade variou entre tarefas. |
| Limite | Bom desempenho em um tipo de entrega não estabelece desempenho equivalente em outra atividade aparentemente próxima. |
Uma conta hipotética mais completa
Se um rascunho passa de 40 para 10 minutos, mas a revisão cresce de 10 para 30, a entrega passa de 50 para 40 minutos. A redução total é de 20%, não de 75%. São números ilustrativos, sem relação com os resultados da BCG.
Defina o início, o fim e o critério de aceitação da entrega antes de comparar velocidade.
Fontes consultadas
Navigating the Jagged Technological Frontier ↗Harvard Business School AI Institute · 21 de setembro de 2023Apresentação institucional da pesquisa com 758 consultores da BCG. Identifica configuração, tarefas e resultados; contém acesso ao working paper original.
