Entrar
SuperprevisõesPhilip Tetlock e Dan Gardner · 2015
A leitura do Quantor · Comportamento e decisão

Superprevisões

Philip Tetlock e Dan Gardner, 2015 · Superforecasting

Prever bem não é saber mais, é pontuar melhor: quem erra na TV nunca é medido, e quem acerta no mundo real trabalha com probabilidades granulares, revisão constante e humildade medida — e quando o Quantor mediu o consenso dos melhores gestores na B3, o palpite coletivo rendeu menos que o CDI.

6 capítulos · cerca de 41 min de leitura · texto próprio do Quantor, com os números da B3
Este não é o livro. É a leitura do Quantor sobre ele: as ideias de Philip Tetlock e Dan Gardner explicadas com texto próprio, as histórias que o livro conta, o que envelheceu, e o que ele ensina testado com 20 anos de dados da B3. Para a obra completa, leia o original.

Sumário

  1. 1O homem que começou a cobrar a contaComo um psicólogo americano transformou opinião de especialista em algo que pode ser medido, errado e corrigido6 min · aberto
  2. 2A raposa, o ouriço e o placarAs cinco engrenagens que transformam opinião em previsão medível: pergunta falsificável, nota de erro, cabeça de raposa, taxa-base e revisão na margem.Explica as cinco ideias que sustentam o livro: previsão só existe com data, critério e número; a régua de erro probabilístico premia calibração e ousadia ao mesmo tempo; raposas vencem ouriços porque revisam; a visão externa vem antes da narrativa; e os melhores atualizam em passos pequenos com probabilidades granulares. Cada ideia vem com o mecanismo que a faz funcionar e um exemplo de mercado brasileiro.
  3. 3O consenso dos melhores, medido na B3O que acontece quando as previsões mais caras do mercado brasileiro recebem nota contra o CDI.Mostra o teste do Quantor que transforma as carteiras das maiores gestoras de ações em uma previsão com placar: +9,7% ao ano de jan/2006 a set/2026, contra CDI de +10,2% e Ibovespa de +8,6% no mesmo teste, com pior queda de −49% e reprovação por falta de consistência entre subperíodos. Explica por que o juro real alto torna o CDI o árbitro de qualquer previsão no Brasil e por que o consenso profissional, medido pelo fluxo estrangeiro, às vezes aponta para o lado contrário.
  4. 4Torneios, bolhas e os dias em que todo mundo errouOs casos que ensinam o método: voluntários que venceram equipes rivais, a briga com Taleb e as quedas da B3 que nenhuma taxa-base antecipou.Reconta o torneio do IARPA, a lógica da agregação em equipes e a tensão entre Tetlock e Taleb, mostrando por que o grupo do topo tendia a se manter no topo de uma temporada para a outra. Confronta isso com episódios da B3: seis quedas mensais acima de 20% com mediana de 29 meses para recuperar, 21 dias de queda acima de 4 desvios-padrão desde 2000 e a taxa-base de recuperação após o Ibovespa cair mais de 30% do topo, positiva em 81% das vezes e falha em 2008.
  5. 5Os limites do placarPor que medir previsões resolve menos do que parece: horizonte curto, cauda gorda e o custo que come o acerto.Mostra os quatro limites honestos de Superprevisões aplicado a mercado: o torneio media perguntas que se resolviam em semanas ou meses, não em décadas; acertar a probabilidade não diz o tamanho da posição; a bolsa é dominada por extremos que a calibração do dia a dia não captura; e o custo de executar corrói o ganho previsto — o consenso dos gestores cai de +9,7% para +9,1% ao ano só por sair de 0,1% para 0,25% de custo por operação. Fecha com o que não envelheceu: a exigência de placar serve para escolher a regra, mas nenhuma disciplina de previsão resolve o problema de carregá-la, como mostram os 7 métodos dos mestres testados na B3, dos quais 4 bateram o CDI e nenhum passou sem uma queda grande.
  6. 6Anote a probabilidade antesComo transformar opinião de mercado em aposta registrada, com data, número e um árbitro que não negocia: o CDI.Converte Superprevisões em cinco disciplinas aplicáveis na B3: escrever a previsão com data e probabilidade, partir da taxa-base (como os 8 ciclos de corte da Selic desde 2002, com o Ibovespa subindo nos 12 meses seguintes em 75% deles, mediana +15%), atualizar em passos pequenos, separar a previsão do tamanho da aposta e guardar o placar de quem se lê. Mostra que a régua EMA-5 mensal, testada papel a papel nas 437 ações líquidas desde 2006, rendeu +9,6% ao ano contra +0,7% de segurar e +10,5% do CDI, mas cortou a pior queda em 407 das 437 ações — serve para sobreviver ao erro, não para acertar mais.
Leitura Quantor · capítulo 1 de 6

O homem que começou a cobrar a conta

Como um psicólogo americano transformou opinião de especialista em algo que pode ser medido, errado e corrigido

A diferença entre opinião e previsão é uma só: o placar. Opinião é uma frase que se adapta ao que aconteceu depois; previsão é um número com data que ou acerta ou não acerta, e que alguém anotou antes. "Superprevisões" insistiu nessa distinção até ela virar método — e descobriu, de quebra, que quem melhor atravessa esse teste raramente é quem aparece na televisão.

O psicólogo que resolveu conferir

Philip Tetlock é psicólogo político, professor na Universidade da Pensilvânia, e passou a carreira fazendo com especialistas aquilo que quase ninguém fazia: anotar o que eles diziam e voltar depois para conferir. Começou nos anos 80, com a Guerra Fria ainda de pé, pedindo a analistas políticos, acadêmicos, jornalistas e consultores que atribuíssem probabilidades a eventos concretos — tal regime sobrevive até certa data, tal governo cai, tal economia entra em recessão. Não queria ensaios. Queria números, com prazo.

Acumulou dezenas de milhares desses palpites ao longo de duas décadas e publicou o resultado em "Expert Political Judgment", de 2005. A conclusão, dita com nossas palavras, é desconfortável: a acurácia média dos especialistas ficou próxima da de algoritmos triviais de extrapolação, e a confiança que eles declaravam não acompanhava o acerto que entregavam. O estudo já separava ali os dois estilos de raciocínio que o próximo capítulo vai nomear: os especialistas de uma ideia só ficaram atrás dos generalistas que juntavam fontes em conflito.

A versão popular do achado virou piada de internet, a do macaco atirando dardos. A piada esconde o que de fato interessa. Tetlock não disse que previsão é impossível. Disse que a variação entre previsores é enorme, e que o que separa os bons dos ruins não é credencial, não é acesso a informação, não é inteligência bruta. É estilo de raciocínio.

O mecanismo é quase banal quando se enxerga. Especialista nenhum, na vida comum, recebe retorno limpo sobre o que disse. Ele fala na rádio, escreve a coluna, a vida segue, e doze meses depois ninguém volta para medir a distância entre a afirmação e o fato. Sem resolução, não há correção. Sem correção, vinte anos de experiência viram um ano repetido vinte vezes, com a confiança subindo o tempo todo e a precisão parada no lugar.

O torneio que mudou o jogo

O segundo ato começa depois de um trauma institucional. A falha de inteligência sobre as armas de destruição em massa no Iraque mostrou ao governo americano que "alta confiança" não é o mesmo que "alta probabilidade": o problema não foi falta de informação, foi o peso que se deu a cada pedaço dela. Pela primeira vez, instituições grandes quiseram saber não se seus analistas eram inteligentes, mas se eram calibrados.

A resposta veio na forma de um torneio. O IARPA, braço de pesquisa da comunidade de inteligência dos Estados Unidos, financiou uma competição de previsão entre equipes de pesquisa patrocinadas por universidades: perguntas de geopolítica e economia com data e critério objetivo de resolução, milhares de participantes respondendo em probabilidade e pontuados por uma fórmula que mede a distância entre a probabilidade dita e o que de fato aconteceu — a pontuação de Brier, que o capítulo 2 destrincha. Tetlock entrou com o Good Judgment Project, tocado junto com Barbara Mellers e Don Moore. Boa parte do time era de voluntários comuns — gente que respondia a perguntas sobre o Irã ou sobre o preço do petróleo no tempo livre, sem material secreto, sem crachá.

O Good Judgment venceu as equipes rivais, e venceu de novo nas temporadas seguintes. Um subgrupo de participantes se destacou de maneira persistente: quem estava no topo numa temporada tendia a continuar no topo na seguinte, que é o teste elementar para distinguir habilidade de sorte. São os superprevisores que dão nome ao livro. O achado central não é que eles existem. É que aquilo que eles faziam podia ser descrito em procedimento e, em boa medida, transferido: módulos curtos de treino em raciocínio probabilístico melhoraram a pontuação dos participantes comuns — uma melhora medida e modesta, não um milagre.

Dan Gardner, jornalista canadense, entra como coautor para dar ao argumento o que programa de pesquisa não tem: narrativa. É dele boa parte da costura que transforma pontuação estatística em livro que se lê de ponta a ponta. A combinação importa. Sem Gardner, seria um artigo acadêmico; sem Tetlock, seria mais um livro de psicologia aplicada sem dados por baixo.

Por que o livro marcou

Porque mudou o terreno da discussão. Antes, debater previsão era debater retórica: quem argumenta melhor, quem tem mais experiência, quem soa mais seguro. Depois, virou contabilidade. Pergunta com data. Critério verificável. Probabilidade em número. Pontuação registrada. Quem não aceita essas quatro condições não está prevendo, está comentando — e comentar é atividade legítima, desde que ninguém confunda as duas.

Há uma consequência cruel nessa mudança. O formato que premia o comentarista na televisão é exatamente o que destrói o placar. A TV recompensa a certeza, a frase redonda, a tese única aplicada a tudo. O placar recompensa a dúvida quantificada, o "68%", a revisão da semana passada. Quem diz "a crise é inevitável" ocupa cinco minutos bem ocupados no ar; a mesma pessoa dizendo "atribuo 40% a uma recessão até dezembro, era 35% no mês passado porque o emprego surpreendeu" não volta a ser convidada. O incentivo seleciona o previsor errado, e o público não percebe porque o público também não anota.

O espírito do livro cabe numa ideia só: crença é hipótese em teste, não patrimônio a defender. Quem trata a própria opinião como posse passa a defendê-la; quem a trata como hipótese passa a procurar o que a derruba. A diferença parece sutil no discurso e é brutal no resultado.

Para quem este livro serve

Serve, antes de tudo, para quem consome opinião de mercado em escala industrial. O investidor brasileiro lê relatórios, assiste a transmissões ao vivo, acompanha gestores em podcasts, coleciona teses sobre juro, dólar e a próxima eleição — e não mantém uma linha de registro sobre o acerto histórico de nenhuma dessas fontes. Ele terceiriza a previsão sem auditar o fornecedor. É uma das poucas áreas da vida adulta em que se aceita um serviço recorrente sem jamais conferir o resultado.

Serve também para quem suspeita que o problema não é só dos outros. Quem começa a anotar o próprio palpite com data e número costuma levar um susto nos primeiros seis meses, e o susto é o começo do aprendizado. Memória sem registro é generosa: ela reconstrói o que pensávamos em função do que aconteceu, apaga as convicções erradas e promove as acertadas a visão estratégica.

Há ainda uma distinção que o livro obriga a fazer e que quase todo investidor carrega embaralhada: quão provável é isso e quanto eu devo arriscar nisso. A primeira pergunta é de calibração; a segunda é de dimensionamento, e depende do tamanho do estrago quando se erra. Confundi-las é a forma mais comum de perder dinheiro estando certo — acertar a direção com posição grande demais para aguentar o caminho.

A pergunta que o livro responde é direta: é possível prever melhor o futuro e, se é, o que separa quem consegue de quem apenas fala bonito? Tetlock responde com dados de torneio. Nós fomos adiante e fizemos a conta na B3, tratando a presença de uma ação nas carteiras das maiores gestoras como probabilidade revelada — aposta com dinheiro, não opinião em entrevista — e cobrando dela o mesmo critério que cobramos de qualquer regra: bater o CDI e bater o sorteio em todos os subperíodos. O resultado está no capítulo 3. Antes dele, as regras do jogo: o que separa a raposa do ouriço.

Continua no capítulo 2
A raposa, o ouriço e o placar

As cinco engrenagens que transformam opinião em previsão medível: pergunta falsificável, nota de erro, cabeça de raposa, taxa-base e revisão na margem.

Leia o livro inteiro com uma conta: os 6 capítulos no leitor do app, continuando de onde você parou.

Leia o livro inteiro com uma conta
Já tem conta? Entrar

Guia de estudo com texto próprio do Quantor sobre o livro; não substitui a leitura do original. A capa é uma criação nossa, não a da editora.