EN

Sobre o Desempenho de Pesquisas

O objetivo da série Desempenho de Pesquisas não é fazer uma análise da qualidade das pesquisas ou dos institutos que as produzem. A ideia é quantificar apenas e tão somente o quanto as pesquisas da última semana em cada corrida eleitoral analisada estavam distantes do resultado oficial da eleição, sem especular sobre os motivos ou determinar quais pesquisas "acertaram" ou "erraram" mais.

Para analisar a qualidade ou determinar as possíveis causas das disparidades seria necessário que todos os institutos publicassem não apenas detalhes precisos sobre sua metodologia e os pesos utilizados nas suas amostras, mas também seus dados completos. A prática comum no setor é manter dados e pesos como propriedade intelectual e portanto sigilosa, o que é compreensível: de modo similar, optamos por não divulgar todos os parâmetros que orientam nossos modelos preditivos, por exemplo.

Com essas limitações, ainda assim acreditamos na validade do exercício descritivo que é o Desempenho de Pesquisas. Por um lado, tomamos o cuidado de não se concentrar apenas em uma comparação entre os resultados dos principais candidatos, mas também como cada instituto mapeou a eleição como um todo. Por outro, apresentamos com clareza que boa parte da variação no desempenho é ruído: pesquisas que erram por apenas um ponto percentual não são realmente distinguíveis daquelas que erram por dois pontos.

Quais pesquisas entram

Em cada disputa eleitoral consideramos a última pesquisa de cada instituto com campo encerrado em até sete dias antes da eleição. Pesquisas mais antigas do que isso ficam de fora: quanto mais distante da votação, mais a pesquisa descreve uma eleição que ainda não aconteceu, fazendo pouco ou nenhum sentido compará-la com as urnas. Usar apenas uma pesquisa por instituto também evita que quem publicou mais vezes na reta final tenha mais peso na comparação.

Os números vêm da divulgação original de cada pesquisa no relatório do instituto ou em alguma reportagem, identificadas pelo registro no TSE. No momento 96% das pesquisas consideradas têm o link para a fonte na própria tabela. As demais vêm de arquivos históricos e não tiveram a divulgação original localizada.

O conjunto da série cobre as eleições presidenciais desde 2002, as de governador desde 2014, as de senador desde 2018 e as de prefeituras das capitais em 2016, 2020 e 2024. Os segundos turnos aparecem para presidente (2006 a 2026), governador (2014 a 2026) e prefeito de capital (2016 a 2024).

Votos válidos

O TSE divulga o resultado final em votos válidos, descontando brancos, nulos e abstenções; a comparação precisa ser feita com essa situação em mente. Muitos institutos publicam seu próprio cálculo de votos válidos e nesses casos usamos esses números, pois cada instituto tem sua forma de tratar indecisos e eleitores que pretendem anular o voto. Quando a pesquisa publica apenas os votos totais, fazemos o que chamamos de conversão padrão: retiramos brancos, nulos e indecisos e distribuímos o restante do eleitorado proporcionalmente, como se os eleitores que não declararam voto se dividissem da mesma forma que aqueles que declararam. É uma conversão imperfeita, mas é a escolha com menos pressupostos teóricos aplicados a pesquisas sobre as quais não há informação suficiente.

No caso de pesquisas para o Senado, usamos a mesma base utilizada pelo nosso Agregador: o percentual de todos os votos dados, sem indecisos. Em anos com duas vagas cada eleitor vota duas vezes e o resultado é registrado pelo TSE somando todos em percentuais que somam 100 em cada estado.

Os candidatos são comparados um a um com os números da pesquisa; aqueles que a pesquisa não listou separadamente formam um único grupo ("Outros"), que também entra na conta. Quando um candidato teve a candidatura anulada e a pesquisa não o incluiu entre as opções, comparamos a pesquisa com o resultado sem ele, redistribuído entre os demais.

Erro ponderado

O termo "erro" aqui descreve a diferença entre pesquisa e resultado, não devendo ser interpretado como mais do que isso. Há várias formas de medir esse número e nenhuma é completamente neutra. Nosso cálculo parte de uma premissa simples: o erro que importa é aquele que muda a leitura de uma eleição. Errar a votação de um candidato com apenas 2% dos votos não é o mesmo que errar quem vai para o segundo turno, por exemplo.

O erro ponderado combina dois fatores e dois ajustes, todos medidos em pontos percentuais. As regras abaixo valem para presidente, governador e prefeito no primeiro turno; Senado e segundo turno têm adaptações, explicadas depois. Para mostrar como o cálculo funciona, usamos o mesmo exemplo ao longo do texto: o resultado oficial teve Candidato A com 45%, Candidato B com 35%, Candidato C com 12% e os demais somados com 8%. Uma pesquisa mostrou A com 48%, B com 33%, C com 13% e os demais com 6%.

Disputa decisiva

O primeiro fator é o erro nas margens: a diferença entre o 1º e o 2º colocado e, quando havia uma vaga no segundo turno em jogo, a diferença entre o 2º e o 3º. No exemplo, a pesquisa mostrou A 15 pontos à frente de B, quando a diferença real foi de 10, um erro de 5 pontos; mostrou B 20 pontos à frente de C, quando a diferença foi de 23, um erro de 3 pontos.

Medimos margens e não os percentuais de cada candidato porque é a margem que decide a eleição e é o que o público lê imediatamente. Uma pesquisa que subestima os dois primeiros colocados na mesma medida (por exemplo, por ter mais indecisos) ainda assim descreveu corretamente a disputa.

As duas margens não pesam o mesmo: quanto mais apertada a disputa no resultado, maior o peso. Um erro de 3 pontos em uma disputa decidida por 2 pontos muda quem vence; em uma disputa decidida por 30 pontos, não muda nada na história da eleição. O peso cai de forma contínua conforme a diferença real aumenta: por exemplo, 0,88 para uma diferença de 2 pontos, 0,51 para 10 pontos, 0,26 para 20 pontos e 0,14 para 30 pontos. No exemplo acima, a margem entre A e B (10 pontos) pesa 0,51 e a margem entre B e C (23 pontos) pesa 0,22, e o erro da disputa decisiva fica em 4,4 pontos, mais próximo do erro na margem mais apertada.

A margem entre o 2º e o 3º só conta quando a vaga no segundo turno estava de fato em disputa. Se o vencedor teve menos de 50% dos votos válidos, ela conta integralmente; acima disso, seu peso cai rapidamente (0,82 com o vencedor a 50,5%; 0,37 a 52,5%; 0,14 a 55%). Preferimos essa gradualidade porque em algumas disputas a existência do segundo turno dependeu de décimos: em 2026, no Paraná o vencedor Sergio Moro teve 50,1% dos votos válidos.

A disputa decisiva é medida por pontos percentuais de margem: quando um eleitor troca o 1º pelo 2º colocado, a margem entre os dois muda dois pontos, enquanto o eleitorado fora do lugar muda apenas um. Na prática, a disputa decisiva pesa cerca do dobro por eleitor, o que é intencional: é o erro que muda a leitura da eleição.

Eleitorado fora do lugar

O segundo fator mede a eleição como um todo: quanto do eleitorado a pesquisa colocou no lugar errado. Somamos a diferença entre pesquisa e resultado para cada candidato e para o grupo dos demais e dividimos por dois, porque cada eleitor fora do lugar é contado duas vezes (uma no candidato que "ganhou" o voto e outra no que "perdeu"). Continuando com o exemplo acima, as diferenças são respectivamente de 3, 2, 1 e 2 pontos: um total de 8, ou 4 pontos de eleitorado fora do lugar. Em outras palavras, seria preciso mudar o voto de 4% dos entrevistados para que a pesquisa atingisse exatamente o resultado.

Esse fator existe porque as margens só enxergam o topo da disputa. Uma pesquisa pode acertar as margens entre os três primeiros e ainda assim inflar ou esvaziar os candidatos menores, o que também é uma forma de descrever mal a eleição.

Em geral, os dois fatores têm o mesmo peso. Quando o vencedor fica perto de 50% dos votos válidos, o peso do eleitorado fora do lugar sobe até 75%, porque nesse caso cada ponto do líder decide se haverá segundo turno ou não. Ou seja, o tamanho de cada candidato importa tanto quanto as margens. Com o vencedor a 47%, o peso é de 64%; a 50%, de 75%; a 60%, cai para 53%. No exemplo, com o vencedor a 45%, o peso é de 59%, e a combinação dos dois fatores (Disputa decisiva e Eleitorado fora do lugar) com os pesos aplicados dá 4,2 pontos.

Lado errado

O primeiro ajuste trata dos erros que mudam a história da eleição. Consideramos três "linhas de decisão" em um primeiro turno: quem lidera, quais dois candidatos vão ao segundo turno e se o vencedor passa de 50%. Quando a pesquisa enxerga o eleitorado do outro lado de uma linha que o resultado não cruzou, contamos quantos pontos de eleitorado ela colocou além da linha. Para quem lidera, por exemplo, trata-se de metade da margem invertida: o número de eleitores que precisariam mudar de lado para desfazer a inversão.

Esse valor é descontado conforme a distância do próprio resultado à linha. Não faz sentido cobrar de uma pesquisa que acerte o lado de uma linha que o resultado cruzou por um fio: isso está dentro de qualquer margem de erro razoável. Se o resultado ficou a 0,25 ponto da linha, cobramos apenas 22% do valor; a meio ponto, 39%; a um ponto, 63%; a dois pontos, 86%; a partir de três pontos, praticamente tudo. Metade do resultado entra no erro ponderado.

No exemplo, a pesquisa acertou quem lidera, quem foi ao segundo turno e que haveria segundo turno, portanto não há ajuste. Em outro caso, se o Candidato A tivesse terminado com 49,5% e a pesquisa o mostrasse com 51%, ela teria indicado uma vitória em primeiro turno que não aconteceu. A pesquisa foi 1 ponto além da linha de 50%, mas o resultado ficou a apenas meio ponto dela: cobramos 39% desse ponto, e metade disso, 0,2 ponto, entra no erro ponderado.

Por isso, apontar o vencedor errado em uma disputa decidida por menos de dois pontos custa pouco: a diferença entre pesquisa e resultado estava dentro do que o acaso explica.

Desconto por data (somente para Presidente)

O segundo ajuste vale apenas para a eleição presidencial, no primeiro e no segundo turno, devido à quantidade maior de pesquisas, o que permite o cálculo do ajuste. Alguns institutos publicam sua última pesquisa quatro ou mais dias antes da eleição, tornando seus números defasados em relação à movimentação do eleitorado. Comparar essas pesquisas diretamente com o resultado cobraria delas um movimento que ainda não tinha acontecido quando foram a campo.

Para estimar esse movimento, comparamos o erro médio das pesquisas de outros institutos com campo encerrado nos mesmos dias (até dois dias de diferença) com o erro médio das pesquisas dos outros institutos encerradas entre um e três dias antes da eleição. Se as pesquisas do mesmo período erraram mais do que as da véspera, a diferença é descontada e o erro ponderado cai. Em cada janela conta a última pesquisa de cada instituto, e o desconto só é calculado quando há pelo menos cinco institutos em cada uma. O desconto aparece entre parênteses ao lado do erro ponderado, nunca aumenta o erro e nunca leva o resultado para abaixo de zero.

Senado

Nas disputas para o Senado, a linha de decisão é quem fica com a vaga. A disputa decisiva mede o erro na margem de cada eleito sobre o mais votado entre os não eleitos, com o mesmo peso maior para as disputas mais apertadas. O eleitorado fora do lugar é calculado da mesma forma. O lado errado cobra a pesquisa que colocou na vaga um candidato que ficou de fora. Como não existe a linha de 50%, os dois fatores mantêm sempre o mesmo peso.

Segundo turno

No segundo turno, entram apenas pesquisas com campo depois do primeiro turno. No segundo turno de 2026, consideramos as pesquisas publicadas no Agregador do Plano Político e a última pesquisa PoderData, divulgada no dia da votação.

Em um segundo turno há apenas dois candidatos e o erro da pesquisa se resume à margem entre eles. O eleitorado fora do lugar não é calculado, porque nesse caso seria uma repetição da métrica anterior. O lado errado continua valendo para quem vence.

No 2º turno, o erro ponderado é o erro na margem entre os dois candidatos em pontos percentuais de margem. Por isso os números não são comparáveis aos do 1º turno.

Quanto do erro é ruído

Mesmo uma pesquisa perfeita com uma amostra realmente aleatória e corretamente calibrada erra constantemente por puro acaso. Para cada disputa, simulamos milhares de amostras perfeitas a partir do resultado oficial e calculamos o erro ponderado de cada uma, exatamente como fazemos com as pesquisas. A "faixa do acaso" mostra até onde vai o erro de 9 em cada 10 dessas amostras. Na eleição presidencial de 2026, por exemplo, metade das amostras perfeitas simuladas errou em até 2 pontos, e 9 em cada 10 em até 4 pontos. É por isso que mostramos o erro ponderado em números inteiros: a casa decimal sugeriria uma precisão que o próprio acaso não permite.

Quanto ao tamanho das amostras perfeitas: o número de entrevistas declarado por cada pesquisa não é o seu tamanho efetivo. Ponderação, desenho da amostra, método de coleta: todos esses fatores aumentam o ruído, fazendo com que as amostras efetivas das pesquisas sejam menores do que as amostras reais, aumentando a margem de erro significativamente.

Não é possível medir precisamente essa redução instituto por instituto com os dados publicados na imensa maioria dos casos. A melhor opção com a informação disponível é analisar a variação dos institutos de uma pesquisa para outra para estimar sua movimentação. No entanto, alguns institutos variam menos de uma pesquisa para outra do que o puro acaso permitiria, o que é típico de pesquisas em painel (quando as mesmas pessoas são entrevistadas repetidamente) ou de ponderação com metas fixas (o que é extremamente comum nas pesquisas brasileiras).

Usar essa estimativa instituto por instituto premiaria estabilidade, não precisão. Por isso usamos o mesmo tamanho efetivo para todas as pesquisas, estimado a partir dos próprios dados: comparamos 515 pares de pesquisas consecutivas de um mesmo instituto na mesma disputa, descontando o movimento registrado pelos demais institutos no mesmo período. Em média, as pesquisas oscilam como se tivessem cerca de 970 entrevistas efetivas, embora a mediana declarada seja de cerca de 1.500. A faixa do acaso é calculada sobre esse número.

Os níveis

Cada pesquisa aparece como pertencente a um de três níveis: erro abaixo do típico, erro típico ou erro acima do típico. Essa classificação é derivada a partir do seguinte método:

Primeiro dividimos o erro ponderado de cada pesquisa pelo erro mediano das amostras perfeitas simuladas da mesma disputa. Isso coloca disputas diferentes na mesma escala: uma eleição com muitos candidatos competitivos produz mais erro por puro acaso do que uma disputa polarizada.

Depois disso, comparamos esse valor com o das pesquisas finais para o mesmo cargo em todas as outras eleições da série, deixando de fora a própria eleição analisada para manter a consistência interna dos números. Primeiros turnos são comparados com primeiros turnos e segundos turnos com segundos turnos.

Uma pesquisa tem erro abaixo do típico quando errou menos do que 3 em cada 4 pesquisas a partir dessa comparação e é classificada como erro acima do típico quando errou mais do que 3 em cada 4; por construção, erro típico está entre esses dois limiares. Se uma eleição específica foi difícil para as pesquisas, os níveis mostram isso: mais pesquisas daquele ano aparecem com erro acima do típico.

Fórmulas e dados

Abaixo seguem todas as fórmulas utilizadas para os cálculos descritos acima. \(P_c\) é o percentual do candidato \(c\) na pesquisa e \(R_c\) o resultado eleitoral do mesmo candidato, ambos em votos válidos. Candidatos são numerados pela ordem do resultado (1º, 2º e 3º).

Primeiro turno: presidente, governador e prefeito

Erros nas margens:

$$e_{1\to 2} = (P_1 - P_2) - (R_1 - R_2) \qquad e_{2\to 3} = (P_2 - P_3) - (R_2 - R_3)$$

Pesos pela proximidade da disputa e pela vaga no 2º turno:

$$w_{1\to 2} = e^{-(R_1 - R_2)/15} \qquad w_{2\to 3} = g \cdot e^{-(R_2 - R_3)/15} \qquad g = \begin{cases} 1 & \text{se } R_1 \lt 50 \\ e^{-(R_1 - 50)/2{,}5} & \text{se } R_1 \ge 50 \end{cases}$$

Disputa decisiva:

$$D = \frac{w_{1\to 2}\,|e_{1\to 2}| + w_{2\to 3}\,|e_{2\to 3}|}{w_{1\to 2} + w_{2\to 3}}$$

Eleitorado fora do lugar considera \(L\) os candidatos que a pesquisa publicou separadamente (os demais formam um único grupo nos dois lados da equação):

$$F = \frac{1}{2}\left(\sum_{c \in L} |P_c - R_c| + \left|\Big(100 - \sum_{c \in L} P_c\Big) - \Big(100 - \sum_{c \in L} R_c\Big)\right|\right)$$

Peso do eleitorado fora do lugar:

$$a = 0{,}5 + 0{,}25 \cdot e^{-|R_1 - 50|/5}$$

Lado errado: para cada linha de decisão \(\lambda\), \(d_\lambda\) é quanto a pesquisa foi além da linha e \(\delta_\lambda\) é a distância do próprio resultado até ela, ambos em pontos de eleitorado:

$$X = \sum_{\lambda} d_\lambda \left(1 - e^{-\delta_\lambda}\right)$$

Quem lidera: \(d = \tfrac{1}{2}\max\big(0,\ \max_{c \ne 1} P_c - P_1\big)\) e \(\delta = \tfrac{1}{2}(R_1 - R_2)\).

Quem vai ao 2º turno: \(d = \tfrac{1}{2}\, g \cdot \max\big(0,\ \max_{c \ne 1,2} P_c - \min(P_1, P_2)\big)\) e \(\delta = \tfrac{1}{2}(R_2 - R_3)\).

Linha de 50%: se \(R_1 \ge 50\), \(d = \max\big(0,\ 50 - P_1,\ \max_{c \ne 1} P_c - 50\big)\); se \(R_1 \lt 50\), \(d = \max\big(0,\ \max_c P_c - 50\big)\); em ambos os casos \(\delta = |R_1 - 50|\).

Erro ponderado:

$$\text{EP} = (1 - a)\,D + a\,F + \tfrac{1}{2}\,X$$

Senado

Com \(W\) os eleitos (uma ou duas vagas) e \(\ell\) o mais votado entre os não eleitos, em percentuais de todos os votos dados:

$$e_w = (P_w - P_\ell) - (R_w - R_\ell) \qquad D = \frac{\sum_{w \in W} e^{-(R_w - R_\ell)/15}\,|e_w|}{\sum_{w \in W} e^{-(R_w - R_\ell)/15}}$$

\(F\) é calculado como no primeiro turno e \(a = 0{,}5\). A mesma regra, com uma vaga, vale para a capital sem possibilidade de 2º turno (Palmas, 2020). Lado errado: \(d = \tfrac{1}{2}\max\big(0,\ \max_{c \notin W} P_c - \min_{w \in W} P_w\big)\) e \(\delta = \tfrac{1}{2}\big(\min_{w \in W} R_w - R_\ell\big)\).

Segundo turno

$$\text{EP} = |e| + \tfrac{1}{2}\,X \qquad e = (P_1 - P_2) - (R_1 - R_2)$$

com \(d = \tfrac{1}{2}\max(0,\ P_2 - P_1)\) e \(\delta = \tfrac{1}{2}(R_1 - R_2)\).

Desconto por data (Presidente)

Para pesquisas com campo encerrado quatro ou mais dias antes da eleição:

$$\Delta = \min\Big(\text{EP},\ \max\big(0,\ \overline{\text{EP}}_{\text{mesmos dias}} - \overline{\text{EP}}_{\text{véspera}}\big)\Big)$$

"Mesmos dias" é a média do erro ponderado da última pesquisa de cada outro instituto com campo encerrado até dois dias antes ou depois; "véspera", a da última pesquisa de cada outro instituto encerrada entre um e três dias antes da eleição. O desconto só é calculado se houver pelo menos cinco institutos na janela relevante.

Faixa do acaso, tamanho efetivo e níveis

Faixa do acaso: sorteamos 20.000 amostras perfeitas de \(0{,}9 \times 970\) votos válidos a partir do resultado (distribuição multinomial, com os candidatos listados no resultado e os demais agrupados) e calculamos o erro ponderado de cada uma pela mesma fórmula. \(A_{50}\) é a mediana; o percentil 90 é o limite da faixa.

Tamanho efetivo: para cada par de pesquisas consecutivas do mesmo instituto na mesma disputa (de 3 a 14 dias de intervalo, primeiro turno para presidente, governador e prefeito), \(\Delta m\) é a variação da margem entre os dois primeiros menos a variação da margem média dos demais institutos (até cinco dias antes ou depois). Com \(p_1\) e \(p_2\) as proporções médias desses dois candidatos no par:

$$n_{\text{ef}} = \frac{2 \cdot \operatorname{mediana}\big[\,10^4\,(p_1 + p_2 - (p_1 - p_2)^2)\,\big]}{\sigma^2} \qquad \sigma = 1{,}4826 \cdot \operatorname{mediana}\big|\Delta m - \operatorname{mediana}(\Delta m)\big|$$

Níveis: \(r = \text{EP} / A_{50}\). Os limites são os percentis 25 e 75 de \(r\) entre as pesquisas finais do mesmo cargo e turno em todas as outras eleições da série; erro abaixo do típico se \(r\) fica abaixo do percentil 25, acima do típico se fica acima do percentil 75.

Todos os números usados nos cálculos acima estão disponíveis aqui. O arquivo está organizado a partir de uma linha por pesquisa, ";" como separador e vírgula para separação decimal. Contém os percentuais das pesquisas e o resultado da eleição a que se referem, cada um dos componentes do cálculo, o desconto por data e os intervalos utilizados para suas janelas, além da faixa de acaso e os limites para cada nível.

Finalizando

Ressaltamos novamente que os números do Desempenho de Pesquisas não buscam inferir a qualidade das pesquisas de um instituto de modo geral: cada disputa é analisada em si mesma e erros de uma não podem ser transplantados para outra diretamente. Além disso, historicamente a correlação entre erro em uma pesquisa e acerto na próxima não é alta. A "pesquisa perfeita" de ontem frequentemente não acerta tão bem amanhã. Assim como as próprias pesquisas, são indicações imperfeitas de tendências.