Quant Trading Academy, Módulo 1, Parte 2

O backtesting é poderoso, mas fácil de usar incorretamente. Você não precisa construir backtests, mas precisa entender o que eles medem e como interpretá-los.

O que é Backtesting

Um backtest aplica regras de trading a dados históricos e mede o que teria acontecido se tivessem sido seguidas. Um backtest é uma simulação do passado, não um registro de operações reais.

Ele responde: "Se esta estratégia tivesse sido aplicada a estes dados, que resultados teria produzido?" Ele não responde diretamente: "Vai ganhar dinheiro no futuro?"

Os três inimigos de um Backtest confiável

Overfitting (Sobreajuste)
O overfitting acontece quando uma estratégia é ajustada tão precisamente a dados passados que memoriza a história em vez de encontrar um padrão real. Teste variações suficientes e uma versão parecerá excepcional por acaso. O antídoto é a simplicidade e robustez.

Viés de antecipação (Look Ahead Bias)
O viés de antecipação acontece quando o backtest usa informações que não estariam disponíveis no momento da decisão. Se um sinal usa o fechamento de um candle e entra nesse mesmo fechamento, é trapaça. Você só conhece o fechamento depois que o candle termina.

Viés de Data Snooping
O data snooping acontece quando o mesmo conjunto de dados é reutilizado até que bons resultados apareçam. Se você testa muitas ideias e mostra apenas as vencedoras, elas podem apenas se encaixar em peculiaridades daquela amostra. Muitos fatores publicados falham fora da amostra por esse motivo.

O padrão ouro: Testes fora da amostra

A melhor defesa é o teste fora da amostra: construa a estratégia em um período e teste-a em um período separado não visto.

Se uma estratégia é construída com dados de 2018 a 2022 e funciona com dados de 2023 a 2024, esse segundo resultado é significativo. Um método mais forte é o walk-forward testing, onde a estratégia é reotimizada repetidamente em janelas móveis e testada na próxima janela não vista. Estratégias que sobrevivem a ambos têm mais chances de refletir vantagens reais.

As limitações honestas de qualquer Backtest

Até um backtest tem limites. Custos são fáceis de subestimar. Slippage, spreads e execuções ruins importam. O impacto no mercado é invisível: posições maiores podem mover o preço contra você. Dados históricos têm lacunas e anomalias. Mercados evoluem. Participantes, estrutura e regulação mudam. Backtests são úteis, mas não garantias.

O que os Backtests da Quant dizem a você

As configurações da Quant vêm de um backtesting sistemático projetado para reduzir esses modos de falha. Um rótulo +EV reflete um padrão com expectativa positiva em dados históricos, não apenas uma configuração ajustada até parecer boa.

O backtest é uma base calibrada, não uma certeza. Em condições similares, a configuração produziu historicamente resultados positivos em uma amostra significativa. O desempenho ao vivo diferirá. Configurações individuais perderão. Uma sequência ruim não é prova imediata de deterioração. A verdadeira questão é se ainda parece uma variância normal ou se as condições mudaram sistematicamente.

Quando questionar um sinal

Não abandone um sinal só porque teve uma sequência ruim. Mas seguir qualquer sinal para sempre, independentemente das evidências, é igualmente errado.

O limite deve ser estatístico, não emocional. Pergunte: a estrutura do mercado mudou, o desempenho abaixo do esperado é materialmente pior que os drawdowns históricos e existe uma razão lógica para o sinal ter parado de funcionar?

Se não, mantenha a disciplina. Se sim, faça uma revisão sistemática, não uma saída por pânico. A Quant monitora continuamente a saúde dos sinais.

Pontos-chave

Um backtest mostra o que teria acontecido historicamente, não resultados ao vivo.
Os inimigos principais são overfitting, viés de antecipação e viés de data snooping.
Testes fora da amostra são a melhor ferramenta de validação.
Todos os backtests têm limites: custos, impacto de mercado, dados imperfeitos e evolução do mercado.
Os sinais +EV da Quant são significativos e rigorosos, mas não garantias.
Questione um sinal sistematicamente, não emocionalmente.