Um backtest que transformou $10.000 em $12.500 parece uma vitória. Depois você percebe que, se tivesse simplesmente comprado a moeda no início e não feito nada, teria $14.000. Seu bot não te fez ganhar dinheiro. Ele te custou dinheiro, além do esforço e do risco de operá-lo.
É por isso que todo backtest sério precisa de um benchmark, e o honesto para um bot de ativo único é o buy and hold, ou HODL. A Freya o desenha no mesmo gráfico da sua estratégia, então a comparação fica impossível de ignorar.
Pontos-chave
- HODL é o retorno que você teria obtido comprando a moeda no início do período e segurando-a até o fim, sem fazer nada.
- A Freya sobrepõe a curva de capital da sua estratégia à curva HODL e informa o retorno do buy and hold para o mesmo período.
- Se o seu bot não supera o HODL, a estratégia não está agregando valor; você assumiu complexidade e risco para um resultado pior.
- Superar o HODL em um mercado de alta forte é difícil e muitas vezes é o objetivo errado; a real vantagem de um bot costuma aparecer em mercados laterais e em queda.
- Sempre compare no mesmo período e na mesma moeda. Um backtest de mercado em alta favorece o HODL; um backtest de mercado em baixa favorece uma estratégia ativa.
- Superar o HODL no retorno é só metade da história: um bot que iguala o HODL com muito menos drawdown ainda pode ser a melhor escolha.
Novo em backtesting? Comece por como fazer backtest de uma estratégia de cripto, depois use este benchmark para julgar o quanto seus resultados valem.
Os números aqui são exemplos ilustrativos, não recomendações. O desempenho passado, seja em backtest ou ao vivo, não prevê resultados futuros. O trading de criptomoedas pode gerar perdas. Leia a Divulgação de Riscos antes de operar ao vivo.
O Que É o Benchmark HODL
HODL é a estratégia mais simples possível: comprar o ativo no início do período de backtest e segurá-lo, intocado, até o fim. Sem entradas, sem saídas, sem bot. A Freya simula exatamente isso ao lado da sua estratégia, constrói uma curva de capital para ele e informa o retorno total para o mesmo período na mesma moeda.
Isso te dá a única comparação que realmente responde "esse bot valeu a pena": o capital final da sua estratégia contra o que você teria tido sem fazer absolutamente nada.
Por Que É o Benchmark Que Importa
Toda estratégia que você opera tem um custo. Não só as taxas, mas o risco de um sistema automatizado operando o seu capital, os drawdowns que você tem que aguentar e o simples fato de que um bot pode falhar. O buy and hold não tem nada disso. É a alternativa gratuita e sem esforço bem ao lado da sua estratégia.
Então a barra que o seu bot precisa superar não é "ele ganhou dinheiro". É "ele ganhou mais dinheiro, ou o mesmo dinheiro com menos sofrimento, do que segurar a moeda". Se uma estratégia rende 25 por cento enquanto o HODL rendeu 40 por cento, a estratégia teve desempenho pior do que a opção preguiçosa. Ela não justificou sua complexidade.
Lendo as Duas Curvas
No gráfico de backtest, a curva de capital da sua estratégia e a curva HODL são desenhadas juntas. O que você está procurando não é apenas qual delas termina mais alto, mas como cada uma chegou lá.
| O que as curvas mostram | O que significa | Veredito |
|---|---|---|
| Estratégia termina bem acima do HODL | O bot agregou retorno real sobre segurar | Vantagem genuína, se ela se sustentar fora da amostra |
| Estratégia termina abaixo do HODL | Você teria se saído melhor sem fazer nada | A estratégia não se paga |
| Estratégia iguala o HODL mas com quedas menores | Retorno parecido, muito menos drawdown | Muitas vezes a melhor escolha no mundo real |
| Estratégia supera o HODL só em uma alta furiosa | A vantagem pode ser alavancagem ou sorte, não habilidade | Teste em mercados laterais e em queda |
A terceira linha é a que as pessoas ignoram. Um bot que termina empatado com o buy and hold mas que nunca te submeteu a um drawdown de 60 por cento é, para a maioria das pessoas, o melhor resultado. Você obtém um resultado parecido e consegue de fato mantê-lo, porque não fica encarando uma conta pela metade se perguntando se deve puxar o freio. O retorno é só metade da comparação. O drawdown é a outra metade, e é onde as estratégias ativas muitas vezes se justificam mesmo quando não superam o retorno de segurar.
A Armadilha do Regime de Mercado
O benchmark HODL só é justo no mesmo período e na mesma moeda, e o regime de mercado desse período muda tudo.
- Em uma alta forte, o buy and hold é extremamente difícil de superar, porque o próprio ativo está fazendo o trabalho e qualquer momento em que o seu bot fica em caixa ele perde a subida. Superar o HODL aqui muitas vezes não é o objetivo certo.
- Em um mercado lateral ou em queda, o buy and hold sangra, e uma estratégia ativa que opera as oscilações ou fica de fora pode brilhar. É aqui que os bots ganham o seu sustento.
Então uma estratégia que "supera o HODL" em um backtest dos últimos seis meses de um mercado em alta pode ter simplesmente estado em um período que favorecia estar investido. Rode a mesma estratégia por um trecho lateral e por uma queda antes de confiar que ela supera segurar. Essa é a mesma disciplina da validação walk-forward: um resultado que só sobrevive a um regime não é um resultado no qual você pode se apoiar.
Colocando em Prática
- Sempre verifique. Antes de se empolgar com o retorno de um backtest, dê uma olhada no retorno do HODL para o mesmo período. Contexto primeiro.
- Pese o drawdown, não só o retorno. Igualar o HODL com metade do drawdown é uma vitória, não um empate.
- Teste em diferentes regimes. Superar o HODL em um mercado em alta prova pouco. Superá-lo, ou proteger o capital melhor do que ele, em trechos de alta, baixa e laterais é o verdadeiro teste.
- Lembre que ao vivo é mais difícil. Seu resultado ao vivo também carrega taxas, slippage e a performance fee da Freya, e nada disso a linha HODL do backtest paga também. Veja backtest vs resultados ao vivo para essa diferença.
Perguntas Frequentes
O que HODL significa em um backtest?
HODL, vindo de "hold on for dear life", significa comprar o ativo no início do período e segurá-lo intocado até o fim. Em um backtest da Freya, é o benchmark de buy and hold: o retorno que você teria obtido sem fazer nada, desenhado no mesmo gráfico da sua estratégia para que você veja se o bot realmente o superou.
É ruim se a minha estratégia não supera o buy and hold?
Nem sempre. Se a sua estratégia iguala o buy and hold mas com drawdowns muito menores, ela ainda pode ser a melhor escolha no mundo real, porque é mais fácil de manter. Mas se ela rende menos e tem drawdowns parecidos ou maiores, não está justificando a complexidade e o risco de operar um bot, e você deveria reformulá-la ou abandoná-la.
Por que é tão difícil superar o HODL em um mercado em alta?
Porque em uma tendência de alta forte o próprio ativo produz os retornos, e qualquer momento em que o seu bot está em caixa ou protegido ele perde parte da subida. Superar o buy and hold é mais fácil, e mais significativo, em mercados laterais e em queda, onde segurar perde dinheiro e uma estratégia ativa pode operar as oscilações ou ficar de fora.
Superar o HODL significa que a estratégia é boa?
Só se ela superar o HODL em diferentes condições de mercado, não apenas em um trecho favorável. Uma estratégia que supera o buy and hold em um único backtest de mercado em alta pode ter apenas estado investida na hora certa. Valide-a em diferentes regimes e em dados fora da amostra antes de confiar na vantagem.