Variance, séries de pertes et taille d'échantillon

Une stratégie gagnante perd. Souvent.

Vous avez trouvé une stratégie dotée d'un vrai taux de réussite durable de 55 % à des cotes proches de l'égalité. C'est un avantage solide : sur 100 paris à mise fixe à une cote décimale de 2, 55 victoires et 45 défaites vous laissent 10 unités de gain. La plupart des parieurs en rêvent.

Regardez maintenant ce que cela donne au quotidien. Cette stratégie perd 45 paris sur 100, presque un sur deux. Perdre deux fois de suite est banal : 0,45 fois 0,45 donne environ 0,20, donc à partir de n'importe quel pari, voir les deux suivants perdus arrive à peu près une fois sur cinq. Trois de suite, environ une fois sur onze. Rien d'exceptionnel. Un mardi comme un autre.

Et voici ce que l'intuition rate. Sur quelques centaines de paris, vous ne tentez pas cette expérience « une fois sur onze » une seule fois ; vous la relancez à chaque pari. Des centaines d'occasions pour qu'une série improbable survienne, cela veut dire que les séries improbables surviennent. Une stratégie gagnante sur le long terme vous infligera, tôt ou tard, six ou sept défaites consécutives, et rien ne sera cassé quand cela arrivera. Ce caractère aléatoire dans l'ordre d'arrivée des gains et des pertes, les statisticiens l'appellent la variance, et elle fait assez de bruit pour masquer un avantage réel pendant étonnamment longtemps.

Les séries de pertes : une propriété des maths, pas une panne

C'est exactement pour cela que chaque stratégie sur Bet2Invest affiche sa plus longue série de défaites : la plus longue suite de pertes consécutives observée dans son historique. Elle n'est pas là pour accabler la stratégie. Elle est là pour que, lorsque les picks en direct traversent une passe similaire, vous puissiez regarder ce chiffre et constater que le système a déjà survécu à cela, que la série reste dans la fourchette que le passé de la stratégie décrit comme normale.

Avant de suivre ou d'activer quoi que ce soit, lisez ce chiffre et posez-vous une question honnête : si les N prochains picks perdent tous, serai-je encore là pour le pick N+1 ? Si la réponse est non, le problème n'est pas la stratégie. C'est l'écart entre sa variance et votre tolérance à celle-ci.

Pourquoi 30 paris ne prouvent rien

Les petits échantillons mentent avec un aplomb parfait. Une stratégie affichant 18 victoires sur 30 paris se lit comme un taux de réussite de 60 %. Déplacez deux résultats, 16 sur 30, et elle se lit 53 %. Deux matchs, sept points de taux de réussite. À cette échelle, la différence entre brillant et médiocre tient à un tir dévié et à un penalty dans les arrêts de jeu.

À 400 paris, ces deux mêmes résultats ne déplacent le taux que d'un demi-point. La mesure n'est pas devenue parfaite, mais elle a cessé d'osciller au gré du bruit. C'est toute la raison pour laquelle le jugement s'affine avec des centaines de paris plutôt que des dizaines : l'avantage ne grandit pas, c'est le bruit autour qui rétrécit.

La plateforme a inscrit ce principe dans ses règles de publication. Une stratégie ne peut pas devenir publique sans au moins 400 paris de backtest pour le football et 100 pour les autres sports, plus une moyenne d'au moins 5 paris par mois sur le backtest. Ces seuils ne sont pas de la bureaucratie. C'est l'échantillon minimal en dessous duquel un historique relève davantage de l'anecdote que de la preuve.

Comment les métriques de risque chiffrent la variance

Le panneau de statistiques que Bet2Invest affiche pour chaque stratégie est, pour l'essentiel, un jeu d'instruments qui mesurent la variance sous différents angles :

• Drawdown max : la pire chute du profit cumulé entre un sommet et un creux. Le yield vous donne la destination ; le drawdown vous dit à quelle profondeur descend la vallée en chemin. C'est le meilleur prédicteur de votre survie émotionnelle avec une stratégie.
• Ratio de Sharpe : le rendement rapporté à la volatilité totale. Il pénalise toutes les secousses, y compris les agréables, celles vers le haut.
• Ratio de Sortino : la même idée, mais en ne pénalisant que la volatilité à la baisse. Une stratégie aux gros pics gagnants et aux pertes contenues obtient un meilleur Sortino que Sharpe, souvent une image plus juste pour le pari, où les surprises à la hausse sont bienvenues.
• Déviation négative (downside deviation) : l'ingrédient brut derrière le Sortino, la dispersion des résultats perdants, en ignorant les gagnants.
• Ratio de Calmar : le rendement divisé par le drawdown maximal. Il répond à une question directe : combien de profit cette stratégie génère-t-elle par unité de douleur maximale ?

Deux stratégies au yield identique peuvent paraître radicalement différentes à travers ces prismes. Celle au drawdown le moins profond et au meilleur Sortino est celle dont le profit arrive sous une forme qu'un être humain peut réellement tenir.

Le même piège à l'intérieur de vos filtres

La variance ne déforme pas seulement les historiques. Elle déforme aussi les données que lisent vos filtres. Une équipe qui a gagné ses 3 derniers matchs affiche un taux de victoire récent de 100 %, et ce chiffre ne veut à peu près rien dire : trois résultats mesurent la chance au moins autant que la qualité.

C'est pourquoi les filtres à base de taux comme last_n_result_rate, scoring_rate ou les filtres de confrontations directes proposent un paramètre optionnel de taille d'échantillon minimale : une quantité minimale d'historique qu'une équipe doit posséder avant que le filtre puisse correspondre. Le régler vous coûte quelques matchups ; ne pas le régler signifie que votre stratégie se déclenche sur des mirages statistiques. Dans le doute, préférez des fenêtres d'historique plus longues et un échantillon minimal. Des choix ennuyeux, de meilleures stratégies.

La mise fixe, et l'erreur qui coûte plus que toutes les autres

Chaque backtest de la plateforme est calculé à mise fixe de 1 unité, et vous avez tout intérêt à adopter la même discipline en réel. La mise fixe est un contrôle de variance : aucun résultat isolé ne peut vraiment vous blesser, et aucune série de pertes n'est amplifiée par la tentation de doubler pour se refaire, la manière classique de transformer un drawdown survivable en drawdown fatal.

Ce qui nous amène à l'erreur la plus chère de toutes, et elle est émotionnelle, pas mathématique : abandonner une bonne stratégie au milieu d'un drawdown normal. Le scénario est d'une banalité désolante. Suivre une stratégie saine, traverser la série de pertes que sa propre plus longue série de défaites annonçait, tout arrêter au point le plus bas, puis la regarder remonter sans vous. Tous les coûts de la variance ont été payés ; tous les bénéfices de l'avantage ont été abandonnés. Les parieurs qui s'en sortent sont rarement ceux qui ont les meilleures stratégies. Ce sont ceux qui ont décidé, avant le premier pick, à quoi ressemble une mauvaise passe normale, et qui n'ont pas cillé quand elle est arrivée.

Pour aller plus loin

Les petits échantillons alimentent aussi l'autre grande illusion, les backtests ajustés jusqu'à paraître parfaits : voir Backtesting et surapprentissage. Pour un tour d'horizon métrique par métrique des statistiques évoquées ici, lisez le guide des métriques de backtest. Et pour voir comment la plateforme condense la variance dans un score composite unique, consultez Notes et scores.