Qu’est-ce que Calibrain Harness ?
Calibrain Harness relie un modèle de classification rapide à des contrats à terme perpétuels sur cryptomonnaies et traite chaque réponse comme une prévision à vérifier. À chaque barre clôturée, il pose au modèle sept questions étiquetables par symbole, par exemple lequel de +1.0% ou -0.6% est touché en premier dans les deux heures suivantes, convertit les probabilités en espérance de gain dans le code et place des ordres longs ou courts avec stop et objectif sur le testnet de Bybit lorsque les filtres l'autorisent. Chaque prédiction est ensuite notée par rapport aux prix du mainnet, qu'elle ait été négociée ou non.
Deux modèles sont pris en charge : Kairos de DMind via Minara Cloud, et Jev de TypeSafe, interchangeables à chaud. Un service Python 3.12 sert un terminal Next.js 16 sur 127.0.0.1:8800 avec carnet d'ordres, signaux du modèle, évaluation (score de Brier et RPS, fiabilité, AUC, validation walk-forward) et un journal des décisions contenant chaque requête et réponse.
Le dépôt est sous licence MIT, a été créé le 10 novembre 2026 par un seul développeur, compte environ 365 étoiles GitHub et 78 forks, et est indiqué en développement, sans version publiée. C'est un logiciel de recherche, pas un conseil financier.
Calibrain Harness vaut-il le coup ?
Commençons par l'argent. Tel qu'il est livré, le banc de test ne peut pas toucher de fonds réels : l'hôte Bybit est codé en dur sur api-testnet.bybit.com sans bascule vers le mainnet, il démarre en mode observation seule sans passer d'ordres tant que vous n'activez pas AUTO-TRADE, et le README demande de créer des clés de testnet avec la permission ordres et positions sur Contract et sans permission de retrait. Quiconque modifie cet hôte et fournit des clés réelles ferait tourner du code non audité sur un vrai compte et pourrait perdre de l'argent rapidement ; rien ici n'est un conseil financier, et l'auteur précise que les résultats passés sur testnet ne disent rien de fiable sur les rendements futurs.
Ces résultats méritent la lecture. Sur 10,5 heures le 10 novembre 2026, le bot a pris 769 décisions de modèle et 40 positions et a perdu 2 601,01 USDT de testnet après frais, surtout à cause d'ordres au marché exécutés à 3 à 11% du prix dans les carnets maigres du testnet. Une fois les taux de base de chaque instrument montrés au modèle, il les a battus sur les questions de fourchette courte, de direction et de grand mouvement sur 320 décisions, mais le mode strict n'a pris aucune position en 3 heures 45 minutes, car un aller-retour à 15 points de base mangeait environ 0,25R de chaque configuration.
Ce qui rend le projet utile, c'est la rigueur autour de ces chiffres. Le modèle ne répond qu'à des questions que les données de prix peuvent étiqueter, le code et non le modèle décide de la position, chaque décision est notée, des poids de calibration mêlent le modèle aux taux de base pour qu'un modèle inutile cesse de piloter les positions, et l'écran de validation ne compte que des fenêtres indépendantes pour que des étiquettes de deux heures qui se chevauchent ne gonflent pas les preuves. Les garde-fous sont réels aussi : un arrêt d'urgence, une limite de perte journalière de 3%, un plafond nominal de 5 000 USDT et un plafond de 3x d'exposition empruntée.
Il a huit jours, une seule personne l'écrit, et ses réglages par défaut changent d'un commit à l'autre. À côté de TradingAgents, qui débat d'une action jusqu'à une opinion notée, celui-ci est plus étroit et plus rigoureux : il mesure si les probabilités d'un modèle valent quelque chose avant que quiconque s'y fie.
Là où il fait la différence
Un chercheur dans une entreprise qui vend un modèle de classification
Montrer si notre modèle prévoit les mouvements crypto à court terme mieux que les taux de base
Faites tourner le banc en observation seule sur quelques symboles pendant plusieurs jours ; les écrans EVAL et VALID donnent le score de Brier face aux taux de base avec des intervalles bootstrap à 90 % sur fenêtres indépendantes, et l'export rédige un rapport Markdown. Le coût est celui des appels à l'API du modèle, environ 180 par heure pour sept symboles en barres de 5 minutes.
Un trader crypto qui apprend les méthodes systématiques
Voir comment les frais et le glissement changent une stratégie qui paraît bonne sur le papier
Activez AUTO-TRADE en mode exploration sur le testnet de Bybit avec le risque par défaut de 0,1 % et comparez le prix de référence, l'exécution, le glissement et le R de chaque position dans l'écran TRADES. Aucun argent réel n'est en jeu, et la vue avantage contre coût montre le coût d'équilibre.
Avant de vous engager
- Mise en route
- Clonez, créez un environnement virtuel Python 3.12, installez les dépendances, copiez .env.example, compilez l'interface Next.js avec Node 20+, puis lancez python -m ctb.server et ouvrez 127.0.0.1:8800. Les clés peuvent être collées dans la boîte de dialogue KEYS du terminal.
- Intégrations
- Kairos (DMind via Minara Cloud) ou Jev (TypeSafe, figé sur jev-1.14.0) ; données publiques du mainnet Bybit pour les signaux et testnet Bybit pour les ordres ; flux RSS d'actualités, Fear and Greed et contexte macro. D'autres modèles demandent d'ajouter un ModelSpec dans le code.
- Données et confidentialité
- Les clés sont lues dans un .env ignoré par git, accessible au seul propriétaire, et ne sont jamais journalisées ni envoyées au navigateur. Chaque requête, réponse, étiquette, position et session est conservée dans une base SQLite locale. L'état du marché part chez le fournisseur du modèle. Le serveur écoute sur 127.0.0.1 et refuse les écritures d'autres origines.
- Coût à grande échelle
- Le banc est gratuit ; le coût vient des appels au modèle. Le budget par défaut est de 120 requêtes par heure, la moyenne en miroir double les requêtes, et sept symboles en barres de 1 minute en demandent environ 900 par heure. Le README ne donne pas les prix de Kairos ni de Jev.
- Limites
- Testnet Bybit uniquement, avec des carnets maigres et un flux synthétique ; Kairos accepte jusqu'à 8 questions par requête et Jev 64k jetons ; le mode strict peut rester des heures sans prendre de position ; les résultats couvrent pour l'instant un jour et un seul régime de marché.
Les points forts
- Hôte testnet codé en dur ; démarre en observation seule
- Note chaque prévision, négociée ou non, contre les prix du mainnet
- Calibration face aux taux de base et validation sur fenêtres indépendantes
- Publie ses résultats perdants et leurs causes
Les points faibles
- Huit jours d'existence, un seul développeur, en changement constant
- Ne prend en charge que Kairos et Jev, deux API payantes
- La liquidité du testnet fausse le P&L ; un seul jour de résultats
- Non audité ; dangereux à adapter pour des fonds réels
Idéal pour
Chercheurs quantitatifs et concepteurs de modèles qui veulent tester si les probabilités d'un classifieur rapide portent un avantage sur les perpétuels crypto sans risquer d'argent réel.
Alternatives à Calibrain Harness
Calibrain Harness : questions fréquentes
- Calibrain Harness vaut-il le coup ?
- Calibrain Harness est une manière inhabituellement honnête de vérifier si un classifieur a un avantage en trading, et ses propres chiffres disent pour l'instant que non. Nous lui donnons 3.4 sur 5.
- Combien coûte Calibrain Harness ?
- Gratuit et open source (MIT). Nécessite une clé d'API Kairos (Minara Cloud) ou Jev (TypeSafe), facturée par ces fournisseurs, et des clés gratuites du testnet de Bybit.
- Quels sont les inconvénients de Calibrain Harness ?
- Huit jours d'existence, un seul développeur, en changement constant; ne prend en charge que Kairos et Jev, deux API payantes; la liquidité du testnet fausse le P&L ; un seul jour de résultats; non audité ; dangereux à adapter pour des fonds réels.
- À qui s’adresse Calibrain Harness ?
- Chercheurs quantitatifs et concepteurs de modèles qui veulent tester si les probabilités d'un classifieur rapide portent un avantage sur les perpétuels crypto sans risquer d'argent réel.
- Combien coûte Calibrain Harness pour une équipe ou en production ?
- Le banc est gratuit ; le coût vient des appels au modèle. Le budget par défaut est de 120 requêtes par heure, la moyenne en miroir double les requêtes, et sept symboles en barres de 1 minute en demandent environ 900 par heure. Le README ne donne pas les prix de Kairos ni de Jev.
- Calibrain Harness est-il sûr pour les données de l’entreprise ?
- Les clés sont lues dans un .env ignoré par git, accessible au seul propriétaire, et ne sont jamais journalisées ni envoyées au navigateur. Chaque requête, réponse, étiquette, position et session est conservée dans une base SQLite locale. L'état du marché part chez le fournisseur du modèle. Le serveur écoute sur 127.0.0.1 et refuse les écritures d'autres origines.
- Quelles sont les meilleures alternatives à Calibrain Harness ?
- Les alternatives les plus proches que nous avons testées sont TradingAgents, Vibe-Trading et FinRL.
Réponses vérifiées le 18 nov. 2026.