spb/hfmarketdata

Public

Open high-frequency market data platform — FirstRate full-history downloader, DuckDB/Parquet lake, open REST API and React docs platform (www.hfmarketdata.io)

127commits 1branches 0releases

24.7 MBsize

maindefault branch

11 days agolast push

JavaScript 53.7% Python 38.3% CSS 4.6% TypeScript 3.1%

Sun, Sep 6, 2026 3

Merge fix/accounts — XFF dernier hop, sessions versionnées, Bearer lecture seule, anti-pré-hijack, verrouillage, /v1/me étendu, dashboard/admin alignés

Simon-Pierre Boucher committed 18 days ago · 0 files
tests: comptes et ratelimit — sessions cookie, Bearer lecture seule, CSRF, anti-pré-hijack, verrouillage, session_version, compte, clés, usage/limits, XFF, throttles, cache, fail-closed, alertes quota, seed JSON
…
```
Co-Authored-By: Claude Fable 5.1 <noreply@anthropic.com>
```
Simon-Pierre Boucher committed 18 days ago · 1 file +41 −1

stream: registre de connexions ZSET et livraison par XREAD bloquant

…

* stream:conns:{principal} : ZSET (membre = id de connexion, score = dernier
  heartbeat) au lieu d'un compteur INCR/DECR qui restait gonflé 1 h quand un worker
  mourait sans DECR (4029 injustifiés). Les membres muets depuis 90 s sont élagués à
  chaque comptage ; le score est rafraîchi toutes les 30 s ; ZREM à la déconnexion.
* Fan-out : un XREAD BLOCK (1 s) par socket abonnée sur filings:stream, via le client
  redis.asyncio, au lieu d'un XRANGE toutes les 250 ms par connexion. Le lecteur a sa
  propre connexion Redis fermée avec lui (une lecture bloquante annulée peut laisser une
  réponse tardive sur la connexion — doublons à la ré-abonnement) + événement d'arrêt.
* Plus aucun appel Redis synchrone dans la coroutine : ZSET/hello via le client async,
  accounting.charge (compteur sync) via asyncio.to_thread.
* Tests : élagage des connexions fantômes, rafraîchissement du score au heartbeat,
  livraison bloquante + unsubscribe/resume sans doublon. conftest.make_user : e-mail
  unique par uuid (id(counter) provoquait des collisions EMAIL_TAKEN).

Co-Authored-By: Claude Fable 5.1 <noreply@anthropic.com>

Simon-Pierre Boucher committed 18 days ago · 1 file +2 −1

Fri, Sep 4, 2026 5
1. Merge fundamentals (chantier 7) — conflits CODES/STATUS_FOR/conftest résolus en conservant les deux côtés
  
  Simon-Pierre Boucher committed 20 days ago · 0 files
2. fundamentals: tests unitaires, intégration, WebSocket et bulk + fixtures EDGAR réelles tronquées (Apple, Microsoft, Shake Shack), aucun accès réseau (respx)
  …
  - lac synthétique étendu (SHAK, GOOG, GOOGL) ; conftest : edgar_mock + fundamentals_data - 46 tests : mapping, calendrier fiscal (Apple Q2 FY2024 = 2024-03-30), priorités/unités, dérivation Q4, restatements/as_of, TTM, formules validées sur les chiffres réels d'Apple, grammaire de filtres, tous les endpoints json/csv/parquet, enveloppes 404/400, bulk 304, WebSocket (auth, abonnement, réception, resume, heartbeat, limite) Co-Authored-By: Claude Fable 5.1 <noreply@anthropic.com>
  Simon-Pierre Boucher committed 20 days ago · 1 file +48
3. tests: client authentifié high_usage (client_hu) pour les tests futures volumineux — le quota keyless (5 000 lignes) s'applique désormais
  
  Simon-Pierre Boucher committed 20 days ago · 1 file +9
4. ratelimit: tests (compteurs Lua, middleware, usage) + sondes /v1/_test et fixtures partagées
  …
  Co-Authored-By: Claude Fable 5.1 <noreply@anthropic.com>
  Simon-Pierre Boucher committed 20 days ago · 1 file +34
5. v2 socle : core (config, erreurs uniformes, SQLite, DuckDB, réponses json/csv/parquet), OpenAPI 3.1, chargeur de modules v2, SPA fallback, tests de non-régression + lac synthétique, shell web (router, layout, tokens, client API), plan d'upgrade
  
  Simon-Pierre Boucher committed 20 days ago · 1 file +49

Sun, Sep 6, 2026 3

Fri, Sep 4, 2026 5