SPB Git forge

spb/sorti-ka

Public

Toutes les sorties et tous les événements du Québec, un seul endroit — 7 connecteurs, fiches SSR, design Groupe KA.

58commits 1branches 0releases
13.7 MBsize
maindefault branch
17 days agolast push
HTML 82.9% Python 15.2% TypeScript 0.9% JavaScript 0.7%
10.3 KB · 143 lines markdown
Rendered Raw Blame History
1# Tuxedo Billet — billetterie québécoise multi-tenants (`tuxedobillet`)23> Fiche générée le 2026-08-25 19:01 EDT par `scripts/gen_connector_docs.py` — ne pas éditer à la main, relancer le script.45**Statut : actif** · Type : `billetterie` · Connecteur : `sortika/connectors/tuxedobillet.py`67## Description89- **Source** : [Tuxedo Billet — billetterie québécoise multi-tenants](https://www.tuxedobillet.com/)10- **Couverture** : 29 salles/diffuseurs QC : Théâtre Outremont, Le Gesù, Centre Pierre-Péladeau, FTA, FIMAV, Espace Théâtre (Mont-Laurier), L'Anglicane (Lévis), Chandler, Lac-Mégantic, Îles-de-la-Madeleine…11- **Extraction** : Acteur Apify maison gorgeous_thistle/ka-tuxedo (Playwright, proxy résidentiel CA, code versionné dans apify/ka-tuxedo/) : les tenants <org>.tuxedobillet.com sont des SPA Angular sur Firebase (RTDB verrouillée, 401 même avec jeton anonyme) → rendu navigateur obligatoire. 1 run/TUX_TTL_HOURS (20 h), 29 tenants QC configurés dans data/tuxedo_tenants.json (ville vérifiée). Liste sans heure ni prix → jamais inventés. MAJ 2026-08-25 : fiches /main/<slug> rendues Scrapfly render_js (TUX_FICHE_MAX=20/sync, re-visite 7 j, version v2 = mois janv./févr. compris, +71 événements) : 1 Event par séance datée avec HEURE, statut COMPLET→soldout, catégorie, description. Prix et adresse non publiés (choix des sièges seulement) → jamais inventés. 35 tenants QC (+6 : chateauscenes, azimutdiffusion, culture-umontreal, mcgillathletics, osjm, lesaintjean) ; 10 tenants à liens /Web/ incompatibles consignés dans le _comment du fichier tenants12- **Note** : RÉACTIVÉE 2026-08-21 (Phase 4) : l'apex reste vide mais les tenants vivent. Première source consommée via un acteur Apify (billetterie dure à crawler). Énumération des tenants non exhaustive — compléter via Serper/config.1314## Accès1516- **Type** : billetterie17- **Endpoint** : voir URL source (https://www.tuxedobillet.com/)18- **Auth** : Aucune côté source ; `SCRAPFLY_API_KEY` requis pour le backend Scrapfly19- **Pagination** : aucune (flux unique)20- **Backend** : Scrapfly (anti-bot / rendu JS) via `base.get_scrapfly()`21- **Throttle** : 1.0 s entre requêtes22- **Accès légal** : Billetteries publiques ; rendu navigateur modéré (1 page/tenant/run, ~1 run par jour), lien d'achat vers la fiche officielle du tenant2324<details><summary>En-tête documentaire du connecteur</summary>2526> connectors/tuxedobillet.py : Tuxedo Billet — billetterie québécoise27> multi-tenants (Phase 4). Reprise de la source écartée en Phase 3 (site en28> panne) : l'apex reste vide mais les tenants <org>.tuxedobillet.com vivent.29> Source    : SPA Angular sur Firebase par tenant — RTDB verrouillée (40130> même avec jeton anonyme, vérifié 2026-08-21) → rendu31> navigateur OBLIGATOIRE. L'extraction est déléguée à l'acteur32> Apify maison gorgeous_thistle/ka-tuxedo (Playwright, proxy33> résidentiel CA, code dans apify/ka-tuxedo/) qui rend chaque34> tenant et retourne les tuiles spectacles : titre, sous-titre,35> date FR, image, lien /main/<slug>.36> Extraction: 1 run d'acteur par ≈ TUX_TTL_HOURS (20 h par défaut — le37> rendu JS coûte des crédits Apify ; les programmations de38> salles bougent lentement). Résultat mis en cache disque39> (data/tuxedobillet_cache.json) et réémis entre deux runs.40> Tenants configurés dans data/tuxedo_tenants.json (Québec41> seulement, ville vérifiée).42> FICHES /main/<slug> rendues via Scrapfly render_js (le GET43> direct ne renvoie que la coquille Angular, vérifié44> 2026-08-25) : chaque fiche publie ses SÉANCES (jour + date45> + HEURE « 20H00 » + étiquette « COMPLET »), la catégorie et46> la description → 1 Event par séance datée, heure et statut47> soldout captés. Enrichissement incrémental (clé « fiches »48> du cache, TUX_FICHE_MAX/sync, re-visite 7 j, version de49> parse « v » — patron lavitrine ; v2 : abréviations FR50> « janv./févr. » comprises, tuiles et séances de janvier-51> février récupérées). Les fiches ne publient NI52> prix NI adresse de salle (vérifié : le tarif n'apparaît53> qu'au choix des sièges) → jamais inventés.54> Accès     : billetteries publiques ; rendu navigateur modéré (1 page par55> tenant par run Apify ~1/jour + TUX_FICHE_MAX fiches56> Scrapfly/sync throttlées), lien d'achat = la fiche57> officielle du tenant.58> Secrets   : APIFY_TOKEN requis (dans .env) — sans lui, le connecteur59> réémet le cache et n'échoue que s'il n'y a aucun cache.60> SCRAPFLY_API_KEY requis pour l'enrichissement des fiches —61> sans lui, la liste seule est émise (comportement d'avant).6263</details>6465## Champs récupérés → schéma6667Complétude mesurée sur les **382 événements actifs** de la source ; exemples tirés d'un événement réel (`tuxedobillet:centreculturelbeloeil-stephanie-boulay-2026-09-25`).6869| Champ (`events.*`) | Description | Complétude | Exemple réel |70|---|---|---|---|71| `title` — Titre | titre de l'événement | 100 % | Stéphanie Boulay — Est-ce que quelqu'un me voit? |72| `description` — Description | texte descriptif (source ou fiche détail) | 10 % | Est-ce que quelqu’un me voit ? est un spectacle intime et sans détour où Stéphanie Boulay se liv… |73| `url` — URL | lien vers la fiche originale / billetterie | 100 % | https://centreculturelbeloeil.tuxedobillet.com/main/stephanie-boulay |74| `categories` — Catégories | taxonomie canonique Sorti-Ka (JSON) | 100 % | ["musique"] |75| `venue` — Salle (venue) | nom du lieu | 100 % | Centre culturel de Belœil |76| `address` — Adresse | adresse civique | 0 % | ∅ |77| `city` — Ville | municipalité | 100 % | Belœil |78| `region` — Région | région administrative | 89 % | ∅ |79| `lat` — GPS (lat/lng) | coordonnées géographiques | 80 % | ∅ |80| `start_date` — Date début | date locale AAAA-MM-JJ | 100 % | 2026-09-25 |81| `end_date` — Date fin | date locale AAAA-MM-JJ | 100 % | 2026-09-25 |82| `start_time` — Heure (start_time) | heure locale HH:MM (Québec) | 9 % | 20:00 |83| `end_time` — Heure de fin (end_time) | heure locale HH:MM (Québec) | 0 % | ∅ |84| `status` — Statut | cancelled / postponed / soldout (NULL = prévu) | 2 % | soldout |85| `is_free` — Gratuité (is_free) | 1 gratuit / 0 payant / NULL inconnu | 0 % | ∅ |86| `price_min` — Prix min | tarif minimal réel ($) | 0 % | ∅ |87| `price_label` — Libellé prix | étiquette tarifaire affichable | 0 % | ∅ |88| `artists` — Artistes | têtes d'affiche / lineup (JSON) | 0 % | [] |89| `organizer` — Organisateur | promoteur / organisme | 100 % | Centre culturel de Belœil |90| `image` — Image | visuel (og:image ou média source) | 100 % | https://tuxedov1.blob.core.windows.net/tuxedo-centreculturelbeloeil/show/St%C3%A9phanie%20Boulay… |91| `website` — Site web | site officiel de l'événement | 0 % | ∅ |9293## Fréquence & budgets9495- **Cadence** : quotidienne (TTL 20 h dans le watcher horaire)96- **Budgets / plafonds (variables d'environnement)** :9798| Variable | Défaut | Rôle |99|---|---|---|100| `TUX_TTL_HOURS` | `20` | — |101| `TUX_POLL_TIMEOUT` | `1500` | s |102| `TUX_FICHE_MAX` | `20` | — |103| `APIFY_TOKEN` | `—` | — |104| `SCRAPFLY_API_KEY` | `—` | — |105| `SCRAPFLY_API_KEY` | `—` | — |106- **Budget global** : géocodage Nominatim plafonné à `SORTIKA_GEOCODE_MAX` (défaut 120) requêtes réseau/cycle, toutes sources confondues (`sortika/geocode.py`, cache disque).107108## Volumétrie & complétude live109110*(mesuré le 2026-08-25 19:01 EDT dans `data/sortika.db`)*111112- **Événements en base** : 700 (dont **382 actifs**)113- **GPS** : 305/382 actifs (80 %)114- **Prix** : 0/382 actifs (0 %)115- **Heure (start_time)** : 33/382 actifs (9 %)116- **Heure de fin** : 0/382 actifs (0 %)117- **Statut (annulé/reporté/complet)** : 7/382 actifs (2 %)118- **Artistes** : 0/382 actifs (0 %)119- **Image** : 382/382 actifs (100 %)120- **Salle (venue)** : 382/382 actifs (100 %)121- **Dernier sync** : 2026-08-25 19:00 — fetched 351, +104 ajoutés, ~0 mis à jour, -0 retirés122- **Syncs enregistrés** (sync_log) : 78123124## Erreurs & dépannage125126Aucune erreur dans `sync_log` pour cette source. ✅127128- Rejouer un sync isolé : `python3 run.py sync --source tuxedobillet` (ou via le watcher PM2) ; inspecter ensuite `sync_log` : `sqlite3 data/sortika.db "SELECT * FROM sync_log WHERE source='tuxedobillet' ORDER BY ts DESC LIMIT 5;"`129130## Licence / attribution131132- Billetteries publiques ; rendu navigateur modéré (1 page/tenant/run, ~1 run par jour), lien d'achat vers la fiche officielle du tenant133134## Historique135136- **2026-08-18 — Vague 1 d'enrichissement** (commit `7d9d1b0`) : géocodage Nominatim des salles (`sortika/geocode.py`, cache disque, plafond `SORTIKA_GEOCODE_MAX`), fiches détail lepointdevente (description, heure, tarifs réels `/plugins/rates/<id>`), contacts Tourinsoft (SITQ), heure locale Montréal via JSON-LD.137- **2026-08-18 — Vague 2 d'enrichissement** (commit `65d2d33`) : colonnes additives `events.start_time` (HH:MM locale QC) et `events.artists` (JSON) + migration auto ; heure captée partout où la source la publie (lepointdevente, evenko, Laval, Sherbrooke, Montréal, atuvu) ; artistes (headliners evenko, lineup Bandsintown, attractions Ticketmaster, patrons sûrs sur les titres) ; 3 nouveaux connecteurs (brossard, ticketmaster, bandsintown).138- **2026-08-19 — Phase 2 (travail de moine)** : colonnes additives `end_time`, `status` (annulé/reporté/complet) et `quarantine` (règles anti-aberrations, non publié mais réintégrable) ; règle d'ARCHIVAGE des événements terminés à chaque cycle (jamais supprimés) ; dedup_key inclut désormais l'heure (les séances multiples d'un même jour ne sont plus écrasées à l'affichage) ; alerte « 0 événement futur / chute > 80 % » par source (data/future_counts.json + /api/sources) ; heure et description La Vitrine ; end_time/organisateur/statut Eventbrite ; og:description Atuvu ; premières parties + portes + tournée evenko ; offres billets Bandsintown ; taxonomie type-event + description intégrale Brossard ; image Longueuil ; géocodage par ADRESSE CIVIQUE prioritaire ; villes normalisées au Répertoire MAMH (data/villes_canon.json) ; laval consignée « morte-a-la-source ».139140Commits touchant `sortika/connectors/tuxedobillet.py` :141142- `5973906` 2026-08-21 Phase 4 — 7 nouveaux connecteurs : régions manquantes (Montérégie, Centre-du-Québec, Chaudière-Appalaches, Gaspésie via Scrapfly) + billetteries QC (TicketAcces, Réseau Ovation, Tuxedo via acteur Apify ka-tuxedo)143