SPB Git forge

spb/sorti-ka

Public

Toutes les sorties et tous les événements du Québec, un seul endroit — 7 connecteurs, fiches SSR, design Groupe KA.

58commits 1branches 0releases
13.7 MBsize
maindefault branch
17 days agolast push
HTML 82.9% Python 15.2% TypeScript 0.9% JavaScript 0.7%
10.3 KB

# Tuxedo Billet — billetterie québécoise multi-tenants (tuxedobillet)

Fiche générée le 2026-08-25 19:01 EDT par scripts/gen_connector_docs.py — ne pas éditer à la main, relancer le script.

Statut : actif · Type : billetterie · Connecteur : sortika/connectors/tuxedobillet.py

# Description

  • Source : Tuxedo Billet — billetterie québécoise multi-tenants
  • Couverture : 29 salles/diffuseurs QC : Théâtre Outremont, Le Gesù, Centre Pierre-Péladeau, FTA, FIMAV, Espace Théâtre (Mont-Laurier), L'Anglicane (Lévis), Chandler, Lac-Mégantic, Îles-de-la-Madeleine…
  • Extraction : Acteur Apify maison gorgeous_thistle/ka-tuxedo (Playwright, proxy résidentiel CA, code versionné dans apify/ka-tuxedo/) : les tenants .tuxedobillet.com sont des SPA Angular sur Firebase (RTDB verrouillée, 401 même avec jeton anonyme) → rendu navigateur obligatoire. 1 run/TUX_TTL_HOURS (20 h), 29 tenants QC configurés dans data/tuxedo_tenants.json (ville vérifiée). Liste sans heure ni prix → jamais inventés. MAJ 2026-08-25 : fiches /main/ rendues Scrapfly render_js (TUX_FICHE_MAX=20/sync, re-visite 7 j, version v2 = mois janv./févr. compris, +71 événements) : 1 Event par séance datée avec HEURE, statut COMPLET→soldout, catégorie, description. Prix et adresse non publiés (choix des sièges seulement) → jamais inventés. 35 tenants QC (+6 : chateauscenes, azimutdiffusion, culture-umontreal, mcgillathletics, osjm, lesaintjean) ; 10 tenants à liens /Web/ incompatibles consignés dans le _comment du fichier tenants
  • Note : RÉACTIVÉE 2026-08-21 (Phase 4) : l'apex reste vide mais les tenants vivent. Première source consommée via un acteur Apify (billetterie dure à crawler). Énumération des tenants non exhaustive — compléter via Serper/config.

# Accès

  • Type : billetterie
  • Endpoint : voir URL source (https://www.tuxedobillet.com/)
  • Auth : Aucune côté source ; SCRAPFLY_API_KEY requis pour le backend Scrapfly
  • Pagination : aucune (flux unique)
  • Backend : Scrapfly (anti-bot / rendu JS) via base.get_scrapfly()
  • Throttle : 1.0 s entre requêtes
  • Accès légal : Billetteries publiques ; rendu navigateur modéré (1 page/tenant/run, ~1 run par jour), lien d'achat vers la fiche officielle du tenant
En-tête documentaire du connecteur

connectors/tuxedobillet.py : Tuxedo Billet — billetterie québécoise multi-tenants (Phase 4). Reprise de la source écartée en Phase 3 (site en panne) : l'apex reste vide mais les tenants .tuxedobillet.com vivent. Source : SPA Angular sur Firebase par tenant — RTDB verrouillée (401 même avec jeton anonyme, vérifié 2026-08-21) → rendu navigateur OBLIGATOIRE. L'extraction est déléguée à l'acteur Apify maison gorgeous_thistle/ka-tuxedo (Playwright, proxy résidentiel CA, code dans apify/ka-tuxedo/) qui rend chaque tenant et retourne les tuiles spectacles : titre, sous-titre, date FR, image, lien /main/. Extraction: 1 run d'acteur par ≈ TUX_TTL_HOURS (20 h par défaut — le rendu JS coûte des crédits Apify ; les programmations de salles bougent lentement). Résultat mis en cache disque (data/tuxedobillet_cache.json) et réémis entre deux runs. Tenants configurés dans data/tuxedo_tenants.json (Québec seulement, ville vérifiée). FICHES /main/ rendues via Scrapfly render_js (le GET direct ne renvoie que la coquille Angular, vérifié 2026-08-25) : chaque fiche publie ses SÉANCES (jour + date

  • HEURE « 20H00 » + étiquette « COMPLET »), la catégorie et la description → 1 Event par séance datée, heure et statut soldout captés. Enrichissement incrémental (clé « fiches » du cache, TUX_FICHE_MAX/sync, re-visite 7 j, version de parse « v » — patron lavitrine ; v2 : abréviations FR « janv./févr. » comprises, tuiles et séances de janvier- février récupérées). Les fiches ne publient NI prix NI adresse de salle (vérifié : le tarif n'apparaît qu'au choix des sièges) → jamais inventés. Accès : billetteries publiques ; rendu navigateur modéré (1 page par tenant par run Apify ~1/jour + TUX_FICHE_MAX fiches Scrapfly/sync throttlées), lien d'achat = la fiche officielle du tenant. Secrets : APIFY_TOKEN requis (dans .env) — sans lui, le connecteur réémet le cache et n'échoue que s'il n'y a aucun cache. SCRAPFLY_API_KEY requis pour l'enrichissement des fiches — sans lui, la liste seule est émise (comportement d'avant).

# Champs récupérés → schéma

Complétude mesurée sur les 382 événements actifs de la source ; exemples tirés d'un événement réel (tuxedobillet:centreculturelbeloeil-stephanie-boulay-2026-09-25).

Champ (events.*) Description Complétude Exemple réel
title — Titre titre de l'événement 100 % Stéphanie Boulay — Est-ce que quelqu'un me voit?
description — Description texte descriptif (source ou fiche détail) 10 % Est-ce que quelqu’un me voit ? est un spectacle intime et sans détour où Stéphanie Boulay se liv…
url — URL lien vers la fiche originale / billetterie 100 % https://centreculturelbeloeil.tuxedobillet.com/main/stephanie-boulay
categories — Catégories taxonomie canonique Sorti-Ka (JSON) 100 % ["musique"]
venue — Salle (venue) nom du lieu 100 % Centre culturel de Belœil
address — Adresse adresse civique 0 % ∅
city — Ville municipalité 100 % Belœil
region — Région région administrative 89 % ∅
lat — GPS (lat/lng) coordonnées géographiques 80 % ∅
start_date — Date début date locale AAAA-MM-JJ 100 % 2026-09-25
end_date — Date fin date locale AAAA-MM-JJ 100 % 2026-09-25
start_time — Heure (start_time) heure locale HH:MM (Québec) 9 % 20:00
end_time — Heure de fin (end_time) heure locale HH:MM (Québec) 0 % ∅
status — Statut cancelled / postponed / soldout (NULL = prévu) 2 % soldout
is_free — Gratuité (is_free) 1 gratuit / 0 payant / NULL inconnu 0 % ∅
price_min — Prix min tarif minimal réel ($) 0 % ∅
price_label — Libellé prix étiquette tarifaire affichable 0 % ∅
artists — Artistes têtes d'affiche / lineup (JSON) 0 % []
organizer — Organisateur promoteur / organisme 100 % Centre culturel de Belœil
image — Image visuel (og:image ou média source) 100 % https://tuxedov1.blob.core.windows.net/tuxedo-centreculturelbeloeil/show/Stéphanie Boulay…
website — Site web site officiel de l'événement 0 % ∅

# Fréquence & budgets

  • Cadence : quotidienne (TTL 20 h dans le watcher horaire)
  • Budgets / plafonds (variables d'environnement) :
Variable Défaut Rôle
TUX_TTL_HOURS 20 —
TUX_POLL_TIMEOUT 1500 s
TUX_FICHE_MAX 20 —
APIFY_TOKEN — —
SCRAPFLY_API_KEY — —
SCRAPFLY_API_KEY — —
  • Budget global : géocodage Nominatim plafonné à SORTIKA_GEOCODE_MAX (défaut 120) requêtes réseau/cycle, toutes sources confondues (sortika/geocode.py, cache disque).

# Volumétrie & complétude live

(mesuré le 2026-08-25 19:01 EDT dans data/sortika.db)

  • Événements en base : 700 (dont 382 actifs)
  • GPS : 305/382 actifs (80 %)
  • Prix : 0/382 actifs (0 %)
  • Heure (start_time) : 33/382 actifs (9 %)
  • Heure de fin : 0/382 actifs (0 %)
  • Statut (annulé/reporté/complet) : 7/382 actifs (2 %)
  • Artistes : 0/382 actifs (0 %)
  • Image : 382/382 actifs (100 %)
  • Salle (venue) : 382/382 actifs (100 %)
  • Dernier sync : 2026-08-25 19:00 — fetched 351, +104 ajoutés, ~0 mis à jour, -0 retirés
  • Syncs enregistrés (sync_log) : 78

# Erreurs & dépannage

Aucune erreur dans sync_log pour cette source. ✅

  • Rejouer un sync isolé : python3 run.py sync --source tuxedobillet (ou via le watcher PM2) ; inspecter ensuite sync_log : sqlite3 data/sortika.db "SELECT * FROM sync_log WHERE source='tuxedobillet' ORDER BY ts DESC LIMIT 5;"

# Licence / attribution

  • Billetteries publiques ; rendu navigateur modéré (1 page/tenant/run, ~1 run par jour), lien d'achat vers la fiche officielle du tenant

# Historique

  • 2026-08-18 — Vague 1 d'enrichissement (commit 7d9d1b0) : géocodage Nominatim des salles (sortika/geocode.py, cache disque, plafond SORTIKA_GEOCODE_MAX), fiches détail lepointdevente (description, heure, tarifs réels /plugins/rates/<id>), contacts Tourinsoft (SITQ), heure locale Montréal via JSON-LD.
  • 2026-08-18 — Vague 2 d'enrichissement (commit 65d2d33) : colonnes additives events.start_time (HH:MM locale QC) et events.artists (JSON) + migration auto ; heure captée partout où la source la publie (lepointdevente, evenko, Laval, Sherbrooke, Montréal, atuvu) ; artistes (headliners evenko, lineup Bandsintown, attractions Ticketmaster, patrons sûrs sur les titres) ; 3 nouveaux connecteurs (brossard, ticketmaster, bandsintown).
  • 2026-08-19 — Phase 2 (travail de moine) : colonnes additives end_time, status (annulé/reporté/complet) et quarantine (règles anti-aberrations, non publié mais réintégrable) ; règle d'ARCHIVAGE des événements terminés à chaque cycle (jamais supprimés) ; dedup_key inclut désormais l'heure (les séances multiples d'un même jour ne sont plus écrasées à l'affichage) ; alerte « 0 événement futur / chute > 80 % » par source (data/future_counts.json + /api/sources) ; heure et description La Vitrine ; end_time/organisateur/statut Eventbrite ; og:description Atuvu ; premières parties + portes + tournée evenko ; offres billets Bandsintown ; taxonomie type-event + description intégrale Brossard ; image Longueuil ; géocodage par ADRESSE CIVIQUE prioritaire ; villes normalisées au Répertoire MAMH (data/villes_canon.json) ; laval consignée « morte-a-la-source ».

Commits touchant sortika/connectors/tuxedobillet.py :

  • 5973906 2026-08-21 Phase 4 — 7 nouveaux connecteurs : régions manquantes (Montérégie, Centre-du-Québec, Chaudière-Appalaches, Gaspésie via Scrapfly) + billetteries QC (TicketAcces, Réseau Ovation, Tuxedo via acteur Apify ka-tuxedo)