spb/sorti-ka

1# Ticketmaster — Discovery API (Québec) (`ticketmaster`)23> Fiche générée le 2026-08-25 19:01 EDT par `scripts/gen_connector_docs.py` — ne pas éditer à la main, relancer le script.45**Statut : actif** · Type : `billetterie` · Connecteur : `sortika/connectors/ticketmaster.py`67## Description89- **Source** : [Ticketmaster — Discovery API (Québec)](https://developer.ticketmaster.com/products-and-docs/apis/discovery-api/v2/)10- **Couverture** : Grands spectacles, sports et concerts — Montréal/Laval/Brossard, Québec, Gatineau11- **Extraction** : SANS clé (mode par défaut) : scraping léger des pages découverte publiques www.ticketmaster.ca/discover/<ville>?page=N (montreal, quebec-city, gatineau) — l'état Next.js (__NEXT_DATA__, requête serveur cityEvents) livre 20 événements/page : titre, date UTC + fuseau → date/heure locales, salle géolocalisée (lat/lng), adresse, code postal, ville, URL billetterie, catégorie majeure, plan de salle (image) ; plafonds TM_MAX_EVENTS=360 / TM_PAGES_PER_CITY=8 ; Scrapfly ASP sans render_js en secours anti-bot ; aucun prix publié dans ce flux → jamais inventé. REPLI AUTOMATIQUE : si TICKETMASTER_API_KEY apparaît dans .env, bascule sur la Discovery API v2 officielle (priceRanges, attractions → artistes, images 16:9) — identifiants identiques, zéro doublon.12- **Note** : Fonctionne sans clé (scraping découverte). TICKETMASTER_API_KEY optionnelle : active le mode API riche (prix, artistes, images).1314## Accès1516- **Type** : billetterie17- **Endpoint** (`API`) : `https://app.ticketmaster.com/discovery/v2/events.json`18- **Endpoint** (`DISCOVER`) : `https://www.ticketmaster.ca/discover/{city}?page={page}`19- **Auth** : Clé API gratuite `TICKETMASTER_API_KEY` (developer.ticketmaster.com)20- **Pagination** : par numéro de page21- **Backend** : Scrapfly (anti-bot / rendu JS) via `base.get_scrapfly()`22- **Throttle** : 1.0 s entre requêtes23- **Accès légal** : pages découverte publiques rendues serveur — robots.txt n'interdit pas /discover/ (seuls /api/ismds/*) ; GET throttlés 1 s, lien direct vers la billetterie officielle ; API officielle (clé gratuite) utilisée dès qu'une clé est fournie2425<details><summary>En-tête documentaire du connecteur</summary>2627> connectors/ticketmaster.py : connecteur Ticketmaster Canada (Québec) — SANS clé28> Mode principal (sans clé) : scraping léger des pages découverte publiques29> www.ticketmaster.ca/discover/<ville>?page=N (montreal, quebec-city,30> gatineau). Chaque page embarque son état Next.js (__NEXT_DATA__) : la31> requête serveur `cityEvents` y est déjà résolue avec 20 événements/page32> (titre, date UTC + fuseau, salle géolocalisée lat/lng, adresse, code33> postal, ville, URL billetterie, catégorie majeure, seatmap). Pagination34> par ?page=N (vérifié 2026-08-18 : montreal total=1165, quebec-city=136).35> Aucun prix publié dans ce flux → is_free/price_* inconnus (jamais36> inventés). Artistes : patrons sûrs des titres (artists_from_title).37> robots.txt : /discover/ non interdit (seuls /api/ismds/* le sont).38> Anti-bot : GET direct d'abord ; si bloqué → Scrapfly ASP SANS render_js.39> Plafonds : TM_MAX_EVENTS (défaut 360), TM_PAGES_PER_CITY (défaut 8).40> Mode repli automatique (si TICKETMASTER_API_KEY apparaît dans .env) :41> Discovery API officielle v2 — plus riche (priceRanges, attractions →42> artistes, images 16:9). Les identifiants d'événements sont IDENTIQUES43> dans les deux modes → aucun doublon lors d'un changement de mode.4445</details>4647## Champs récupérés → schéma4849Complétude mesurée sur les **360 événements actifs** de la source ; exemples tirés d'un événement réel (`ticketmaster:31006476DB368606`).5051| Champ (`events.*`) | Description | Complétude | Exemple réel |52|---|---|---|---|53| `title` — Titre | titre de l'événement | 100 % | ANNULÉ - Rock This Town |54| `description` — Description | texte descriptif (source ou fiche détail) | 0 % | ∅ |55| `url` — URL | lien vers la fiche originale / billetterie | 100 % | https://www.ticketmaster.ca/annule-rock-this-town-quebec-quebec-09-13-2026/event/31006476DB36860… |56| `categories` — Catégories | taxonomie canonique Sorti-Ka (JSON) | 100 % | ["musique"] |57| `venue` — Salle (venue) | nom du lieu | 100 % | Théâtre Capitole |58| `address` — Adresse | adresse civique | 100 % | 972 Rue Saint-Jean |59| `city` — Ville | municipalité | 100 % | Québec |60| `region` — Région | région administrative | 100 % | Capitale-Nationale |61| `lat` — GPS (lat/lng) | coordonnées géographiques | 100 % | 46.813254, -71.214215 |62| `start_date` — Date début | date locale AAAA-MM-JJ | 100 % | 2026-09-13 |63| `end_date` — Date fin | date locale AAAA-MM-JJ | 100 % | 2026-09-13 |64| `start_time` — Heure (start_time) | heure locale HH:MM (Québec) | 97 % | 20:00 |65| `end_time` — Heure de fin (end_time) | heure locale HH:MM (Québec) | 0 % | ∅ |66| `status` — Statut | cancelled / postponed / soldout (NULL = prévu) | 4 % | cancelled |67| `is_free` — Gratuité (is_free) | 1 gratuit / 0 payant / NULL inconnu | 0 % | ∅ |68| `price_min` — Prix min | tarif minimal réel ($) | 0 % | ∅ |69| `price_label` — Libellé prix | étiquette tarifaire affichable | 0 % | ∅ |70| `artists` — Artistes | têtes d'affiche / lineup (JSON) | 0 % | [] |71| `organizer` — Organisateur | promoteur / organisme | 0 % | ∅ |72| `image` — Image | visuel (og:image ou média source) | 88 % | https://mapsapi.tmol.io/maps/geometry/3/event/31006476DB368606/staticImage?type=png&systemId=HOS… |73| `website` — Site web | site officiel de l'événement | 0 % | ∅ |7475## Fréquence & budgets7677- **Cadence** : horaire (watcher PM2)78- **Budgets / plafonds (variables d'environnement)** :7980| Variable | Défaut | Rôle |81|---|---|---|82| `TM_MAX_EVENTS` | `360` | — |83| `TM_PAGES_PER_CITY` | `8` | — |84| `SCRAPFLY_API_KEY` | `—` | — |85| `TICKETMASTER_API_KEY` | `` | — |86- **Budget global** : géocodage Nominatim plafonné à `SORTIKA_GEOCODE_MAX` (défaut 120) requêtes réseau/cycle, toutes sources confondues (`sortika/geocode.py`, cache disque).8788## Volumétrie & complétude live8990*(mesuré le 2026-08-25 19:01 EDT dans `data/sortika.db`)*9192- **Événements en base** : 437 (dont **360 actifs**)93- **GPS** : 360/360 actifs (100 %)94- **Prix** : 0/360 actifs (0 %)95- **Heure (start_time)** : 349/360 actifs (97 %)96- **Heure de fin** : 0/360 actifs (0 %)97- **Statut (annulé/reporté/complet)** : 15/360 actifs (4 %)98- **Artistes** : 0/360 actifs (0 %)99- **Image** : 315/360 actifs (88 %)100- **Salle (venue)** : 360/360 actifs (100 %)101- **Dernier sync** : 2026-08-25 18:07 — fetched 360, +0 ajoutés, ~0 mis à jour, -0 retirés102- **Syncs enregistrés** (sync_log) : 160103104## Erreurs & dépannage105106Aucune erreur dans `sync_log` pour cette source. ✅107108- Sans `TICKETMASTER_API_KEY` dans `.env`, le connecteur tourne en mode REPLI (scraping des pages découverte publiques) : pas de prix, pas de statut, images = plans de salle. La clé Discovery (gratuite, inscription developer.ticketmaster.com) débloque priceRanges, dates.status.code (annulé/reporté), visuels 16:9 HD et attractions → artistes. Quota API : 5 req/s (throttle 0,25 s côté connecteur).109- Rejouer un sync isolé : `python3 run.py sync --source ticketmaster` (ou via le watcher PM2) ; inspecter ensuite `sync_log` : `sqlite3 data/sortika.db "SELECT * FROM sync_log WHERE source='ticketmaster' ORDER BY ts DESC LIMIT 5;"`110111## Licence / attribution112113- pages découverte publiques rendues serveur — robots.txt n'interdit pas /discover/ (seuls /api/ismds/*) ; GET throttlés 1 s, lien direct vers la billetterie officielle ; API officielle (clé gratuite) utilisée dès qu'une clé est fournie114115## Historique116117- **2026-08-18 — Vague 1 d'enrichissement** (commit `7d9d1b0`) : géocodage Nominatim des salles (`sortika/geocode.py`, cache disque, plafond `SORTIKA_GEOCODE_MAX`), fiches détail lepointdevente (description, heure, tarifs réels `/plugins/rates/<id>`), contacts Tourinsoft (SITQ), heure locale Montréal via JSON-LD.118- **2026-08-18 — Vague 2 d'enrichissement** (commit `65d2d33`) : colonnes additives `events.start_time` (HH:MM locale QC) et `events.artists` (JSON) + migration auto ; heure captée partout où la source la publie (lepointdevente, evenko, Laval, Sherbrooke, Montréal, atuvu) ; artistes (headliners evenko, lineup Bandsintown, attractions Ticketmaster, patrons sûrs sur les titres) ; 3 nouveaux connecteurs (brossard, ticketmaster, bandsintown).119- **2026-08-19 — Phase 2 (travail de moine)** : colonnes additives `end_time`, `status` (annulé/reporté/complet) et `quarantine` (règles anti-aberrations, non publié mais réintégrable) ; règle d'ARCHIVAGE des événements terminés à chaque cycle (jamais supprimés) ; dedup_key inclut désormais l'heure (les séances multiples d'un même jour ne sont plus écrasées à l'affichage) ; alerte « 0 événement futur / chute > 80 % » par source (data/future_counts.json + /api/sources) ; heure et description La Vitrine ; end_time/organisateur/statut Eventbrite ; og:description Atuvu ; premières parties + portes + tournée evenko ; offres billets Bandsintown ; taxonomie type-event + description intégrale Brossard ; image Longueuil ; géocodage par ADRESSE CIVIQUE prioritaire ; villes normalisées au Répertoire MAMH (data/villes_canon.json) ; laval consignée « morte-a-la-source ».120121Commits touchant `sortika/connectors/ticketmaster.py` :122123- `85714fd` 2026-08-19 Phase 2 — connecteurs : heure+description La Vitrine, statuts, end_time, offres, taxonomies124- `86b1494` 2026-08-18 Vague 3 : Ticketmaster SANS clé + Eventbrite + Longueuil + Cantons-de-l'Est125- `65d2d33` 2026-08-18 Vague 2 d'enrichissement : heure précise, artistes, 3 nouveaux connecteurs126