SPB Git forge

spb/sorti-ka

Public

Toutes les sorties et tous les événements du Québec, un seul endroit — 7 connecteurs, fiches SSR, design Groupe KA.

58commits 1branches 0releases
13.7 MBsize
maindefault branch
17 days agolast push
HTML 82.9% Python 15.2% TypeScript 0.9% JavaScript 0.7%
9.6 KB · 137 lines markdown
Rendered Raw Blame History
1# Réseau Ovation — billetterie québécoise multi-salles (`ovation`)23> Fiche générée le 2026-08-25 19:01 EDT par `scripts/gen_connector_docs.py` — ne pas éditer à la main, relancer le script.45**Statut : actif** · Type : `billetterie` · Connecteur : `sortika/connectors/ovation.py`67## Description89- **Source** : [Réseau Ovation — billetterie québécoise multi-salles](https://reseau.ovation.ca/)10- **Couverture** : 26 organisations 100 % QC : Salle Albert-Rousseau, Petit Champlain, Diffusion Saguenay, Gatineau (Odyssée, Jean-Despréz), Vieux Terrebonne, Palace de Granby, Vieux Clocher Magog/Waterloo, La Tuque, Festival Western de St-Tite, clubs LHJMQ/LNAH…11- **Extraction** : Sous-site mobile m.ovation.ca (HTML rendu serveur, AUCUN anti-bot) : par organisation (codes base36 validés par balayage, config data/ovation_orgs.json), /fr/Search/AllEvents paginé (?pageNumber=N) → 1 eventId = 1 représentation ; fiches fragment EventDescription (≈5 Ko, OVA_FICHE_MAX=40/sync) : date pleine FR + heure, catégories, ARTISTES (liens EventsByPerformer), description, salle + adresse + ville + code postal. Prix non exposé → jamais inventé. MAJ 2026-08-25 : prix NON PUBLIÉS (pages Event mobile+desktop sans aucun montant ni JSON-LD offers ; tarifs uniquement sous /event/tickets, Disallow robots.txt avec /api/) → jamais requêté, jamais inventé ; re-balayage des organisations sans nouveauté1213## Accès1415- **Type** : billetterie16- **Endpoint** (`BASE`) : `https://m.ovation.ca`17- **Auth** : Aucune (accès public, identification honnête par User-Agent)18- **Pagination** : par numéro de page19- **Backend** : GET direct `requests` (throttlé, UA `SortiKa/1.0` identifié)20- **Throttle** : 30.5 s entre requêtes21- **Accès légal** : Billetterie publique sans auth ; GET throttlés 0,7 s, UA honnête, lien d'achat vers la fiche officielle2223<details><summary>En-tête documentaire du connecteur</summary>2425> connectors/ovation.py : Réseau Ovation — billetterie 100 % québécoise26> (Phase 4). ~26 organisations (salles, diffuseurs municipaux, clubs27> sportifs) : Salle Albert-Rousseau, Petit Champlain, Diffusion Saguenay,28> Gatineau, Terrebonne, Granby, Magog, La Tuque… (sondé 2026-08-21).29> Source    : https://m.ovation.ca (sous-site mobile : HTML rendu serveur30> propre, AUCUN anti-bot — le desktop reseau.ovation.ca exige31> des cookies de session). Organisations configurées dans32> data/ovation_orgs.json (ajouter une org = 1 bloc, 0 code ;33> codes validés par balayage base36).34> Extraction: par org, /fr/Search/AllEvents paginé (?pageNumber=N, 4035> cartes/page) → eventIds ; chaque eventId = UNE représentation36> datée. Fiches fragment /fr/Event/EventDescription?eventId=…37> (≈ 5 Ko) incrémentales (cache data/ovation_cache.json,38> OVA_FICHE_MAX/sync, re-visite 7 j) : date pleine FR39> (« mercredi 26 août 2026, 20h00 »), catégories, artistes40> (EventsByPerformer), description, salle + adresse + ville +41> code postal.42> Prix      : NON PUBLIÉS par la source sur ses surfaces crawlables —43> re-sondé live 2026-08-25 : la page Event complète mobile44> (77 Ko) et la page desktop www.ovation.ca (ForceWebsite-45> Version=Desktop, 72 Ko) ne contiennent AUCUN montant ni46> JSON-LD offers (les seules mentions « prix » = politique de47> cookies) ; aucun endpoint JSON public. Les tarifs48> n'apparaissent qu'au choix des sièges (/event/tickets),49> chemin Disallow par robots.txt (mobile ET desktop, avec50> /api/) → jamais requêté, prix jamais inventé.51> Accès     : billetterie publique, HTML public sans auth. robots.txt52> (lu 2026-08-21) : User-agent * → Crawl-delay: 30 +53> Disallow /event/tickets (jamais requêté) → GET espacés de54> 30,5 s sur m.ovation.ca (hôte unique). Pour rester poli, le55> PASSAGE RÉSEAU complet (listes + fiches) n'a lieu qu'à56> l'expiration d'un TTL (OVA_TTL_HOURS, 20 h — ≈ 45 min de57> moisson/jour) ; entre deux passages, le connecteur réémet son58> cache. Lien d'achat = la fiche officielle.5960</details>6162## Champs récupérés → schéma6364Complétude mesurée sur les **459 événements actifs** de la source ; exemples tirés d'un événement réel (`ovation:00000Q-1208JO`).6566| Champ (`events.*`) | Description | Complétude | Exemple réel |67|---|---|---|---|68| `title` — Titre | titre de l'événement | 100 % | LAMA : D’aventures en aventures — Le spectacle musical biographique autorisé par SERGE LAMA |69| `description` — Description | texte descriptif (source ou fiche détail) | 78 % | «(…) ce que je suis me reste obscur.» Serge Lama |70| `url` — URL | lien vers la fiche originale / billetterie | 100 % | https://m.ovation.ca/00000Q/fr/Event/?eventId=1208JO |71| `categories` — Catégories | taxonomie canonique Sorti-Ka (JSON) | 100 % | ["arts-scene"] |72| `venue` — Salle (venue) | nom du lieu | 100 % | Salle Albert-Rousseau |73| `address` — Adresse | adresse civique | 100 % | 2410, Chemin Sainte-Foy |74| `city` — Ville | municipalité | 100 % | Québec |75| `region` — Région | région administrative | 100 % | Capitale-Nationale |76| `lat` — GPS (lat/lng) | coordonnées géographiques | 100 % | 46.7866655, -71.2862695 |77| `start_date` — Date début | date locale AAAA-MM-JJ | 100 % | 2026-09-24 |78| `end_date` — Date fin | date locale AAAA-MM-JJ | 100 % | 2026-09-24 |79| `start_time` — Heure (start_time) | heure locale HH:MM (Québec) | 100 % | 20:00 |80| `end_time` — Heure de fin (end_time) | heure locale HH:MM (Québec) | 0 % | ∅ |81| `status` — Statut | cancelled / postponed / soldout (NULL = prévu) | 0 % | ∅ |82| `is_free` — Gratuité (is_free) | 1 gratuit / 0 payant / NULL inconnu | 0 % | ∅ |83| `price_min` — Prix min | tarif minimal réel ($) | 0 % | ∅ |84| `price_label` — Libellé prix | étiquette tarifaire affichable | 0 % | ∅ |85| `artists` — Artistes | têtes d'affiche / lineup (JSON) | 90 % | ["Stéphan Côté", "Élizabeth Duperré", "Serge Lama", "Eric Paulhus", "Gaële Tavernier"] |86| `organizer` — Organisateur | promoteur / organisme | 100 % | Salle Albert-Rousseau |87| `image` — Image | visuel (og:image ou média source) | 99 % | https://m.ovation.ca/product-catalog-images/thumbnails/45b1cc48-d3c2-4dfa-9ad8-2efcd8296c7a.jpg |88| `website` — Site web | site officiel de l'événement | 0 % | ∅ |8990## Fréquence & budgets9192- **Cadence** : horaire (watcher PM2)93- **Budgets / plafonds (variables d'environnement)** :9495| Variable | Défaut | Rôle |96|---|---|---|97| `OVA_PAGE_MAX` | `6` | — |98| `OVA_FICHE_MAX` | `50` | — |99| `OVA_TTL_HOURS` | `20` | — |100- **Budget global** : géocodage Nominatim plafonné à `SORTIKA_GEOCODE_MAX` (défaut 120) requêtes réseau/cycle, toutes sources confondues (`sortika/geocode.py`, cache disque).101102## Volumétrie & complétude live103104*(mesuré le 2026-08-25 19:01 EDT dans `data/sortika.db`)*105106- **Événements en base** : 461 (dont **459 actifs**)107- **GPS** : 459/459 actifs (100 %)108- **Prix** : 0/459 actifs (0 %)109- **Heure (start_time)** : 458/459 actifs (100 %)110- **Heure de fin** : 0/459 actifs (0 %)111- **Statut (annulé/reporté/complet)** : 0/459 actifs (0 %)112- **Artistes** : 414/459 actifs (90 %)113- **Image** : 456/459 actifs (99 %)114- **Salle (venue)** : 459/459 actifs (100 %)115- **Dernier sync** : 2026-08-25 18:05 — fetched 459, +0 ajoutés, ~0 mis à jour, -0 retirés116- **Syncs enregistrés** (sync_log) : 77117118## Erreurs & dépannage119120Aucune erreur dans `sync_log` pour cette source. ✅121122- Rejouer un sync isolé : `python3 run.py sync --source ovation` (ou via le watcher PM2) ; inspecter ensuite `sync_log` : `sqlite3 data/sortika.db "SELECT * FROM sync_log WHERE source='ovation' ORDER BY ts DESC LIMIT 5;"`123124## Licence / attribution125126- Billetterie publique sans auth ; GET throttlés 0,7 s, UA honnête, lien d'achat vers la fiche officielle127128## Historique129130- **2026-08-18 — Vague 1 d'enrichissement** (commit `7d9d1b0`) : géocodage Nominatim des salles (`sortika/geocode.py`, cache disque, plafond `SORTIKA_GEOCODE_MAX`), fiches détail lepointdevente (description, heure, tarifs réels `/plugins/rates/<id>`), contacts Tourinsoft (SITQ), heure locale Montréal via JSON-LD.131- **2026-08-18 — Vague 2 d'enrichissement** (commit `65d2d33`) : colonnes additives `events.start_time` (HH:MM locale QC) et `events.artists` (JSON) + migration auto ; heure captée partout où la source la publie (lepointdevente, evenko, Laval, Sherbrooke, Montréal, atuvu) ; artistes (headliners evenko, lineup Bandsintown, attractions Ticketmaster, patrons sûrs sur les titres) ; 3 nouveaux connecteurs (brossard, ticketmaster, bandsintown).132- **2026-08-19 — Phase 2 (travail de moine)** : colonnes additives `end_time`, `status` (annulé/reporté/complet) et `quarantine` (règles anti-aberrations, non publié mais réintégrable) ; règle d'ARCHIVAGE des événements terminés à chaque cycle (jamais supprimés) ; dedup_key inclut désormais l'heure (les séances multiples d'un même jour ne sont plus écrasées à l'affichage) ; alerte « 0 événement futur / chute > 80 % » par source (data/future_counts.json + /api/sources) ; heure et description La Vitrine ; end_time/organisateur/statut Eventbrite ; og:description Atuvu ; premières parties + portes + tournée evenko ; offres billets Bandsintown ; taxonomie type-event + description intégrale Brossard ; image Longueuil ; géocodage par ADRESSE CIVIQUE prioritaire ; villes normalisées au Répertoire MAMH (data/villes_canon.json) ; laval consignée « morte-a-la-source ».133134Commits touchant `sortika/connectors/ovation.py` :135136- `5973906` 2026-08-21 Phase 4 — 7 nouveaux connecteurs : régions manquantes (Montérégie, Centre-du-Québec, Chaudière-Appalaches, Gaspésie via Scrapfly) + billetteries QC (TicketAcces, Réseau Ovation, Tuxedo via acteur Apify ka-tuxedo)137