SPB Git forge

spb/sorti-ka

Public

Toutes les sorties et tous les événements du Québec, un seul endroit — 7 connecteurs, fiches SSR, design Groupe KA.

58commits 1branches 0releases
13.7 MBsize
maindefault branch
17 days agolast push
HTML 82.9% Python 15.2% TypeScript 0.9% JavaScript 0.7%
8.1 KB · 121 lines markdown
Rendered Raw Blame History
1# Tourisme Montérégie — événements (ATR) (`monteregie`)23> Fiche générée le 2026-08-25 19:01 EDT par `scripts/gen_connector_docs.py` — ne pas éditer à la main, relancer le script.45**Statut : actif** · Type : `tourisme-regional` · Connecteur : `sortika/connectors/monteregie.py`67## Description89- **Source** : [Tourisme Montérégie — événements (ATR)](https://www.tourisme-monteregie.qc.ca/membre/categorie/quoi-faire/festivals-et-evenements/)10- **Couverture** : Montérégie (~78 fiches à venir, vérifié 2026-08-21)11- **Extraction** : API REST WP /wp-json/wp/v2/cpt_event (per_page=100) + taxonomie /event-categorie (1 GET → catégories brutes) — titre, description (content, fallback excerpt), plage FR, GPS ACF, site web, image ; fiches incrémentales (MTG_FICHE_MAX/sync, re-visite 7 j) : JSON-LD Event → adresse, ville, CP1213## Accès1415- **Type** : tourisme-regional16- **Endpoint** (`BASE`) : `https://www.tourisme-monteregie.qc.ca`17- **Auth** : Aucune (accès public, identification honnête par User-Agent)18- **Pagination** : par numéro de page, per_page19- **Backend** : GET direct `requests` (throttlé, UA `SortiKa/1.0` identifié)20- **Throttle** : 0.8 s entre requêtes21- **Accès légal** : API REST WordPress publique (aucune auth), robots.txt sans interdiction sur /wp-json/ — GET throttlés 0,8 s, UA honnête2223<details><summary>En-tête documentaire du connecteur</summary>2425> connectors/monteregie.py : Tourisme Montérégie — événements (ATR, Phase 4)26> Source    : https://www.tourisme-monteregie.qc.ca — WordPress dont l'API27> REST publique expose le CPT `cpt_event` (78 fiches publiées,28> X-WP-TotalPages=1, revérifié 2026-08-25). Gisement Tourinsoft29> (acf.syndic_object_id EVENMTOV… — même famille que le SIT30> Québec ; recoupement géré par dedup_key, mais l'ATR ajoute31> GPS, image, site web et description que le flux SITQ ne32> publie pas).33> Extraction: API JSON /wp-json/wp/v2/cpt_event (paginée per_page=100) →34> titre, description (content, fallback excerpt), plage de35> dates FR (« Du 18 septembre au 20 septembre 2026 »), lat/long,36> site web, image. ENRICHI (2026-08-25) : taxonomie37> event-categorie (1 GET/sync) → catégories brutes (« Marchés38> de Noël », « Festival et autres événements »). Fiches détail39> incrémentales (cache data/monteregie_cache.json,40> MTG_FICHE_MAX/sync, re-visite 7 j) : bloc JSON-LD Event →41> adresse civique, ville, code postal. Ni heure ni tarif42> structurés publiés (vérifié sur fiches) → jamais inventés.43> Accès     : API REST WordPress publique (aucune auth), robots.txt sans44> interdiction sur /wp-json/ — GET throttlés, UA honnête.4546</details>4748## Champs récupérés → schéma4950Complétude mesurée sur les **26 événements actifs** de la source ; exemples tirés d'un événement réel (`monteregie:89015`).5152| Champ (`events.*`) | Description | Complétude | Exemple réel |53|---|---|---|---|54| `title` — Titre | titre de l'événement | 100 % | MARCHÉ DE NOËL DE MARIEVILLE |55| `description` — Description | texte descriptif (source ou fiche détail) | 100 % | Marché de Noël réunissant des producteurs et artisans de la région. En plus de découvrir de nouv… |56| `url` — URL | lien vers la fiche originale / billetterie | 100 % | https://www.tourisme-monteregie.qc.ca/evenement/marche-de-noel-de-marieville/ |57| `categories` — Catégories | taxonomie canonique Sorti-Ka (JSON) | 100 % | ["autre"] |58| `venue` — Salle (venue) | nom du lieu | 0 % | ∅ |59| `address` — Adresse | adresse civique | 92 % | rue du Pont |60| `city` — Ville | municipalité | 100 % | Marieville |61| `region` — Région | région administrative | 100 % | Montérégie |62| `lat` — GPS (lat/lng) | coordonnées géographiques | 100 % | 45.432743, -73.159756 |63| `start_date` — Date début | date locale AAAA-MM-JJ | 100 % | 2026-12-04 |64| `end_date` — Date fin | date locale AAAA-MM-JJ | 100 % | 2026-12-06 |65| `start_time` — Heure (start_time) | heure locale HH:MM (Québec) | 0 % | ∅ |66| `end_time` — Heure de fin (end_time) | heure locale HH:MM (Québec) | 0 % | ∅ |67| `status` — Statut | cancelled / postponed / soldout (NULL = prévu) | 0 % | ∅ |68| `is_free` — Gratuité (is_free) | 1 gratuit / 0 payant / NULL inconnu | 0 % | ∅ |69| `price_min` — Prix min | tarif minimal réel ($) | 0 % | ∅ |70| `price_label` — Libellé prix | étiquette tarifaire affichable | 0 % | ∅ |71| `artists` — Artistes | têtes d'affiche / lineup (JSON) | 0 % | [] |72| `organizer` — Organisateur | promoteur / organisme | 0 % | ∅ |73| `image` — Image | visuel (og:image ou média source) | 96 % | https://www.tourisme-monteregie.qc.ca/wp-content/uploads/2025/03/marche-de-noel-de-marieville-tr… |74| `website` — Site web | site officiel de l'événement | 77 % | ∅ |7576## Fréquence & budgets7778- **Cadence** : horaire (watcher PM2)79- **Budgets / plafonds (variables d'environnement)** :8081| Variable | Défaut | Rôle |82|---|---|---|83| `MTG_FICHE_MAX` | `15` | — |84- **Budget global** : géocodage Nominatim plafonné à `SORTIKA_GEOCODE_MAX` (défaut 120) requêtes réseau/cycle, toutes sources confondues (`sortika/geocode.py`, cache disque).8586## Volumétrie & complétude live8788*(mesuré le 2026-08-25 19:01 EDT dans `data/sortika.db`)*8990- **Événements en base** : 78 (dont **26 actifs**)91- **GPS** : 26/26 actifs (100 %)92- **Prix** : 0/26 actifs (0 %)93- **Heure (start_time)** : 0/26 actifs (0 %)94- **Heure de fin** : 0/26 actifs (0 %)95- **Statut (annulé/reporté/complet)** : 0/26 actifs (0 %)96- **Artistes** : 0/26 actifs (0 %)97- **Image** : 25/26 actifs (96 %)98- **Salle (venue)** : 0/26 actifs (0 %)99- **Dernier sync** : 2026-08-25 18:05 — fetched 78, +0 ajoutés, ~0 mis à jour, -0 retirés100- **Syncs enregistrés** (sync_log) : 83101102## Erreurs & dépannage103104Aucune erreur dans `sync_log` pour cette source. ✅105106- Rejouer un sync isolé : `python3 run.py sync --source monteregie` (ou via le watcher PM2) ; inspecter ensuite `sync_log` : `sqlite3 data/sortika.db "SELECT * FROM sync_log WHERE source='monteregie' ORDER BY ts DESC LIMIT 5;"`107108## Licence / attribution109110- API REST WordPress publique (aucune auth), robots.txt sans interdiction sur /wp-json/ — GET throttlés 0,8 s, UA honnête111112## Historique113114- **2026-08-18 — Vague 1 d'enrichissement** (commit `7d9d1b0`) : géocodage Nominatim des salles (`sortika/geocode.py`, cache disque, plafond `SORTIKA_GEOCODE_MAX`), fiches détail lepointdevente (description, heure, tarifs réels `/plugins/rates/<id>`), contacts Tourinsoft (SITQ), heure locale Montréal via JSON-LD.115- **2026-08-18 — Vague 2 d'enrichissement** (commit `65d2d33`) : colonnes additives `events.start_time` (HH:MM locale QC) et `events.artists` (JSON) + migration auto ; heure captée partout où la source la publie (lepointdevente, evenko, Laval, Sherbrooke, Montréal, atuvu) ; artistes (headliners evenko, lineup Bandsintown, attractions Ticketmaster, patrons sûrs sur les titres) ; 3 nouveaux connecteurs (brossard, ticketmaster, bandsintown).116- **2026-08-19 — Phase 2 (travail de moine)** : colonnes additives `end_time`, `status` (annulé/reporté/complet) et `quarantine` (règles anti-aberrations, non publié mais réintégrable) ; règle d'ARCHIVAGE des événements terminés à chaque cycle (jamais supprimés) ; dedup_key inclut désormais l'heure (les séances multiples d'un même jour ne sont plus écrasées à l'affichage) ; alerte « 0 événement futur / chute > 80 % » par source (data/future_counts.json + /api/sources) ; heure et description La Vitrine ; end_time/organisateur/statut Eventbrite ; og:description Atuvu ; premières parties + portes + tournée evenko ; offres billets Bandsintown ; taxonomie type-event + description intégrale Brossard ; image Longueuil ; géocodage par ADRESSE CIVIQUE prioritaire ; villes normalisées au Répertoire MAMH (data/villes_canon.json) ; laval consignée « morte-a-la-source ».117118Commits touchant `sortika/connectors/monteregie.py` :119120- `5973906` 2026-08-21 Phase 4 — 7 nouveaux connecteurs : régions manquantes (Montérégie, Centre-du-Québec, Chaudière-Appalaches, Gaspésie via Scrapfly) + billetteries QC (TicketAcces, Réseau Ovation, Tuxedo via acteur Apify ka-tuxedo)121