spb/sorti-ka

1# Ville de Terrebonne — Calendrier (`terrebonne`)23> Fiche générée le 2026-08-25 19:01 EDT par `scripts/gen_connector_docs.py` — ne pas éditer à la main, relancer le script.45**Statut : actif** · Type : `municipal` · Connecteur : `sortika/connectors/terrebonne.py`67## Description89- **Source** : [Ville de Terrebonne — Calendrier](https://terrebonne.ca/calendrier-des-evenements/)10- **Couverture** : Terrebonne (Lanaudière)11- **Extraction** : API REST wp-json/wp/v2/event via Scrapfly (Cloudflare), 3-5 appels/sync. RÉACTIVÉE 2026-08-251213## Accès1415- **Type** : municipal16- **Endpoint** (`API`) : `https://terrebonne.ca/wp-json/wp/v2/event?per_page=100&page={page}&_embed=wp:featuredmedia`17- **Endpoint** (`TAXO`) : `https://terrebonne.ca/wp-json/wp/v2/event_category?per_page=100`18- **Auth** : Aucune côté source ; `SCRAPFLY_API_KEY` requis pour le backend Scrapfly19- **Pagination** : par numéro de page, per_page20- **Backend** : Scrapfly (anti-bot / rendu JS) via `base.get_scrapfly()`21- **Throttle** : 1.0 s entre requêtes22- **Accès légal** : API publique du site municipal ; anti-bot contourné avec volumes minimes2324<details><summary>En-tête documentaire du connecteur</summary>2526> connectors/terrebonne.py : connecteur Ville de Terrebonne — calendrier27> Source    : https://terrebonne.ca/calendrier-des-evenements/ (WordPress).28> Extraction: API REST WordPress publique /wp-json/wp/v2/event (champs ACF29> start_date/end_date « YYYY-MM-DD HH:MM:SS », place.name,30> isFull, hours) + taxonomie /wp-json/wp/v2/event_category.31> Cloudflare bloque tout GET non navigateur (403, consigné32> 2026-08-18) → chaque requête passe par Scrapfly (asp=true,33> SANS rendu JS : la réponse est du JSON), ~3-5 appels/sync.34> Vérifié 2026-08-25 (Scrapfly 200, JSON complet).35> Accès     : API publique du site municipal (aucune auth) ; robots.txt36> n'interdit pas /wp-json/. Anti-bot contourné avec volumes37> minimes et cadence quotidienne au plus — usage mesuré.38> Prix      : non publié par la source → jamais inventé. isFull=True →39> status "soldout" (complet, publié par la ville).4041</details>4243## Champs récupérés → schéma4445Complétude mesurée sur les **31 événements actifs** de la source ; exemples tirés d'un événement réel (`terrebonne:47210`).4647| Champ (`events.*`) | Description | Complétude | Exemple réel |48|---|---|---|---|49| `title` — Titre | titre de l'événement | 100 % | Fête des Récoltes de Terrebonne 2026 |50| `description` — Description | texte descriptif (source ou fiche détail) | 100 % | 🌾 Organisée par la SODAM Célébrez l’abondance de nos terres et l’arrivée de l’automne! 🎟️ Entrée… |51| `url` — URL | lien vers la fiche originale / billetterie | 100 % | https://terrebonne.ca/evenement/fete-des-recoltes-de-terrebonne-2026/ |52| `categories` — Catégories | taxonomie canonique Sorti-Ka (JSON) | 100 % | ["festival"] |53| `venue` — Salle (venue) | nom du lieu | 100 % | Centre horticole Bastien |54| `address` — Adresse | adresse civique | 0 % | ∅ |55| `city` — Ville | municipalité | 100 % | Terrebonne |56| `region` — Région | région administrative | 100 % | Lanaudière |57| `lat` — GPS (lat/lng) | coordonnées géographiques | 39 % | 45.737651, -73.700876 |58| `start_date` — Date début | date locale AAAA-MM-JJ | 100 % | 2026-09-19 |59| `end_date` — Date fin | date locale AAAA-MM-JJ | 100 % | 2026-09-19 |60| `start_time` — Heure (start_time) | heure locale HH:MM (Québec) | 100 % | 10:00 |61| `end_time` — Heure de fin (end_time) | heure locale HH:MM (Québec) | 100 % | 16:00 |62| `status` — Statut | cancelled / postponed / soldout (NULL = prévu) | 0 % | ∅ |63| `is_free` — Gratuité (is_free) | 1 gratuit / 0 payant / NULL inconnu | 0 % | ∅ |64| `price_min` — Prix min | tarif minimal réel ($) | 0 % | ∅ |65| `price_label` — Libellé prix | étiquette tarifaire affichable | 0 % | ∅ |66| `artists` — Artistes | têtes d'affiche / lineup (JSON) | 0 % | [] |67| `organizer` — Organisateur | promoteur / organisme | 100 % | Ville de Terrebonne |68| `image` — Image | visuel (og:image ou média source) | 87 % | https://terrebonne.ca/wp-content/uploads/2026/08/SODAM_Fe╠etesDesRe╠ucoltes-19-scaled.jpg |69| `website` — Site web | site officiel de l'événement | 0 % | ∅ |7071## Fréquence & budgets7273- **Cadence** : quotidien74- **Budgets / plafonds (variables d'environnement)** :7576| Variable | Défaut | Rôle |77|---|---|---|78| `TER_PAGES` | `5` | — |79- **Budget global** : géocodage Nominatim plafonné à `SORTIKA_GEOCODE_MAX` (défaut 120) requêtes réseau/cycle, toutes sources confondues (`sortika/geocode.py`, cache disque).8081## Volumétrie & complétude live8283*(mesuré le 2026-08-25 19:01 EDT dans `data/sortika.db`)*8485- **Événements en base** : 500 (dont **31 actifs**)86- **GPS** : 12/31 actifs (39 %)87- **Prix** : 0/31 actifs (0 %)88- **Heure (start_time)** : 31/31 actifs (100 %)89- **Heure de fin** : 31/31 actifs (100 %)90- **Statut (annulé/reporté/complet)** : 0/31 actifs (0 %)91- **Artistes** : 0/31 actifs (0 %)92- **Image** : 27/31 actifs (87 %)93- **Salle (venue)** : 31/31 actifs (100 %)94- **Dernier sync** : 2026-08-25 18:34 — fetched 500, +500 ajoutés, ~0 mis à jour, -0 retirés95- **Syncs enregistrés** (sync_log) : 19697## Erreurs & dépannage9899Aucune erreur dans `sync_log` pour cette source. ✅100101- Rejouer un sync isolé : `python3 run.py sync --source terrebonne` (ou via le watcher PM2) ; inspecter ensuite `sync_log` : `sqlite3 data/sortika.db "SELECT * FROM sync_log WHERE source='terrebonne' ORDER BY ts DESC LIMIT 5;"`102103## Licence / attribution104105- API publique du site municipal ; anti-bot contourné avec volumes minimes106107## Historique108109- **2026-08-18 — Vague 1 d'enrichissement** (commit `7d9d1b0`) : géocodage Nominatim des salles (`sortika/geocode.py`, cache disque, plafond `SORTIKA_GEOCODE_MAX`), fiches détail lepointdevente (description, heure, tarifs réels `/plugins/rates/<id>`), contacts Tourinsoft (SITQ), heure locale Montréal via JSON-LD.110- **2026-08-18 — Vague 2 d'enrichissement** (commit `65d2d33`) : colonnes additives `events.start_time` (HH:MM locale QC) et `events.artists` (JSON) + migration auto ; heure captée partout où la source la publie (lepointdevente, evenko, Laval, Sherbrooke, Montréal, atuvu) ; artistes (headliners evenko, lineup Bandsintown, attractions Ticketmaster, patrons sûrs sur les titres) ; 3 nouveaux connecteurs (brossard, ticketmaster, bandsintown).111- **2026-08-19 — Phase 2 (travail de moine)** : colonnes additives `end_time`, `status` (annulé/reporté/complet) et `quarantine` (règles anti-aberrations, non publié mais réintégrable) ; règle d'ARCHIVAGE des événements terminés à chaque cycle (jamais supprimés) ; dedup_key inclut désormais l'heure (les séances multiples d'un même jour ne sont plus écrasées à l'affichage) ; alerte « 0 événement futur / chute > 80 % » par source (data/future_counts.json + /api/sources) ; heure et description La Vitrine ; end_time/organisateur/statut Eventbrite ; og:description Atuvu ; premières parties + portes + tournée evenko ; offres billets Bandsintown ; taxonomie type-event + description intégrale Brossard ; image Longueuil ; géocodage par ADRESSE CIVIQUE prioritaire ; villes normalisées au Répertoire MAMH (data/villes_canon.json) ; laval consignée « morte-a-la-source ».112