SPB Git forge

spb/sorti-ka

Public

Toutes les sorties et tous les événements du Québec, un seul endroit — 7 connecteurs, fiches SSR, design Groupe KA.

58commits 1branches 0releases
13.7 MBsize
maindefault branch
17 days agolast push
HTML 82.9% Python 15.2% TypeScript 0.9% JavaScript 0.7%
7.9 KB · 116 lines markdown
Rendered Raw Blame History
1# Sorties Saguenay — portail événementiel de la Ville (`saguenaysorties`)23> Fiche générée le 2026-08-25 19:01 EDT par `scripts/gen_connector_docs.py` — ne pas éditer à la main, relancer le script.45**Statut : actif** · Type : `municipal` · Connecteur : `sortika/connectors/saguenaysorties.py`67## Description89- **Source** : [Sorties Saguenay — portail événementiel de la Ville](https://sorties.saguenay.ca/)10- **Couverture** : Spectacles, expositions, festivals — Saguenay et environs (Saguenay–Lac-Saint-Jean)11- **Extraction** : POST /ajax/plus paginé (SAG_BATCH_MAX lots) : discipline, date FR, heure, titre, « Ville, Salle », image, detail-id → une fiche PAR séance ; détails incrémentaux POST /ajax/details (cache data/saguenaysorties_cache.json, SAG_DETAIL_MAX/sync, re-visite 7 j) : description, adresse civique1213## Accès1415- **Type** : municipal16- **Endpoint** (`BASE`) : `https://sorties.saguenay.ca`17- **Auth** : Aucune (accès public, identification honnête par User-Agent)18- **Pagination** : offset/limit, par numéro de page19- **Backend** : GET direct `requests` (throttlé, UA `SortiKa/1.0` identifié)20- **Throttle** : 0.8 s entre requêtes21- **Accès légal** : portail public municipal — POST throttlés 0,8 s, identification honnête, lien fiche officielle /festivals?id=<id> ; recoupement lavitrine/lepointdevente géré par dedup_key2223<details><summary>En-tête documentaire du connecteur</summary>2425> connectors/saguenaysorties.py : Sorties Saguenay — portail officiel de la26> Ville de Saguenay (Phase 3). Remplace le CSV Données Québec mort (2022).27> Source    : https://sorties.saguenay.ca — portail événementiel municipal28> (motorisé par les données La Vitrine culturelle, médias29> lvc-medias.lavitrine.com ; recoupement géré par dedup_key).30> Extraction: POST /ajax/plus (offset par pas de 36, ~300-400 séances31> horodatées, vérifié 2026-08-19) — chaque <article> = UNE séance :32> discipline, date FR, heure « 08 h 30 », titre, « Ville, Salle »,33> image, data-detail-id. Détails incrémentaux POST /ajax/details34> (cache data/saguenaysorties_cache.json, SAG_DETAIL_MAX/sync,35> re-visite 7 j) : description + adresse civique.36> Accès     : portail public municipal, pas de robots.txt publié (page de37> maintenance) — volumes modestes, POST throttlés 0,8 s, UA38> honnête, lien vers la fiche officielle /festivals?id=<id>.3940</details>4142## Champs récupérés → schéma4344Complétude mesurée sur les **438 événements actifs** de la source ; exemples tirés d'un événement réel (`saguenaysorties:381946-2026-11-20-20:00`).4546| Champ (`events.*`) | Description | Complétude | Exemple réel |47|---|---|---|---|48| `title` — Titre | titre de l'événement | 100 % | The Franklin Electric - Victory Songs |49| `description` — Description | texte descriptif (source ou fiche détail) | 98 % | Un nouveau chapitre s’ouvre pour The Franklin Electric avec la sortie de l’album « Victory Songs… |50| `url` — URL | lien vers la fiche originale / billetterie | 100 % | https://sorties.saguenay.ca/festivals?id=381946 |51| `categories` — Catégories | taxonomie canonique Sorti-Ka (JSON) | 100 % | ["musique"] |52| `venue` — Salle (venue) | nom du lieu | 86 % | Théâtre Palace Arvida |53| `address` — Adresse | adresse civique | 100 % | 1900 Bd Mellon |54| `city` — Ville | municipalité | 86 % | Jonquière |55| `region` — Région | région administrative | 100 % | Saguenay–Lac-Saint-Jean |56| `lat` — GPS (lat/lng) | coordonnées géographiques | 80 % | 48.4289712, -71.1822258 |57| `start_date` — Date début | date locale AAAA-MM-JJ | 100 % | 2026-11-20 |58| `end_date` — Date fin | date locale AAAA-MM-JJ | 100 % | 2026-11-20 |59| `start_time` — Heure (start_time) | heure locale HH:MM (Québec) | 100 % | 20:00 |60| `end_time` — Heure de fin (end_time) | heure locale HH:MM (Québec) | 0 % | ∅ |61| `status` — Statut | cancelled / postponed / soldout (NULL = prévu) | 0 % | ∅ |62| `is_free` — Gratuité (is_free) | 1 gratuit / 0 payant / NULL inconnu | 0 % | ∅ |63| `price_min` — Prix min | tarif minimal réel ($) | 0 % | ∅ |64| `price_label` — Libellé prix | étiquette tarifaire affichable | 0 % | ∅ |65| `artists` — Artistes | têtes d'affiche / lineup (JSON) | 0 % | [] |66| `organizer` — Organisateur | promoteur / organisme | 0 % | ∅ |67| `image` — Image | visuel (og:image ou média source) | 100 % | https://lvc-medias.lavitrine.com/8785171e-9c10-5e19-a776-a353f2c98fa6.jpg |68| `website` — Site web | site officiel de l'événement | 0 % | ∅ |6970## Fréquence & budgets7172- **Cadence** : horaire (watcher PM2, incrémental)73- **Budgets / plafonds (variables d'environnement)** :7475| Variable | Défaut | Rôle |76|---|---|---|77| `SAG_BATCH_MAX` | `15` | ≤ 540 séances |78| `SAG_DETAIL_MAX` | `40` | — |79- **Budget global** : géocodage Nominatim plafonné à `SORTIKA_GEOCODE_MAX` (défaut 120) requêtes réseau/cycle, toutes sources confondues (`sortika/geocode.py`, cache disque).8081## Volumétrie & complétude live8283*(mesuré le 2026-08-25 19:01 EDT dans `data/sortika.db`)*8485- **Événements en base** : 460 (dont **438 actifs**)86- **GPS** : 351/438 actifs (80 %)87- **Prix** : 0/438 actifs (0 %)88- **Heure (start_time)** : 437/438 actifs (100 %)89- **Heure de fin** : 0/438 actifs (0 %)90- **Statut (annulé/reporté/complet)** : 0/438 actifs (0 %)91- **Artistes** : 0/438 actifs (0 %)92- **Image** : 438/438 actifs (100 %)93- **Salle (venue)** : 377/438 actifs (86 %)94- **Dernier sync** : 2026-08-25 18:06 — fetched 438, +0 ajoutés, ~0 mis à jour, -0 retirés95- **Syncs enregistrés** (sync_log) : 1369697## Erreurs & dépannage9899Aucune erreur dans `sync_log` pour cette source. ✅100101- Rejouer un sync isolé : `python3 run.py sync --source saguenaysorties` (ou via le watcher PM2) ; inspecter ensuite `sync_log` : `sqlite3 data/sortika.db "SELECT * FROM sync_log WHERE source='saguenaysorties' ORDER BY ts DESC LIMIT 5;"`102103## Licence / attribution104105- portail public municipal — POST throttlés 0,8 s, identification honnête, lien fiche officielle /festivals?id=<id> ; recoupement lavitrine/lepointdevente géré par dedup_key106107## Historique108109- **2026-08-18 — Vague 1 d'enrichissement** (commit `7d9d1b0`) : géocodage Nominatim des salles (`sortika/geocode.py`, cache disque, plafond `SORTIKA_GEOCODE_MAX`), fiches détail lepointdevente (description, heure, tarifs réels `/plugins/rates/<id>`), contacts Tourinsoft (SITQ), heure locale Montréal via JSON-LD.110- **2026-08-18 — Vague 2 d'enrichissement** (commit `65d2d33`) : colonnes additives `events.start_time` (HH:MM locale QC) et `events.artists` (JSON) + migration auto ; heure captée partout où la source la publie (lepointdevente, evenko, Laval, Sherbrooke, Montréal, atuvu) ; artistes (headliners evenko, lineup Bandsintown, attractions Ticketmaster, patrons sûrs sur les titres) ; 3 nouveaux connecteurs (brossard, ticketmaster, bandsintown).111- **2026-08-19 — Phase 2 (travail de moine)** : colonnes additives `end_time`, `status` (annulé/reporté/complet) et `quarantine` (règles anti-aberrations, non publié mais réintégrable) ; règle d'ARCHIVAGE des événements terminés à chaque cycle (jamais supprimés) ; dedup_key inclut désormais l'heure (les séances multiples d'un même jour ne sont plus écrasées à l'affichage) ; alerte « 0 événement futur / chute > 80 % » par source (data/future_counts.json + /api/sources) ; heure et description La Vitrine ; end_time/organisateur/statut Eventbrite ; og:description Atuvu ; premières parties + portes + tournée evenko ; offres billets Bandsintown ; taxonomie type-event + description intégrale Brossard ; image Longueuil ; géocodage par ADRESSE CIVIQUE prioritaire ; villes normalisées au Répertoire MAMH (data/villes_canon.json) ; laval consignée « morte-a-la-source ».112113Commits touchant `sortika/connectors/saguenaysorties.py` :114115- `0b8a6f8` 2026-08-19 Phase 3 — 9 nouveaux connecteurs + déroulage des périodes SITQ (fiches d évaluation avant connexion)116