spb/sorti-ka

1# BAnQ — calendrier des activités (`banq`)23> Fiche générée le 2026-08-25 19:01 EDT par `scripts/gen_connector_docs.py` — ne pas éditer à la main, relancer le script.45**Statut : actif** · Type : `agregateur` · Connecteur : `sortika/connectors/banq.py`67## Description89- **Source** : [BAnQ — calendrier des activités](https://www.banq.qc.ca/calendrier/a-venir)10- **Couverture** : ~140 activités à venir (Grande Bibliothèque + centres régionaux — ateliers, conférences, heure du conte)11- **Extraction** : Scrapfly obligatoire (anti-bot Radware) : liste rendue JS → fiches HTML serveur via Scrapfly sans JS, JSON-LD Event complet (dates ISO -04:00, lieu, adresse, image, organisateur, offers.price 0.00 = gratuité publiée) ; incrémental cache 14 j, plafond BANQ_DETAIL_MAX=501213## Accès1415- **Type** : agregateur16- **Endpoint** (`BASE`) : `https://www.banq.qc.ca`17- **Auth** : Aucune côté source ; `SCRAPFLY_API_KEY` requis pour le backend Scrapfly18- **Pagination** : aucune (flux unique)19- **Backend** : Scrapfly (anti-bot / rendu JS) via `base.get_scrapfly()`20- **Throttle** : 1.0 s entre requêtes21- **Accès légal** : robots.txt Drupal standard (calendrier non exclu) ; 1 rendu JS + ≤50 fiches par sync, cadence contenue2223<details><summary>En-tête documentaire du connecteur</summary>2425> connectors/banq.py : connecteur BAnQ (banq.qc.ca) — activités & conférences26> Source    : calendrier des activités de Bibliothèque et Archives nationales27> du Québec (Grande Bibliothèque + centres régionaux) — ateliers,28> conférences, heure du conte, expositions (~140 fiches à venir).29> Extraction: SCRAPFLY obligatoire (anti-bot Radware : GET direct → 30230> challenge, /jsonapi bloqué — sondé 2026-08-25).31> Liste /calendrier/a-venir rendue AVEC JavaScript (les cartes32> sont injectées côté client) → liens /calendrier/a-venir/<id>.33> Fiches : Scrapfly SANS rendu JS (HTML serveur), JSON-LD Event34> complet (nom, dates ISO avec fuseau -04:00, lieu, adresse,35> ville, image, organisateur, offre 0,00 $ → gratuité PUBLIÉE).36> INCRÉMENTAL avec cache disque (data/banq_cache.json) :37> nouvelles fiches d'abord, re-visite après 14 jours, plafond38> BANQ_DETAIL_MAX fiches/sync pour contenir le coût en crédits.39> Accès     : robots.txt Drupal standard (le calendrier n'est pas exclu) ;40> 1 rendu JS + quelques fiches par sync, cadence hebdomadaire.41> Prix      : offers.price du JSON-LD (« 0.00 » = gratuit affiché par la42> source) → is_free/price_label. Jamais inventé.4344</details>4546## Champs récupérés → schéma4748Complétude mesurée sur les **50 événements actifs** de la source ; exemples tirés d'un événement réel (`banq:135922`).4950| Champ (`events.*`) | Description | Complétude | Exemple réel |51|---|---|---|---|52| `title` — Titre | titre de l'événement | 100 % | Camelot d'un jour |53| `description` — Description | texte descriptif (source ou fiche détail) | 100 % | Venez appuyer la mission de L’Itinéraire ! La Grande Bibliothèque accueille pour une cinquième a… |54| `url` — URL | lien vers la fiche originale / billetterie | 100 % | https://www.banq.qc.ca/calendrier/a-venir/135922 |55| `categories` — Catégories | taxonomie canonique Sorti-Ka (JSON) | 100 % | ["autre"] |56| `venue` — Salle (venue) | nom du lieu | 96 % | Grande Bibliothèque |57| `address` — Adresse | adresse civique | 96 % | 475, boulevard De Maisonneuve Est |58| `city` — Ville | municipalité | 96 % | Montréal |59| `region` — Région | région administrative | 96 % | Montréal |60| `lat` — GPS (lat/lng) | coordonnées géographiques | 96 % | 45.5153771, -73.5622117 |61| `start_date` — Date début | date locale AAAA-MM-JJ | 100 % | 2026-09-15 |62| `end_date` — Date fin | date locale AAAA-MM-JJ | 100 % | 2026-09-15 |63| `start_time` — Heure (start_time) | heure locale HH:MM (Québec) | 100 % | 10:00 |64| `end_time` — Heure de fin (end_time) | heure locale HH:MM (Québec) | 100 % | 15:00 |65| `status` — Statut | cancelled / postponed / soldout (NULL = prévu) | 4 % | ∅ |66| `is_free` — Gratuité (is_free) | 1 gratuit / 0 payant / NULL inconnu | 100 % | 1 |67| `price_min` — Prix min | tarif minimal réel ($) | 0 % | ∅ |68| `price_label` — Libellé prix | étiquette tarifaire affichable | 100 % | Gratuit (0,00 $ affiché) |69| `artists` — Artistes | têtes d'affiche / lineup (JSON) | 0 % | [] |70| `organizer` — Organisateur | promoteur / organisme | 100 % | Bibliothèque et Archives nationales du Québec |71| `image` — Image | visuel (og:image ou média source) | 100 % | https://www2.banq.qc.ca/cal/attachments/24047/135922/Entete-visuel_Camelot.png |72| `website` — Site web | site officiel de l'événement | 0 % | ∅ |7374## Fréquence & budgets7576- **Cadence** : hebdomadaire77- **Budgets / plafonds (variables d'environnement)** :7879| Variable | Défaut | Rôle |80|---|---|---|81| `BANQ_DETAIL_MAX` | `50` | — |82- **Budget global** : géocodage Nominatim plafonné à `SORTIKA_GEOCODE_MAX` (défaut 120) requêtes réseau/cycle, toutes sources confondues (`sortika/geocode.py`, cache disque).8384## Volumétrie & complétude live8586*(mesuré le 2026-08-25 19:01 EDT dans `data/sortika.db`)*8788- **Événements en base** : 50 (dont **50 actifs**)89- **GPS** : 48/50 actifs (96 %)90- **Prix** : 50/50 actifs (100 %)91- **Heure (start_time)** : 50/50 actifs (100 %)92- **Heure de fin** : 50/50 actifs (100 %)93- **Statut (annulé/reporté/complet)** : 2/50 actifs (4 %)94- **Artistes** : 0/50 actifs (0 %)95- **Image** : 50/50 actifs (100 %)96- **Salle (venue)** : 48/50 actifs (96 %)97- **Dernier sync** : 2026-08-25 18:42 — fetched 50, +50 ajoutés, ~0 mis à jour, -0 retirés98- **Syncs enregistrés** (sync_log) : 199100## Erreurs & dépannage101102Aucune erreur dans `sync_log` pour cette source. ✅103104- Rejouer un sync isolé : `python3 run.py sync --source banq` (ou via le watcher PM2) ; inspecter ensuite `sync_log` : `sqlite3 data/sortika.db "SELECT * FROM sync_log WHERE source='banq' ORDER BY ts DESC LIMIT 5;"`105106## Licence / attribution107108- robots.txt Drupal standard (calendrier non exclu) ; 1 rendu JS + ≤50 fiches par sync, cadence contenue109110## Historique111112- **2026-08-18 — Vague 1 d'enrichissement** (commit `7d9d1b0`) : géocodage Nominatim des salles (`sortika/geocode.py`, cache disque, plafond `SORTIKA_GEOCODE_MAX`), fiches détail lepointdevente (description, heure, tarifs réels `/plugins/rates/<id>`), contacts Tourinsoft (SITQ), heure locale Montréal via JSON-LD.113- **2026-08-18 — Vague 2 d'enrichissement** (commit `65d2d33`) : colonnes additives `events.start_time` (HH:MM locale QC) et `events.artists` (JSON) + migration auto ; heure captée partout où la source la publie (lepointdevente, evenko, Laval, Sherbrooke, Montréal, atuvu) ; artistes (headliners evenko, lineup Bandsintown, attractions Ticketmaster, patrons sûrs sur les titres) ; 3 nouveaux connecteurs (brossard, ticketmaster, bandsintown).114- **2026-08-19 — Phase 2 (travail de moine)** : colonnes additives `end_time`, `status` (annulé/reporté/complet) et `quarantine` (règles anti-aberrations, non publié mais réintégrable) ; règle d'ARCHIVAGE des événements terminés à chaque cycle (jamais supprimés) ; dedup_key inclut désormais l'heure (les séances multiples d'un même jour ne sont plus écrasées à l'affichage) ; alerte « 0 événement futur / chute > 80 % » par source (data/future_counts.json + /api/sources) ; heure et description La Vitrine ; end_time/organisateur/statut Eventbrite ; og:description Atuvu ; premières parties + portes + tournée evenko ; offres billets Bandsintown ; taxonomie type-event + description intégrale Brossard ; image Longueuil ; géocodage par ADRESSE CIVIQUE prioritaire ; villes normalisées au Répertoire MAMH (data/villes_canon.json) ; laval consignée « morte-a-la-source ».115