Atuvu.ca — calendrier culturel (atuvu)
Fiche générée le 2026-08-19 01:27 EDT par
scripts/gen_connector_docs.py— ne pas éditer à la main, relancer le script.
Statut : actif · Type : agregateur · Connecteur : sortika/connectors/atuvu.py
Description
- Source : Atuvu.ca — calendrier culturel
- Couverture : Sorties culturelles, Grand Montréal
- Extraction : Scrapfly (Cloudflare) — sitemaps lastmod + fiches .event-play (date FR + heure « 20h00 » → start_time), cache incrémental data/atuvu_cache.json, plafond 120 fiches/sync
Accès
- Type : agregateur
- Endpoint (
SITEMAP_INDEX) :https://atuvu.ca/atuvu_sitemap_index.xml - Auth : Aucune côté source ;
SCRAPFLY_API_KEYrequis pour le backend Scrapfly - Pagination : parcours de sitemap XML
- Backend : Scrapfly (anti-bot / rendu JS) via
base.get_scrapfly() - Throttle : 1.0 s entre requêtes
- Accès légal : robots.txt : Allow / + sitemap public
En-tête documentaire du connecteur
connectors/atuvu.py : connecteur Atuvu.ca — calendrier culturel (Grand Montréal +) Source : atuvu.ca (théâtre, musique, humour, danse, expositions…) Extraction: SCRAPFLY obligatoire (Cloudflare) — sitemaps XML publics (evenements_N_2000.xml, lastmod par fiche) puis pages fiche (h1, blocs .event-play : date FR, salle, ville, prix). INCRÉMENTAL avec cache disque (data/atuvu_cache.json) : seules les fiches nouvelles ou modifiées sont re-scrapées, plafonné à ATUVU_MAX_FETCH pages/sync pour contenir le coût en crédits. Accès : robots.txt « User-Agent: * / Allow: / » + sitemap public. Prix : bloc .price-reg de la fiche (prix régulier) → price_min ; « Invitation gratuite » = offre membre, PAS gratuité → ignorée.
Champs récupérés → schéma
Complétude mesurée sur les 151 événements actifs de la source ; exemples tirés d'un événement réel (atuvu:belmar-cardinal-en-spectacle-2026-08-19).
Champ (events.*) |
Description | Complétude | Exemple réel |
|---|---|---|---|
title — Titre |
titre de l'événement | 100 % | Belmar Cardinal |
description — Description |
texte descriptif (source ou fiche détail) | 0 % | ∅ |
url — URL |
lien vers la fiche originale / billetterie | 100 % | https://atuvu.ca/billets-spectacle/belmar-cardinal-en-spectacle |
categories — Catégories |
taxonomie canonique Sorti-Ka (JSON) | 100 % | ["musique"] |
venue — Salle (venue) |
nom du lieu | 100 % | Le Rendez-vous du thé |
address — Adresse |
adresse civique | 0 % | ∅ |
city — Ville |
municipalité | 97 % | Montréal |
region — Région |
région administrative | 94 % | Montréal |
lat — GPS (lat/lng) |
coordonnées géographiques | 62 % | 45.5602793, -73.6576904 |
start_date — Date début |
date locale AAAA-MM-JJ | 100 % | 2026-08-19 |
end_date — Date fin |
date locale AAAA-MM-JJ | 100 % | 2026-08-19 |
start_time — Heure (start_time) |
heure locale HH:MM (Québec) | 9 % | 18:00 |
end_time — Heure de fin (end_time) |
heure locale HH:MM (Québec) | 0 % | ∅ |
status — Statut |
cancelled / postponed / soldout (NULL = prévu) | 0 % | ∅ |
is_free — Gratuité (is_free) |
1 gratuit / 0 payant / NULL inconnu | 28 % | ∅ |
price_min — Prix min |
tarif minimal réel ($) | 37 % | 0.0 |
price_label — Libellé prix |
étiquette tarifaire affichable | 28 % | ∅ |
artists — Artistes |
têtes d'affiche / lineup (JSON) | 0 % | [] |
organizer — Organisateur |
promoteur / organisme | 0 % | ∅ |
image — Image |
visuel (og:image ou média source) | 100 % | https://atuvu.ca/uploads/images/2024/07/belmar-cardinal-en-spectacle.jpg |
website — Site web |
site officiel de l'événement | 0 % | ∅ |
Fréquence & budgets
- Cadence : horaire (watcher PM2, incrémental)
- Budgets / plafonds (variables d'environnement) :
| Variable | Défaut | Rôle |
|---|---|---|
ATUVU_MAX_FETCH |
120 |
fiches/sync (coût Scrapfly) |
- Budget global : géocodage Nominatim plafonné à
SORTIKA_GEOCODE_MAX(défaut 120) requêtes réseau/cycle, toutes sources confondues (sortika/geocode.py, cache disque).
Volumétrie & complétude live
(mesuré le 2026-08-19 01:27 EDT dans data/sortika.db)
- Événements en base : 162 (dont 151 actifs)
- GPS : 94/151 actifs (62 %)
- Prix : 56/151 actifs (37 %)
- Heure (start_time) : 14/151 actifs (9 %)
- Heure de fin : 0/151 actifs (0 %)
- Statut (annulé/reporté/complet) : 0/151 actifs (0 %)
- Artistes : 0/151 actifs (0 %)
- Image : 151/151 actifs (100 %)
- Salle (venue) : 151/151 actifs (100 %)
- Dernier sync : 2026-08-19 01:16 — fetched 170, +0 ajoutés, ~160 mis à jour, -0 retirés
- Syncs enregistrés (sync_log) : 37
Erreurs & dépannage
Aucune erreur dans sync_log pour cette source. ✅
- Source derrière anti-bot/JS lourd → backend Scrapfly requis : vérifier
SCRAPFLY_API_KEYdans.envet le solde de crédits Scrapfly si le connecteur ne rapporte plus rien. - Rejouer un sync isolé :
python3 run.py sync --source atuvu(ou via le watcher PM2) ; inspecter ensuitesync_log:sqlite3 data/sortika.db "SELECT * FROM sync_log WHERE source='atuvu' ORDER BY ts DESC LIMIT 5;"
Licence / attribution
- robots.txt : Allow / + sitemap public
Historique
- 2026-08-18 — Vague 1 d'enrichissement (commit
7d9d1b0) : géocodage Nominatim des salles (sortika/geocode.py, cache disque, plafondSORTIKA_GEOCODE_MAX), fiches détail lepointdevente (description, heure, tarifs réels/plugins/rates/<id>), contacts Tourinsoft (SITQ), heure locale Montréal via JSON-LD. - 2026-08-18 — Vague 2 d'enrichissement (commit
65d2d33) : colonnes additivesevents.start_time(HH:MM locale QC) etevents.artists(JSON) + migration auto ; heure captée partout où la source la publie (lepointdevente, evenko, Laval, Sherbrooke, Montréal, atuvu) ; artistes (headliners evenko, lineup Bandsintown, attractions Ticketmaster, patrons sûrs sur les titres) ; 3 nouveaux connecteurs (brossard, ticketmaster, bandsintown). - 2026-08-19 — Phase 2 (travail de moine) : colonnes additives
end_time,status(annulé/reporté/complet) etquarantine(règles anti-aberrations, non publié mais réintégrable) ; règle d'ARCHIVAGE des événements terminés à chaque cycle (jamais supprimés) ; dedup_key inclut désormais l'heure (les séances multiples d'un même jour ne sont plus écrasées à l'affichage) ; alerte « 0 événement futur / chute > 80 % » par source (data/future_counts.json + /api/sources) ; heure et description La Vitrine ; end_time/organisateur/statut Eventbrite ; og:description Atuvu ; premières parties + portes + tournée evenko ; offres billets Bandsintown ; taxonomie type-event + description intégrale Brossard ; image Longueuil ; géocodage par ADRESSE CIVIQUE prioritaire ; villes normalisées au Répertoire MAMH (data/villes_canon.json) ; laval consignée « morte-a-la-source ».
Commits touchant sortika/connectors/atuvu.py :
65d2d332026-08-18 Vague 2 d'enrichissement : heure précise, artistes, 3 nouveaux connecteurs91644562026-08-17 Sorti·Ka v1 — agrégateur de sorties & événements du Québec