SPB Git forge

spb/sorti-ka

Public

Toutes les sorties et tous les événements du Québec, un seul endroit — 7 connecteurs, fiches SSR, design Groupe KA.

58commits 1branches 0releases
13.7 MBsize
maindefault branch
17 days agolast push
HTML 82.9% Python 15.2% TypeScript 0.9% JavaScript 0.7%
8.8 KB

# Zeffy — billetterie OSBL (zeffy)

Fiche générée le 2026-08-25 19:01 EDT par scripts/gen_connector_docs.py — ne pas éditer à la main, relancer le script.

Statut : actif · Type : billetterie · Connecteur : sortika/connectors/zeffy.py

# Description

  • Source : Zeffy — billetterie OSBL
  • Couverture : ~100-200 événements OSBL QC actifs (galas, spectacles-bénéfice, ateliers communautaires), toutes régions
  • Extraction : sitemap des organisations (api.zeffy.com/sitemap/organizations/sitemap-0.xml, ~4 400 pages fr-CA/en-CA) → pages org rendues serveur (NEXT_DATA organizationPage.upcomingEvents : dates UTC, adresse, image, URL) filtrées « , QC » et formCategory=Event, puis fiches billetterie JSON-LD offers[].price pour les tarifs réels ; incrémental cache 7 j, plafonds ZEFFY_ORG_MAX=400 / ZEFFY_DETAIL_MAX=80. RÉACTIVÉE 2026-08-25 (le sitemap billets était infaisable ; les pages d'organisations sont la bonne surface)

# Accès

  • Type : billetterie
  • Endpoint (ORG_SITEMAP) : https://api.zeffy.com/sitemap/organizations/sitemap-0.xml
  • Auth : Aucune (accès public, identification honnête par User-Agent)
  • Pagination : par numéro de page, parcours de sitemap XML
  • Backend : GET direct requests (throttlé, UA SortiKa/1.0 identifié)
  • Throttle : 0.8 s entre requêtes
  • Accès légal : robots.txt Disallow: /*=$ uniquement (aucune URL visée) + sitemaps publiés ; GET throttlés, identification honnête, pas d'anti-bot constaté
En-tête documentaire du connecteur

connectors/zeffy.py : connecteur Zeffy (zeffy.com) — billetterie OSBL Source : billetterie gratuite très utilisée par les OSBL québécois (galas, spectacles-bénéfice, marches, ateliers communautaires). Extraction: 1) sitemap des organisations (api.zeffy.com/sitemap/ organizations/sitemap-0.xml) → pages d'organisation fr-CA/en-CA (~4 400, dont ~1 300 fr-CA) ; 2) chaque page d'organisation est rendue serveur (Next.js NEXT_DATA → organizationPage. upcomingEvents : titre, description, adresse postale complète, occurrences startUtc/endUtc, bannière, URL de billetterie) — AUCUN rendu JS requis ; 3) fiches billetterie des événements QC retenus : JSON-LD (offers[].price) → tarifs réels publiés. Périmètre QUÉBEC : on ne garde que les événements datés dont l'adresse porte « , QC » (les organisations fr-CA/en-CA couvrent tout le Canada). Le sitemap des BILLETS (55 000+ URLs fr-CA mêlant dons/adhésions/archives, sans dates) est ignoré : la page d'organisation est la seule surface « à venir » fiable. INCRÉMENTAL avec cache disque (data/zeffy_cache.json) : nouvelles organisations d'abord, re-visite après 7 jours, plafonds ZEFFY_ORG_MAX pages org et ZEFFY_DETAIL_MAX fiches prix par sync. Accès : robots.txt « User-agent: * / Disallow: /*=$ » (seules les URLs finissant par « = » sont exclues — aucune de celles qu'on visite) + sitemaps publiés ; GET throttlés, identification honnête, pas d'anti-bot constaté (sondé 2026-08-25). Prix : offers[].price du JSON-LD de la fiche (tarifs affichés par l'organisme ; Zeffy suggère un pourboire plateforme au paiement, non inclus). is_free=True si TOUS les tarifs publiés sont à 0 $. Jamais inventé (événement sans fiche lisible → prix inconnu).

# Champs récupérés → schéma

Complétude mesurée sur les 15 événements actifs de la source ; exemples tirés d'un événement réel (zeffy:e77cf52c-dd96-4290-b747-50ab8564771d:60c945f7-c2e8-44f8-82dc-c840f808e2ed).

Champ (events.*) Description Complétude Exemple réel
title — Titre titre de l'événement 100 % Dîner Spaghetti
description — Description texte descriptif (source ou fiche détail) 100 % Partagez un bon repas de spaghetti 🍝 et un moment convivial en l’honneur des 175 ans de Sainte‑H…
url — URL lien vers la fiche originale / billetterie 100 % https://www.zeffy.com/en-CA/ticketing/diner-spaghetti-6
categories — Catégories taxonomie canonique Sorti-Ka (JSON) 100 % ["autre"]
venue — Salle (venue) nom du lieu 0 % ∅
address — Adresse adresse civique 100 % 1299 Rte Sainte-Thérèse
city — Ville municipalité 100 % Sainte-Hénédine
region — Région région administrative 100 % Chaudière-Appalaches
lat — GPS (lat/lng) coordonnées géographiques 80 % 46.5585152, -70.9836412
start_date — Date début date locale AAAA-MM-JJ 100 % 2026-08-23
end_date — Date fin date locale AAAA-MM-JJ 100 % 2026-09-23
start_time — Heure (start_time) heure locale HH:MM (Québec) 100 % 11:00
end_time — Heure de fin (end_time) heure locale HH:MM (Québec) 100 % 14:00
status — Statut cancelled / postponed / soldout (NULL = prévu) 0 % ∅
is_free — Gratuité (is_free) 1 gratuit / 0 payant / NULL inconnu 100 % 0
price_min — Prix min tarif minimal réel ($) 100 % 5.0
price_label — Libellé prix étiquette tarifaire affichable 100 % Adulte 25 $ · Enfant (5 à 12 ans) 15 $ · Enfant 0-5 ans 5 $
artists — Artistes têtes d'affiche / lineup (JSON) 0 % []
organizer — Organisateur promoteur / organisme 100 % 175e de Sainte-Hénédine
image — Image visuel (og:image ou média source) 87 % https://res.cloudinary.com/hxn9dbuhd/image/upload/v1785879985/organizations/a/2/5/b/a25bf52d-2cf…
website — Site web site officiel de l'événement 0 % ∅

# Fréquence & budgets

  • Cadence : quotidienne
  • Budgets / plafonds (variables d'environnement) :
Variable Défaut Rôle
ZEFFY_LOCALES fr-CA,en-CA —
ZEFFY_ORG_MAX 400 —
ZEFFY_DETAIL_MAX 80 —
  • Budget global : géocodage Nominatim plafonné à SORTIKA_GEOCODE_MAX (défaut 120) requêtes réseau/cycle, toutes sources confondues (sortika/geocode.py, cache disque).

# Volumétrie & complétude live

(mesuré le 2026-08-25 19:01 EDT dans data/sortika.db)

  • Événements en base : 15 (dont 15 actifs)
  • GPS : 12/15 actifs (80 %)
  • Prix : 15/15 actifs (100 %)
  • Heure (start_time) : 15/15 actifs (100 %)
  • Heure de fin : 15/15 actifs (100 %)
  • Statut (annulé/reporté/complet) : 0/15 actifs (0 %)
  • Artistes : 0/15 actifs (0 %)
  • Image : 13/15 actifs (87 %)
  • Salle (venue) : 0/15 actifs (0 %)
  • Dernier sync : 2026-08-25 18:49 — fetched 15, +15 ajoutés, ~0 mis à jour, -0 retirés
  • Syncs enregistrés (sync_log) : 1

# Erreurs & dépannage

Aucune erreur dans sync_log pour cette source. ✅

  • Rejouer un sync isolé : python3 run.py sync --source zeffy (ou via le watcher PM2) ; inspecter ensuite sync_log : sqlite3 data/sortika.db "SELECT * FROM sync_log WHERE source='zeffy' ORDER BY ts DESC LIMIT 5;"

# Licence / attribution

  • robots.txt Disallow: /*=$ uniquement (aucune URL visée) + sitemaps publiés ; GET throttlés, identification honnête, pas d'anti-bot constaté

# Historique

  • 2026-08-18 — Vague 1 d'enrichissement (commit 7d9d1b0) : géocodage Nominatim des salles (sortika/geocode.py, cache disque, plafond SORTIKA_GEOCODE_MAX), fiches détail lepointdevente (description, heure, tarifs réels /plugins/rates/<id>), contacts Tourinsoft (SITQ), heure locale Montréal via JSON-LD.
  • 2026-08-18 — Vague 2 d'enrichissement (commit 65d2d33) : colonnes additives events.start_time (HH:MM locale QC) et events.artists (JSON) + migration auto ; heure captée partout où la source la publie (lepointdevente, evenko, Laval, Sherbrooke, Montréal, atuvu) ; artistes (headliners evenko, lineup Bandsintown, attractions Ticketmaster, patrons sûrs sur les titres) ; 3 nouveaux connecteurs (brossard, ticketmaster, bandsintown).
  • 2026-08-19 — Phase 2 (travail de moine) : colonnes additives end_time, status (annulé/reporté/complet) et quarantine (règles anti-aberrations, non publié mais réintégrable) ; règle d'ARCHIVAGE des événements terminés à chaque cycle (jamais supprimés) ; dedup_key inclut désormais l'heure (les séances multiples d'un même jour ne sont plus écrasées à l'affichage) ; alerte « 0 événement futur / chute > 80 % » par source (data/future_counts.json + /api/sources) ; heure et description La Vitrine ; end_time/organisateur/statut Eventbrite ; og:description Atuvu ; premières parties + portes + tournée evenko ; offres billets Bandsintown ; taxonomie type-event + description intégrale Brossard ; image Longueuil ; géocodage par ADRESSE CIVIQUE prioritaire ; villes normalisées au Répertoire MAMH (data/villes_canon.json) ; laval consignée « morte-a-la-source ».