SPB Git forge

spb/lou-ka

Public

Lou·Ka — tous les logements à louer du Québec, un seul endroit.

232commits 1branches 0releases
172.9 MBsize
maindefault branch
2 days agolast push
HTML 98.9% Python 0.6%
5.8 KB · 83 lines markdown
Rendered Raw Blame History
1# Beaulieu Groupe Immobilier (BGI) — connecteur `beaulieu_groupe`23_Fiche générée automatiquement par `scripts/gen_connector_docs.py` le 2026-09-04 14:12 — ne pas éditer à la main, régénérer._45**État : actif** · Région : Bas-Saint-Laurent · Backend : direct · Annonces actives : 4/567## Description de la source89connecteur Beaulieu Groupe Immobilier / BGI (beaulieugroupeimmobilier.com — Rimouski, Bas-Saint-Laurent ; distinct des Immeubles Beaulieu et Collin `immeubles_bc` et de Beaulieu Gestion à Rivière-du-Loup). WordPress + Elementor avec un shortcode maison : - archive /batiment/?category=residentiel : cartes `div.card-batiment` par immeuble avec statut « COMPLET » ou « Locaux disponibles : N » ; - fiche /batiment/<slug>/ : description de l'immeuble + cartes d'unités `div.card-local` (« 418 Alcide-C.-Horth, app #206 | 4 1/2 ») dont le `p.card-text` vaut « Indisponible » (image générique Complet.png) ou, pour les unités libres, « Superficie : N pi² » avec photo réelle. Le connecteur ne visite que les fiches des immeubles NON marqués COMPLET (politesse) et n'émet que les unités non « Indisponible ». Aucun prix publié -> price=None, rien d'inventé. Tout le parc affiché est à Rimouski. external_id stable : slug de la fiche + numéro d'appartement (418-rue-alcide-c-horth--app-206). robots.txt Yoast ouvert (Disallow vide), sitemap public.1011- **Site** : https://beaulieugroupeimmobilier.com12- **Page des annonces** : https://beaulieugroupeimmobilier.com/batiment/?category=residentiel13- **Secteurs couverts** : Rimouski (5 immeubles résidentiels dont 24 logements neufs au 418 rue Alcide-C.-Horth) — commercial exclu14- **Module** : `louka/connectors/beaulieu_groupe.py` — classe `BeaulieuGroupeConnector`1516## Accès1718- **Type d'accès** : sitemap XML + pages HTML19- **Endpoint de base** : https://beaulieugroupeimmobilier.com20- **URLs de départ (constantes du module)** : https://beaulieugroupeimmobilier.com21- **Authentification** : aucune — contenu public22- **Pagination** : page de liste unique (pas de pagination)23- **Backend anti-bot / rendu** : requests direct (session UA LouKaBot, throttling poli)24- **Politesse** : 0.6 s entre requêtes, timeout 30 s, User-Agent identifiable `LouKaBot/1.0 (+https://www.lou-ka.com/bot)`2526## Champs récupérés → schéma cible2728Le connecteur (direct, sitemap XML + pages HTML) alimente les colonnes de la table `listings`. Complétude mesurée en SQL sur les 4 annonces actives ; exemple tiré d'une ligne réelle de la BD.2930| Colonne `listings` | Contenu | Renseignée (actives) | Exemple réel |31|---|---|---|---|32| `title` | Titre de l'annonce | 100 % | 418 Alcide-C.-Horth, app #206 \| 4 1/2 |33| `address` | Adresse civique | 100 % | 418 Alcide-C.-Horth, Rimouski |34| `city` | Ville (normalisée) | 100 % | Rimouski |35| `sector` | Secteur / quartier | 0 % | — |36| `unit_type` | Type d'unité (3½, 4½…) | 100 % | 4½ |37| `price` | Loyer mensuel ($) | 0 % | — |38| `bedrooms` | Chambres | 100 % | 2 |39| `bathrooms` | Salles de bain | 0 % | — |40| `area_sqft` | Superficie (pi²) | 100 % | 1000 |41| `availability_date` | Date de disponibilité | 0 % | — |42| `lat` | GPS (lat/lng) | 100 % | 48.4461098 |43| `description` | Description | 100 % | Beaulieu Groupe Immobilier propose 24 logements neufs, modernes et spacieux au 418 Alcide… |44| `images` | Photos (JSON) | 100 % | 1 photo(s) — https://beaulieugroupeimmobilier.com/wp-content/uploads/2026/05/Cuisine-B-in… |45| `amenities` | Commodités (JSON) | 0 % | [] |46| `details` | Détails additionnels (JSON) | 100 % | {"ac": true, "balcony": true, "contact": {"phone": "581-805-0938", "email": "gestion@beau… |47| `url` | URL de l'annonce source | 100 % | https://beaulieugroupeimmobilier.com/batiment/418-rue-alcide-c-horth/ |4849## Fréquence & budget5051- **Cadence observée** (médiane des passages OK, sync_log) : ≈ 3.3 h52- **Dernier passage OK** : 2026-09-04 13:55 — 4 trouvées, +0 / ~0 / -053- **Throttling** : 0.6 s entre requêtes (constante de classe `request_delay`)54- **Cache des pages détail (BD `detail_cache`)** : activé — évite de re-visiter les fiches inchangées5556## Volumétrie & complétude5758- **Annonces en BD** : 5 au total, **4 actives**59- **Première ingestion** : 2026-08-09 · **Dernière observation** : 2026-09-0460- **Complétude clé (actives)** : GPS 100 % · prix 0 % · photos 100 % · description 100 %61- **Runs journalisés (60 derniers)** : 60, dont 0 en erreur6263## Erreurs connues & dépannage6465Aucune erreur dans les 60 derniers runs journalisés.6667**Note du registre** : actif — prix et dates jamais publiés (unités libres = cartes non « Indisponible », superficie et photo réelles) ; 4 immeubles sur 5 COMPLET au 2026-08-096869Rejouer la source seule : `python3 run.py sync beaulieu_groupe` · vérifier ensuite `sync_log` (`SELECT * FROM sync_log WHERE source='beaulieu_groupe' ORDER BY ts DESC LIMIT 5;`).7071## Licence, attribution & conditions7273- Scraping poli d'annonces **publiques** (données factuelles : prix, adresse, disponibilité) publiées par le gestionnaire sur son propre site.74- User-Agent **identifiable** avec page d'information et contact : `LouKaBot/1.0 (+https://www.lou-ka.com/bot; contact@spboucher.ai)` ; throttling 0.6 s ; cache détail pour minimiser les requêtes.75- Chaque annonce affichée sur Lou-Ka **pointe vers l'annonce d'origine** (colonne `url`) — la source garde le trafic de conversion.76- Retrait sur demande : contact@spboucher.ai.7778## Historique7980- 2026-08-09 — premières annonces de la source ingérées dans la BD.81- 2026-08-09 — mention au registre : « …cartes non « Indisponible », superficie et photo réelles) ; 4 immeubles sur 5 COMPLET au 2026-08-09… »82- 2026-08-18 — vague d'enrichissement : standardisation de la documentation des connecteurs (fiche générée par `scripts/gen_connector_docs.py`).83