SPB Git forge

spb/job-ka

Public
229commits 1branches 0releases
38.1 MBsize
maindefault branch
1 h agolast push
HTML 82.1% Python 14.6% TypeScript 1.9% CSS 1% JavaScript 0.5%
8.3 KB · 130 lines markdown
Rendered Raw Blame History
1<!--2=============================================================================3Job·Ka — Groupe KA4Auteur  : Simon-Pierre Boucher5Contact : contact@spboucher.ai6Fichier : docs/connecteurs/jobillico.md7Rôle    : Fiche connecteur — portail agrégateur Jobillico8Généré  : 2026-09-21 18:06 EDT par scripts/gen_connector_docs.py — NE PAS ÉDITER,9          relancer le script pour régénérer.10=============================================================================11-->1213# Jobillico (`jobillico`) — portail agrégateur1415**Portail agrégateur** (`dedup.AGGREGATORS`) : source complémentaire, moins autoritaire qu'une page carrière. En cas de doublon avec une offre directe, **l'offre directe gagne la canonique** et la copie portail est masquée (`dup_of`). Ces offres ne portent pas le badge « Offre directe ».1617## Description1819- **Portail** : [Jobillico](https://www.jobillico.com)20- **Secteurs** : Portail, Tous secteurs2122> Portail Jobillico (jobillico.com).23>24> - liste  : sitemaps publics sitemap_job_postings_{1..4}.xml (~30 000 offres,25>            loc + lastmod) — on suit les N plus récentes (fenêtre glissante) ;26> - détail : chaque page offre embarque un JSON-LD schema.org/JobPosting complet27>            (employeur, description, lieu, salaire) — cache BD + budget de28>            nouvelles visites par synchronisation.29>30> Le filtre Québec s'applique après lecture du détail (le portail publie aussi31> quelques offres hors province).3233## Accès3435- **Endpoint** (`BASE`) : `https://www.jobillico.com`36- **Pagination** : parcours de sitemap XML37- **Backend** : GET direct `requests` (throttlé, UA `JobKaBot/1.0`)38- **Throttle** : 0.6 s entre requêtes.3940## Champs → schéma4142Complétude mesurée sur les **1425 offres actives** de la source (base live, 2026-09-21 18:06 EDT).4344| Champ (`jobs.*`) | Rôle | Complétude |45|---|---|---|46| `title` — Titre | titre du poste | 100 % |47| `employer` — Employeur | nom de l'entreprise | 100 % |48| `url` — URL | lien direct vers l'offre originale | 100 % |49| `description` — Description | texte complet (HTML nettoyé) | 100 % |50| `city` — Ville | municipalité normalisée | 100 % |51| `region` — Région | région administrative | 97 % |52| `address` — Adresse | adresse du lieu de travail | 57 % |53| `postal_code` — Code postal | code postal si publié | 57 % |54| `work_mode` — Mode | presentiel / hybride / teletravail | 5 % |55| `employment_type` — Type | temps_plein / temps_partiel / … | 21 % |56| `salary` — Salaire ($) | bornes numériques normalisées $/h et $/an | 36 % |57| `salary_label` — Libellé salaire | texte salarial original | 8 % |58| `benefits` — Avantages | avantages sociaux publiés (JSON) | 1 % |59| `requirements` — Exigences | scolarité, expérience, langues (JSON) | 90 % |60| `date_posted` — Date de parution | ISO 8601 | 100 % |61| `date_deadline` — Date limite | date limite pour postuler | 100 % |62| `category` — Catégorie | taxonomie interne (TI, Santé, …) | 85 % |63| `language` — Langue | fr / en / bilingue (source ou heuristique) | 100 % |64| `company_logo` — Logo employeur | URL du logo si exposé par la source | 100 % |65| `apply_url` — Candidature | lien de candidature directe | 0 % |66| `gps` — GPS | lat/lng (géocodage sans invention) | 100 % |6768Exemple réel : *Opérateur(trice) de ponts roulants* — Sherbrooke · On t’offre un salaire selon ton expérience à partir de 24,71 $/h de l’heure parce que les … · parue le 2026-09-21.6970## Fréquence & budgets7172- **Cadence** : resynchronisation **horaire** (PM2 `job-ka-sync` = `run.py watch 60`), suivie du géocodage en lot puis de la déduplication inter-sources.73- **Throttle** : 0.6 s minimum entre deux requêtes vers la source (`request_delay`).74- **Budgets / plafonds (variables d'environnement)** :7576| Variable | Défaut |77|---|---|78| `JOBKA_JOBILLICO_TRACK` | `2500` |79| `JOBKA_JOBILLICO_DETAIL_LIMIT` | `250` |80- Cache BD des pages détail (`detail_cache`) : le détail d'une offre n'est re-téléchargé que si sa ligne de liste change.8182## Volumétrie & complétude live8384*(mesuré le 2026-09-21 18:06 EDT dans `data/jobka.db`)*8586- **Offres en base** : 18765 (dont **1425 actives**, 28 masquées comme doublons `dup_of`)87- **Salaire** : 513/1425 actives (36 %)88- **GPS** : 1425/1425 actives (100 %)89- **Mode** : 66/1425 actives (5 %)90- **Parution** : 1425/1425 actives (100 %)91- **Dernier sync** : 2026-09-21 17:19 — trouvées 1458, +72, ~34, -3192- **Syncs enregistrés** (`sync_log`) : 3279394## Erreurs & dépannage9596Erreurs relevées dans `sync_log` :9798| Erreur | Occurrences | Dernière fois |99|---|---|---|100| Exceeded 30 redirects. | 1 | 2026-09-10 11:47 |101| 410 Client Error: Gone for url: https://www.jobillico.com/fr/offre-d-emploi/crt-constructi… | 1 | 2026-08-25 11:28 |102| 410 Client Error: Gone for url: https://www.jobillico.com/fr/offre-d-emploi/supermarche-fa… | 1 | 2026-08-24 19:51 |103| 410 Client Error: Gone for url: https://www.jobillico.com/en/job-offer/winnipeg-regional-h… | 1 | 2026-08-22 19:45 |104| 410 Client Error: Gone for url: https://www.jobillico.com/fr/offre-d-emploi/iga-extra-conv… | 1 | 2026-08-21 18:57 |105106- Un `410 Gone` sur une page offre est normal (offre retirée entre le sitemap et la visite) — non bloquant.107- Rejouer un sync isolé : `.venv/bin/python run.py sync jobillico` puis inspecter `sync_log` : `sqlite3 data/jobka.db "SELECT * FROM sync_log WHERE source='jobillico' ORDER BY ts DESC LIMIT 5;"`108- Garde-fous : une source qui retourne ≤ 25 % de sa médiane historique déclenche une alerte et les retraits sont suspendus ; une offre doit manquer 2 syncs consécutifs avant `active=0`.109110## Licence / conformité111112Parcours des **sitemaps publics** (`sitemap_job_postings_*.xml`) et lecture du **JSON-LD schema.org/JobPosting** que chaque page offre publie à destination des moteurs de recherche. Lien vers l'offre originale sur Jobillico. robots.txt respecté ; budgets de visites par sync. Aucune donnée personnelle de candidat collectée.113114## Historique115116**Mission connecteurs du 2026-08-18** — passage de 135 à 217 employeurs directs connectés, de 9 à 17 plateformes ATS, ajout de 3 portails agrégateurs et du canal de dépôt direct :117- `fd4bfc8` qualité lieux : rejet des villes hors Québec, bâtiments McGill → Montréal ;118- `5a66f48` +59 employeurs (sondage massif d'ATS + détection de pages carrières) ;119- `4917d57` 8 nouveaux ATS (Taleo, Njoyn, UltiPro, iCIMS, SuccessFactors, ADP WFN, Digital Recruiters, Workland) + 23 employeurs publics/parapublics ;120- `f6e7571` portails Guichet-Emplois, Jobillico, Espresso-Jobs — l'offre directe gagne toujours la canonique (dédup) ;121- `744cbfc` badge « Offre directe », stats directes/portails, dépôt direct employeurs ;122- `1604ff9` reprise sur coupure WAF Guichet-Emplois (retry + acquis partiel).123124Commits touchant `jobka/connectors/jobillico.py` :125126- `1309720` 2026-09-10 [ka6] snapshot pré-mission gus127- `936416d` 2026-08-25 [ka6] fix connecteur jobillico: un 410/404 sur une page détail (offre retirée entre le sitemap et la visite) n'avorte plus tout le sync — skip de l'offre; erreurs serveur/réseau ponctuelles → repli cache périmé (pattern guichet_emplois)128- `49067dd` 2026-08-19 Connecteurs phase 2 — correctifs et enrichissement champ par champ. Correctifs : villes SuccessFactors à trait d'union (préfixe municipal MAMH sur le slug, bogue « St »/« Pointe »), colonne date Taleo = date LIMITE chez agnico_eagle (+ garde-fou date future). Enrichissement : SmartRecruiters experienceLevel/function/industry/language/refNumber (lignes de liste, zéro requête), BambooHR locationType→work_mode, Breezy is_remote/logo_url/streetAddress, JSON-LD logo/industry/educationRequirements/skills (portails+icims+DR), Ashby applyUrl + composantes Bonus/Equity/Commission, Lever applyUrl + blocs opening/additional + allLocations, Workable application_url + function/industry, Recruitee careers_apply_url + description FR (translations) + expérience/scolarité + heures/sem, Greenhouse language + requisition_id, Workday externalUrl→apply_url + work_mode via facette Remote Type + clé cache v2, Guichet-Emplois avantages structurés + langue de travail, njoyn apply_url en colonne ; secours cache périmé quand le budget détail est épuisé (plus de fiches vidées)129- `f6e7571` 2026-08-18 Portails agrégateurs : Guichet-Emplois, Jobillico, Espresso-Jobs — l offre directe gagne toujours la canonique130