SPB Git

Repository Public

README.md 3.6 KB 73 lines markdown

1# KA Apify Actors — enrichissement multi-plateforme pour Créa-Ka23Acteurs Apify **maison** (compte `gorgeous_thistle`) qui alimentent les fiches4créateurs de **Créa-Ka** (et, au besoin, les autres apps Groupe Ka). Chacun5lit les données **publiques** d'une plateforme et renvoie un profil **ultra6détaillé** (identité, compteurs, badges, engagement, cadence + **contenu7récent** avec métriques par post/vidéo/tweet). Exécutés sur la plateforme8Apify avec **proxy résidentiel** + empreinte TLS Chrome (`curl_cffi`).910## Les 11 acteurs1112| Acteur | Plateforme | Voie d'accès | État testé |13|---|---|---|---|14| `ka-instagram` | Instagram | `web_profile_info` (web public) | ✅ profils riches (12 posts, engagement, reliés) — recherche topsearch ✗ (login requis) |15| `ka-tiktok` | TikTok | SSR `__UNIVERSAL_DATA_FOR_REHYDRATION__` | ✅ (coquille possible → 3 essais/IP) |16| `ka-x` | X / Twitter | syndication officielle des widgets (sans clé) | ✅ profil + 20 tweets + hashtags/cadence |17| `ka-youtube` | YouTube | `ytInitialData` de `/videos` | ✅ abonnés, nb vidéos, 15 vidéos + vues |18| `ka-twitch` | Twitch | GQL public (Client-ID web) | ✅ live, partenaire, jeux, 10 vidéos |19| `ka-kick` | Kick | API v2 publique (Cloudflare) | ✅ + liens sociaux auto-déclarés (cross_link) |20| `ka-fansly` | Fansly | API v1 publique (lots de 20) | ✅ abonnés, médias |21| `ka-facebook` | Facebook | HTML public de page | ⚠️ nom/avatar/J'aime best-effort (mur fréquent) |22| `ka-threads` | Threads | JSON embarqué de la page | ✅ abonnés/bio, posts si embarqués |23| `ka-snapchat` | Snapchat | `__NEXT_DATA__` de `/add/<user>` | ✅ badge, story/spotlight, comptes reliés |24| `ka-onlyfans` | OnlyFans | page publique | ✗ SPA sans SSR (nécessite session/API) — hors ordre auto |2526## Entrée commune2728```json29{30  "usernames": ["handle1", "handle2"],31  "requestDelay": 1,32  "concurrency": 3,33  "proxyConfiguration": { "useApifyProxy": true, "apifyProxyGroups": ["RESIDENTIAL"] }34}35```3637`ka-instagram` accepte aussi `queries` (recherche — actuellement fermée).38`ka-x` accepte `maxTweets`. **Toujours utiliser le proxy résidentiel** pour39Instagram/TikTok/Facebook/Threads/Snapchat/Kick/OnlyFans ; datacenter suffit40pour X/YouTube/Twitch/Fansly.4142## Sortie4344Un item `{"kind":"profile", "platform":…, "found":true|false, …}` par handle.45`found:false` porte un `error` explicite (`http_404`, `private`, `login_wall`,46`shell_page_200`…) — ce n'est **pas** une erreur du pipeline. Schéma complet47par plateforme : voir le `src/main.py` de chaque acteur (dictionnaire poussé48via `Actor.push_data`).4950## Développement5152```bash53apify login -t <TOKEN>54cd ka-<plateforme> && apify push      # build + déploiement55```5657Boilerplate partagé : `src/net.py` (`Fetcher` — proxy + retries + throttle),58`src/__main__.py`, `.actor/{actor.json,input_schema.json,Dockerfile}`.59`requirements.txt` ne pinne QUE `curl_cffi` (le SDK `apify` vient de l'image de60base — le sur-pinner casse le build via un conflit pydantic/crawlee).6162## Intégration Créa-Ka6364Côté crea-ka (`M3U96b:~/apps/crea-ka`), le module65`creaka/connectors/apify_social.py` expose un connecteur d'enrichissement par66acteur (`<plateforme>-apify`). `run_actor()` lance l'acteur (proxy résidentiel67forcé), attend le dataset, puis applique aux fiches : abonnés/badge, métriques68étendues + contenu récent dans `account.metrics`, avatar/bio manquants, et les69liens de bio → comptes `cross_link` (0.90). Rotation par `revisit_days` ;70`APIFY_TOKEN` dans le `.env`. Enregistrés dans `data/sources.json`, insérés en71tête de `ENRICH_ORDER` (avant les anciens connecteurs Scrapfly, devenus repli72via le garde-fou `_fresh` de 72 h).73
Files main
Menu

Theme