# Trouve-KA — crawler
# Author: Simon-Pierre Boucher
# Contact: contact@spboucher.ai

"""Le crawler de Trouve-KA : frontier Postgres, politesse par hôte, robots.txt,
fetch HTTP sécurisé (SSRF), pièges de crawl, pipeline inline fetch→parse→score→index."""

from .robots import RobotsCache
from .fetcher import Fetcher
from .traps import looks_like_trap

__all__ = ["RobotsCache", "Fetcher", "looks_like_trap"]