Un prompt peut-il remplacer Screaming Frog SEO Spider ?

Construis un crawler de site local pour les audits SEO techniques, limité aux sites que tu possèdes ou que tu as la permission explicite de crawler — exige cette reconnaissance avant qu’un crawl ne démarre, et ne la saute pas. Utilise Python avec FastAPI, Playwright pour le rendu (nécessaire pour des résultats précis sur les sites riches en JavaScript), et SQLite pour stocker les résultats de crawl. Respecte le robots.txt et une limite de débit configurable et un plafond d’URL avant que le crawl ne démarre. Pour chaque page crawlée, extrais : le statut HTTP, le titre, la meta description, les titres H1/H2, l’URL canonique, les directives meta robots, les liens internes et externes, le texte alt des images, et la présence basique de données structurées. À partir du crawl, calcule et signale : les titres ou descriptions dupliqués à travers les pages, les liens internes cassés, les chaînes de redirection de plus d’un saut, les balises canoniques manquantes ou en conflit, et les pages sans lien interne entrant (orphelines). Affiche chaque problème signalé avec les URL précisément affectées, la preuve (par exemple le texte réel du titre dupliqué), et une suggestion de correction concrète en une ligne — les avertissements vagues sans preuve ne sont pas utiles. Exporte toutes les données de crawl en CSV et un rapport HTML autonome qui n’a pas besoin de l’appli en marche pour être consulté. Ne construis pas de crawl de sites sans permission, de surveillance planifiée ou continue, ni de jeux de données de backlinks/mots-clés — c’est hors périmètre ; c’est un outil d’audit local ponctuel pour ton propre site. Aucune clé d’API ni compte requis ; tout tourne en local.