Crawl Lab

À propos

Des outils SEO honnêtes, sans compromis sur vos données

Crawl Lab est né d'un constat simple, sur le terrain du SEO : les outils d'analyse de logs et de suivi de crawl sont, la plupart du temps, payants, lourds à mettre en place, ou peu regardants sur ce qu'ils font des fichiers qu'on leur confie. Des fichiers qui contiennent pourtant des adresses IP et l'activité réelle de vos visiteurs.

Avec l'arrivée des moteurs IA (ChatGPT, Perplexity, Google AI Overviews…), comprendre comment ces nouveaux crawlers explorent un site est devenu un vrai sujet de référencement. Crawl Lab construit les outils qu'il faut pour ça : gratuits, directs, et conçus pour ne jamais exiger qu'on fasse confiance à un serveur tiers avec des données sensibles.

Gratuit, vraiment

Pas de palier payant caché, pas d'essai limité dans le temps. Le seul coût de ce projet est le nom de domaine. C'est un choix, pas un teasing avant paywall.

Vie privée par conception

L'analyseur de logs traite vos fichiers entièrement dans votre navigateur. Rien n'est envoyé, rien n'est stocké. C'est une contrainte technique assumée, pas un argument marketing.

Pensé pour l'ère de l'IA

Le SEO change avec les moteurs génératifs (ChatGPT, Perplexity, AI Overviews). Les outils doivent suivre : distinguer les crawlers IA, comprendre ce qu'ils lisent, mesurer leur passage.

Notre méthode

Les outils sont écrits par des praticiens du SEO technique, testés sur de vrais logs de production (plusieurs dizaines de milliers de lignes, formats Apache et LiteSpeed). Rien n'est laissé au hasard : la détection des bots s'appuie sur les plages d'adresses IP officielles publiées par chaque opérateur (Google, OpenAI, Bing…) pour distinguer un vrai Googlebot d'un robot qui usurpe son identité.

Nous préférons dire les choses honnêtement : quand une donnée n'est pas vérifiable, on ne l'invente pas. Les diagnostics sont conçus pour être actionnables, pas pour gonfler un score. Et le code du parsing tourne côté navigateur, ce qui veut dire que personne, pas même nous, ne voit vos fichiers.

Une question, une suggestion ?

Ce projet évolue au fil des retours. Si un outil vous manque, si quelque chose casse sur vos logs, ou si vous avez juste une idée à partager, écrivez-nous.

Nous contacter