Suivi du développement des logiciels

Les applications mises en ligne sur le site Crawl-Tool proviennent d'une idée ou d'un besoin à un instant précis. N'ayant pas trouvé de solution logiciel ou tout simplement pour rester indépendant, l'outil a été tout simplement developpé. Après avoir passé du temps au fond d'un serveur web, ces logiciels refont leur apparition pour faire profiter toute la communauté.
La première étape consiste à corriger les bugs et à apporter les améliorations pour que les applications soient utiles et agréables à l'emploi.
Dans un second temps, l'équipe de développemment ajoutera les fonctionnalités suivant vos remarques afin de répondre au mieux aux besoins de chaque utilisateur.

Les logiciels consacrés à l'exploration des réseaux

Client Whois

Charger le WhoIs pour une adresse IP, un AS ou un nom de domaine.
Les données importantes sont automatiquement extraites de la fiche WhoIs et le contenu brut est également fourni pour analyser soi-même les informations.
Mise à jour:Version 1.02 du 28/08/2021
Roadmap:Améliorer l'interface pour la recherche d'expiré
Historique

28/08/2021: Fix de la recherche du RIR suite aux lenteurs de l'API

01/04/2020: affichage du rapport d'erreur

11/03/2020: détection des proxy et des VPN sur les IP

05/03/2020: amélioration de l'interface graphique et correction de bugs mineurs

02/01/2020: ajout de la détection du réseau TOR

28/10/2019: lancement de la première version stable

Http Sniffer

Analyser l'entête HTTP renvoyée par le serveur web pour une URL
Chargement et analyse de la réponse du serveur pour corriger une erreur ou sécuriser son site web.
Mise à jour:Version 0.98 du 02/04/2020
Roadmap:Ajouter l'UA dans le lien auto + possibilité de choisir le serveur de test
Ajouter des conseils d'optimisation du serveur web
Historique

02/04/2020: Mise à jour du template

18/03/2020: Mise en évidence des entetes essentielles

02/03/2020: amélioration de l'interface graphique et correction de bugs mineurs

Les applications d'analyse de site internet

Structure HTML

interpréter une page internet telle que la verrait un moteur de recherche lors d'une phase d'indexation.
Le rapport met en évidence le maillage interne, les liens sortants, les balises de titre et l'optimisation des meta tags.
Mise à jour:Version 0.92 du 17/08/2020
Roadmap:Améliorer la prise en charge de l'encodage
Historique

17/08/2020: lancement de la première version stable

Analyse technique d'un nom de domaine

auditer l'environnement technique d'un site internet notamment du serveur d'hébergement.
L'analyse porte en particulier sur l'identité et la localisation de l'hégergeur, les applications utilisées, le certificat SSL et la fonfiguration DNS.
Mise à jour:Version 0.98 du 09/09/2020
Roadmap:Ajouter les règles de détection pour certains hébergeurs
Historique

09/09/2020: lancement de la première version stable

L'analyse de données à partir de texte

Data mining

Extraire les données utiles d'un texte non structuré.
L'analyse identifie les entités nommées et la forme nominale des phrases pour mettre en évidence la sémantique d'un corpus.
Mise à jour:Version 0.8 du 10/06/2020
Roadmap:Réduire le nombre de faux positifs
Historique

10/06/2020: lancement de la première version stable