Script de Crawl en PHP dans le but de créer un sitemap personnalisé.

Cette petite classe, va vous permettre de générer par exemple le sitemap de votre site.

A l'aide d'une tâche cron, vous pourriez ensuite automatiser la génération de votre sitemap afin qu'il soit tout le temps à jour.

Ce script est à votre disposition, il permet plus généralement de crawler un site web.

Créer par Thomas Moreira (www.thomasmoreira.fr)

This script will crawl all pages in the directory to create a custom sitemap.

Using a cron job, you could automate the generation of your sitemap so that it is updated periodically, or run it yourself manually when you have made a change.

On line 5 of main.php change the domain to your own. If you want to test on your localhost enter local host and the port number instead.

$website = "http://www.thomasmoreira.fr"; // Change this to your domain

Add crawler.php and main.php to the root directory - then open main.php to run the crawler.

The sitemap.xml will output to the root as normal, so you can access the sitemap with http://yoursitedomain.com/sitemap.xml and submit this to your chosen search engine.

Pour savoir ce que vous pouvez faire ou pas avec mon outil, voici quelques liens à lire :

• Texte officiel (EN)
• Article WIkipedia
• Guide rapide de la GPLv3