Ajout paramètre "drop" et résumé du crawler à la fin

c4software / python-sitemap

Mini website crawler to make sitemap from a website.

GNU General Public License v3.0

366 stars 110 forks source link

Ajout paramètre "drop" et résumé du crawler à la fin #7

Closed sebclick closed 12 years ago

sebclick commented 12 years ago

Ajout d'un paramètre drop pour supprimer un attribut d'une url (par ex un identifiant de session). Ajout d'un résumé à la fin (en mode debug) avec le nb d'url trouvée, nb d'url 200 ok, ...