Google utilise les flux RSS et Atom

Google utilise désormais les flux RSS et Atom pour découvrir de nouvelles pages web.

Vous pouvez tester vos flux RSS grâce au testeur de fichier robots.txt fourni par Google

6 étapes sont à suivre pour tester le fichier robots.txt d'un site

1. Sur la page d'accueil des outils pour les webmaster, cliquez sur le site

2. Cliquez sur le lien "Accès du robot d'exploration" qui se trouve dans "Configuration du site" (en haut à gauche de la page)

3. Cliquez sur l'onglet "Test" de robot.txt

4. Copiez le contenu de votre fichier robots.txt et collez-le dans le premier champ

5. Indiquez le site à tester dans la zone URL

6. Sélectionnez les user-agents de votre choix, dans la liste User-agents

Voir l'annonce sur le blog officiel de Google