Kwebble : Blog

  • Google, Microsoft en Yahoo! over robots.txt

    Gepubliceerd op 6 juni 2008 in Links.

    Documentatie over hoe Google, Microsoft en Yahoo! het Robots Exclusion Protocol (robots.txt) hanteren bij het indexeren van websites.

    • google
    • robots.txt

    Reacties zijn gesloten.

  • Rubrieken

    • Artikelen
    • Foto's
    • Links
    • Media
    • Overheid
    • Programming

  • Recente Berichten

    • Stanford Web Applications course lectures
    • The importance of knowing Unicode
    • “If you are not paying for it, you’re not the customer; you’re the product being sold.”
    • Inzage in je gegevens bij Facebook
    • Tuning Oracle UCM 11 & Site Studio performance

  • Gerelateerde berichten

    • Alle tweets van Google
    • Al het nieuws van Google, Yahoo! en Microsoft
    • Google via de commandoregel
    • Google neemt Jaiku over
    • Google’s wisselende indexgrootte

  • Abonneren

    • Atom feed Artikelen
    • Atom feed Reacties
  • Archief

© Rob Schlüter - Contact