# Αποκλείει την πρόσβαση σε όλα τα robots από προεπιλογή
User-agent: *
Disallow: /

# Επιτρέπει την πρόσβαση στα βασικά Googlebot (για web pages)
User-agent: Googlebot
Allow: /