User-agent: * # todos os robôs poderão visitar o site
Allow: /
# Disallow: /AREA_RESTRITA/ # o diretório "AREA_RESTRITA" não poderá ser indexado