“Cómo agregar robots.txt” Código de respuesta

Robots txt

# Group 1
User-agent: Googlebot
Disallow: /nogooglebot/

# Group 2
User-agent: *
Allow: /

Sitemap: http://www.example.com/sitemap.xml
Worried Wryneck

Cómo agregar robots.txt

1) create a robots.txt file https://en.ryte.com/free-tools/robots-txt-generator/
2) place it in your home directory
3) make sure it is visible from your base directory
John Appleseed

Robots.txt

User-agent: *
Disallow: /404
Blue-eyed Bee

Respuestas similares a “Cómo agregar robots.txt”

Preguntas similares a “Cómo agregar robots.txt”

Más respuestas relacionadas con “Cómo agregar robots.txt” en HTML

Explore las respuestas de código populares por idioma

Explorar otros lenguajes de código