Preguntas etiquetadas con googlebot

Estoy rastreando la geolocalización de cada miembro (usando db-ip) y todo está bien, excepto los teléfonos móviles con el navegador Chrome. Siempre me dan el resultado US Mountain View California ip:66.249.xxx.xxx. Este es Google Estoy 100% seguro de eso. Pero la persona que visita el sitio web...

¿Cómo evito que mis archivos de mapa de sitio XML aparezcan en los resultados de búsqueda de Google como este resultado de una site:consulta de búsqueda: No entiendo por qué Google elegiría mostrar archivos de mapa del sitio en los resultados de búsqueda para empezar. Estos archivos no están...

Mucho se ha hecho de la frecuencia de arrastre de la araña Baidu. Es cierto: "Baiduspider se arrastra como un loco". He experimentado este fenómeno en los sitios con los que trabajo. En al menos una instancia, descubrí que Baiduspider se arrastra a aproximadamente la misma frecuencia que...

Agregué un archivo robots.txt a uno de mis sitios hace una semana, lo que debería haber evitado que Googlebot intente obtener ciertas URL. Sin embargo, este fin de semana puedo ver Googlebot cargando esas URL exactas. ¿Google almacena en caché el archivo robots.txt y, de ser así,...

Cada vez que creo un sitio web receptivo, generalmente creo 2 menús: 1 oculto y utilizado para dispositivos móviles y el otro como el menú principal, luego oculto para mostrar el menú móvil. Siempre que se trata de SEO y arañas que navegan por el sitio web, ¿me critican por tener menús duplicados?...

Aquí está uno de mis clientes, que realiza algunas acciones después de haber iniciado sesión en su cuenta. El token único es simplemente una identificación de usuario cifrada + marca de tiempo. 94.254.xxx.xxx - - [02 / Jul / 2011: 22: 25: 46 +0200] "GET / some-action / unique-token-123abc HTTP /...

He visto códigos como para evitar que Google indexe parte de una página: <p>This is a paragraph that will be indexed by Google.</p> <!--googleoff: index--> <p>This is a paragraph that will NOT be indexed by Google.</p> <!--googleon: index> ¿Esto...

Actualmente redirijo todas las conexiones que no son HTTPS a HTTPS y soporto TLS v1, TLS v1.1 y TLS v1.2. Reconfiguré mi servidor de prueba para aceptar solo un conjunto de cifrado muy limitado y seguro y solo TLSv1.2. Al ejecutar la prueba SSL Labs , noté que su tabla de compatibilidad mostraba...

Contexto: tenemos un sitio web que está disponible en varias versiones de idiomas. Sin embargo, el contenido es el mismo. Cada versión traducida del sitio está disponible en un subdominio distinto. En algunas páginas, usamos <link rel="canonical" />para apuntar a la versión canónica en el...

Me di cuenta de que Google Webmaster Tools informa muchos recursos bloqueados en mi sitio web. En este momento, todos los "recursos bloqueados" son .css, .js e imágenes (.jpg, .png) que sirvo desde Cloudfront CDN. He pasado mucho tiempo probando e intentando descubrir por qué Google no rastrea...

Después de haber escrito una serie de bots, y visto las enormes cantidades de bots aleatorios que rastrean un sitio, me pregunto como webmaster, ¿qué bots realmente vale la pena dejar en un sitio? Mi primer pensamiento es que permitir que los bots ingresen al sitio puede atraer tráfico real. ¿Hay...

Tenía un par de archivos privados en un directorio en la carpeta de mi escuela. Puede ver que los archivos existían yendo a myschool.edu/myusername/myfolder, pero al intentar acceder a los archivos a través de myschool.edu/myusername/myfolder/myfile.html, se produce un error 403. ¡Y sin embargo,...

Me encontré con este artículo en mis noticias de SEO hoy. Parece implicar que puede usar Noindex:directivas además de las Disallow:directivas estándar en robots.txt . Disallow: /page-one.html Noindex: /page-two.html Parece que evitaría que los motores de búsqueda rastreen la página uno y que no...

Si tengo contenido detrás de un formulario POST (un cuadro de selección, en mi caso), ¿podrá el robot de Google u otras arañas de motores de búsqueda rastrear el contenido detrás de ese formulario? Por ejemplo, si tuviera 4 traducciones de una página, y la selección del idioma fuera un formulario...

Cuando SPDY está disponible para un sitio, ¿lo usa Googlebot? Si es así, los sitios que tienen SPDY habilitado aparecerían más rápido para

Si inserto una imagen en una página como un img- srccon URI de datos base64, ¿los metadatos de la imagen (EXIF, IPTC, XMP) siguen disponibles para el robot de imágenes de

Así que ahora Google ha desaprobado el esquema de rastreo AJAX . Dicen que no se molesten en implementarlo en nuevos sitios web, porque ya no es necesario ya que Googlebot ahora no tiene problemas para ver contenido dinámico. ¿Deberíamos confiar de inmediato en esta declaración, o mejor seguir el...

Hice una migración de http: // a https: // para un sitio grande con más de 2 millones de URL indexadas en Google. Como otros han mencionado , también estoy experimentando un poco de fluctuación en el tráfico orgánico (-10% según lo medido por Google Analytics). Cosas que hice hasta...

Hoy me he encontrado con un par de sitios web que dicen aumentar el índice de su sitio web en cuestión de días. Hay miles de comentarios y todos parecen bastante positivos mostrando resultados y demás. Entiendo que estos pueden ser bots de motores de búsqueda y enlaces inútiles que nunca le...

Publico horarios en mi sitio web. Por ejemplo, el año pasado publiqué Number 2 bus Summer 2013 timetable. Tengo una clasificación bastante buena en los SERP de Google paranumber 2 bus timetable Pero este año agregué una nueva página con el nombre "Horario número 2 del autobús del verano 2014"....