Yandex soporta Crawl-delay y GZIP

El buscador ruso Yandex parece estar poniéndose al día en cuanto a compatibilidad con el resto de buscadores mundiales ya que ha decidido comenzar a aceptar algunos de los parámetros que otros motores de indexación usan.

Los dos nuevos parámetros que se aceptan son:

  • Crawl-delay (que permite decirle al buscador la separación entre peticiones)
  • Accept-Encoding: gzip,deflate (que permite leer contenidos comprimidos y reducir el ancho de banda)

Deja un comentario