En los foros de Bing se han lanzado algunas dudas interesantes sobre el funcionamiento de MSNBot 2.0, y es que algunos usuarios se encuentran con 2 peticiones HTTP, una de la versión 1.0 y otra de la versión 1.1 (es decir, una con soporte Gzip y otra sin).
The following lines from my log show the issue (there are thousands more similar occurrences)
65.55.207.74 – – [13/Dec/2009:14:58:42 +0000] «GET /specimen/235698/ HTTP/1.1» 200 1742 «-» «msnbot/2.0b (+http://search.msn.com/msnbot.htm)»
65.55.207.74 – – [13/Dec/2009:14:59:06 +0000] «GET /specimen/235698/ HTTP/1.0» 200 4259 «-» «msnbot/2.0b (+http://search.msn.com/msnbot.htm)»
65.55.106.209 – – [13/Dec/2009:15:03:08 +0000] «GET /specimen/250262/ HTTP/1.1» 200 1733 «-» «msnbot/2.0b (+http://search.msn.com/msnbot.htm)»
65.55.106.209 – – [13/Dec/2009:15:03:14 +0000] «GET /specimen/250262/ HTTP/1.0» 200 4164 «-» «msnbot/2.0b (+http://search.msn.com/msnbot.htm)»
La gran diferencia, a aprte de que hacen 2 peticiones, es que la primera de ellas va comprimida y «pesa poco» y la segunda no lo está y va sin compresión… Aún no hay comentarios oficiales desde Microsoft, pero podrían estar haciendo análisis de calidad del tráfico, al igual que está Google haciendo mejoras de infraestructura.