Bingbot-Anforderung für trafficbasedsspsitemap.xml, die nicht vorhanden ist

28

In den Protokollen für eine von mir verwaltete Website wird eine Anfrage nach einer nicht vorhandenen Datei von Bingbot angezeigt. Die Details der Anfrage sind

  • Pfad: /trafficbasedsspsitemap.xml
  • Useragent: "Mozilla / 5.0 (kompatibel; Bingbot / 2.0; + http://www.bing.com/bingbot.htm )"
  • IP-Adresse: 65.55.213.244 (Reverse Lookup wird in msnbot-65-55-213-244.search.msn.com aufgelöst. )

Aus welchem ​​Grund sucht Bingbot nach dieser Datei? Was bedeutet "Traffic Based SSP Site Map"?

bing logging web-crawlers SpongeBoy
quelle
1
Ich habe in den letzten 24 Stunden ein paar davon auf einer meiner Websites bekommen, auch neugierig.
Rodolfo
Ich habe auch viele davon gesehen

Antworten:

12

Dies ist Vincent von Bing Webmaster Tools.

Dies war eine Bingbot-Überprüfung für eine XML-Sitemap, die vom Bing Sitemap Plugin (Beta) für IIS und Apache generiert wurde. Weitere Informationen finden Sie im Folgenden:

Sie sollten diese Art von Entdeckungsanfrage nicht sehr oft sehen.

Vincent_Bing
quelle
10
Der Crawler fragt nicht nach robots.txtund schaut nicht hinein sitemap.xml- er benutzt nur immer wieder einen erfundenen Pfad? Dies sollte schnell behoben werden.
Fuxia
2
Ich habe einen meiner Hosts überprüft und er erhält diese Anfrage einmal pro Minute . Ich hoffe, dass einige Bingbot-Leute dies bald beheben können.
Sigurdga
1
Ich erhalte diese Anfrage ungefähr einmal täglich pro Site (mit und ohne "www."), Manchmal jedoch zweimal innerhalb von 30 Minuten an dieselbe Site.
Rodolfo
Ich sehe auch viel zu viele Anfragen dieser Art in meinem error_log auf den wenigen Servern, auf denen ich bereits einen Bingbot auf die schwarze Liste gesetzt habe. . .
Nun
1
Gibt es in robots.txt eine Anweisung, die Bingbot mitteilt, wo sich diese spezielle Sitemap befindet? (oder wenn es keine solche spezielle Sitemap gibt)
Joelbitar