Szerintem egyébként nem kereső robot, hanem ahogy az egyik log is írja: Bing preview aka page prediction and/or preload, ami ugye lehet jó is meg rossz is.
Persze tévedhetek is.