Symptomen
Overweeg het volgende scenario:
-
Met de zoekfunctie van Microsoft SharePoint Server 2013 of SharePoint Server 2010 kunt u verschillende sites verkennen.
-
Voor sites die wilt u-instructies in het Robots.txt-bestand gebruiken voor het definiëren van de paden die de zoekmachine kunt verkennen.
-
U instellen de volgende instructie voor de standaard user-agent van de crawler:
User-Agent: Mozilla/4.0 (compatibel; MSIE 4.01; Windows NT; MS zoekopdracht 6.0 Robot)
In dit scenario wordt de verkenning van SharePoint Server niet de richtlijn van toepassing.
Oorzaak
Dit probleem treedt op omdat de engine verkenning van SharePoint Server de standaard gebruiker-agent in de richtlijn niet wordt herkend.
Oplossing
Gebruik dit probleem oplossen door de volgende instructie in het bestand Robots.txt:
User-Agent: MS Search 6.0 Robot