Pomocí souboru robots.txt můžete zakázat robotům prohledávat některé stránky vašeho webu. Robot pak nezaindexuje tyto zakázané stránky a stránky se tak nebudou zobrazovat ve výsledku vyhledávání.

Úpravu souboru robots.txt doporučujeme jen zkušeným uživatelům, nesprávnou úpravou se může stát, že se vaše stránky budou zobrazovat na nižších pozicích.