#Disallow: - ðàçðåøåíèå èíäåêñèðîâàòü âñ¸ ñîäåðæèìîå ñàéòà,
#Disallow: / - çàïðåò íà èíäåêñàöèþ âñåãî ñàéòà.
#Disallow: /name – çàïðåò íà èíäåêñàöèþ ëþáûõ ôàéëîâ è ïàïîê, êîòîðûå íàçûâàþòñÿ èëè èìåþò â ñâî¸ì íàçâàíèè name.
#Disallow: /name/ - çàïðåò íà èíäåêñàöèþ ïàïêè name.
#Disallow: /*.gif$ - çàïðåò íà èíäåêñàöèþ âñåõ ôàéëîâ, èìåþùèõ ðàñøèðåíèå .gif.
#Disallow: /name.php – çàïðåò íà èíäåêñàöèþ ôàéëà name.php.
#Disallow: /name.php?action=print – çàïðåò èíäåêñàöèè ïåðåìåííîé, íàïðèìåð, ñòðàíèö äëÿ ïå÷àòè.
User-Agent: *
Host: %host%