User-agent: Yandex# конкретно для Яндекса надо <User-agent: Yandex>
#Allow: /price
#Allow: /reklama
#Allow: /st
#Disallow: /index.html?*#до 17 ноября было <Disallow: />
Disallow: /video/
Disallow: /reg.html
Disallow: /index_1.html
Disallow: /st/st98.php
# пояснения на Яндексе
# http://help.yandex.ru/webmaster/?id=996567
# пояснения для Рамблера
# http://www.rambler.ru/doc/robots.shtml

User-agent: StackRambler# для Рамблера, вписал 17 ноября. Рамблер не понимает расширения. Он понимает только Disallow.
Disallow: /video/
Disallow: /index_1.html
Disallow: /reg.html
Disallow: /st/st98.php