User-agent: Yandex
Disallow: /admin
# запрещает скачивать все, кроме страниц 
# начинающихся с '/admin'