# Запрет индексации адресов страниц, файлов и папок следующими роботами
User-agent: *

# Запрет индексации адресов страниц, где есть символы: ? ; & = : ,
Disallow: /*&
Disallow: /*=
Disallow: /*?
Disallow: /*%

# Запрет индексации адресов страниц с расширением: .php
Disallow: /*.php$

# Запрет индексации директорий сайта
Disallow: /cgi-bin/
Disallow:

# Разрешить индексацию страниц для AdSense
User-agent: Mediapartners-Google* 
Disallow: