User-agent: *

Disallow: /cgi-bin # папка на хостинге

Disallow: /manager/ # авторизация

Disallow: /assets/ # папка с системными файлами modx

Disallow: /core/ # папка с системными файлами modx

Disallow: /connectors/ # папка с системными файлами modx

Disallow: /index.php # дубли страниц index.php

Disallow: /partneryi.html

Disallow: /polzovatelskoe-soglashenie.html

Disallow: /politika-konfidenczialnosti.html

Allow: /assets/*.jpg        # здесь и далее открываем для индексации изображения, файлы и скрипты
Allow: /assets/*.jpeg 
Allow: /assets/*.gif 
Allow: /assets/*.png 
Allow: /assets/*.pdf 
Allow: /assets/*.doc 
Allow: /assets/*.docx 
Allow: /assets/*.xls 
Allow: /assets/*.xlsx 
Allow: /assets/*.ppt 
Allow: /assets/*.pptx 
Allow: /assets/*.js 
Allow: /assets/*.css
Allow: *?page=              # открываем для индексации страницы пагинации