Sitemap: https://sektascience.com/sitemap_index.xml

# !!!Disallow запрещает сканирование а не индексирование!!!
User-agent: *
Disallow: /cgi-bin          # Стандартная папка на хостинге
Disallow: /*&*              # Все параметры запроса
Disallow: /wp-              # все файлы WP: /wp-json/, /wp-includes, /wp-content/plugins
#Disallow: *?s=              # Поиск
#Disallow: *&s=              # Поиск
Disallow: */rss             # rss фид
Disallow: */feed            # Все фиды
#Disallow: */page/           # Все виды пагинации
Disallow: /search/          # Поиск
Disallow: /author/          # Архив автора
Disallow: /users/           # Архив авторов
Disallow: */embed           # все встраивания
Disallow: */comment         # Комменты
Disallow: */comments        # Комменты
Disallow: */trackback       # Трекбеки
Disallow: /xmlrpc.php       # файл WordPress API
#Disallow: *?attachment_id=  # страница вложения
# Дополнительно
#Disallow: *sa=*             # 
#Disallow: *utm*=            # ссылки с utm-метками
#Disallow: *epik=*           #
#Disallow: *filter=*         # поиск из всех функций
#Disallow: *filter_by=*      # 
#Disallow: *tpclid=*         #
#Disallow: *openstat=        # ссылки с метками openstat

Allow: /*/*.js              # открываем js-скрипты внутри /wp- (/*/ - для приоритета)
Allow: /*/*.css             # открываем css-файлы внутри /wp- (/*/ - для приоритета)
Allow: /wp-*.png            # картинки в плагинах, cache папке и т.д.
Allow: /wp-*.jpg            # картинки в плагинах, cache папке и т.д.
Allow: /wp-*.jpeg           # картинки в плагинах, cache папке и т.д.
Allow: /wp-*.gif            # картинки в плагинах, cache папке и т.д.
Allow: /feed/turbo/         # Турбо страницы
Allow: /feed/turbotax         # Турбо страницы
Allow: /wp-admin/admin-ajax.php # используется плагинами, чтобы не блокировать JS и CSS

Clean-param: block&source&etext&srp&srk&sra&srsrc&ak_action&openidserver&_&ak_action&tpclid&amp&subscribe&mindbox-message-key
Clean-param: share&_escaped_fragment_&disableGlobalInfoCollect&noamp&cat&wref
Host: https://sektascience.com