---
title: "Robots.txt"
id: "robots-txt"
project: "Руководство пользователя Документерры"
url: "https://docs.documenterra.ru/articles/manual/robots-txt"
updated: 2026-11-16T06:45:55Z
---

# Robots\.txt

Файл **robots.txt** позволяет указать, какие страницы вашего портала документации будут индексироваться и отображаться в поисковых системах. Например, если вы используете портал **Документерры** для создания контекстной справки, имеет смысл скрыть страницы с таким контентом от поисковых систем.

Чтобы настроить файл **robots.txt**, перейдите в **Настройки → Поиск контента → Robots.txt.**

![Настройка robots.txt в Документерре.](/resources/Storage/manual/fayl-sitemap-portala-dokumentatsii/robots-txt.png)

Как видно на скриншоте выше, вы можете разрешить поисковым системам индексировать все страницы вашего портала или запретить индексацию всего портала.

Третья опция, называемая **Пользовательский robots.txt**, позволяет вручную указать страницы, которые вы не хотите индексировать. Например, с помощью этой опции можно скрыть от поисковых систем определённые страницы справки:


Code

```
User-agent: *
Disallow: /articles/my-project/my-hidden-topic
```


Подробнее о синтаксисе файла robots.txt можно узнать здесь: [Robots.txt. Введение и руководство](https://developers.google.com/search/docs/crawling-indexing/robots/intro?visit_id=637774108069957851-3691393801&amp;rd=1&amp;hl=ru).