908
Вы можете создать robots.txt в WordPress с помощью плагинов или просто ввести его вручную. Это позволяет вам решить, какие из ваших постов должны быть перечислены ботами Google в результатах отображения.
Создайте WordPress robots.txt с помощью плагина: Пошаговое руководство
WordPress создает свой собственный файл robots.txt, если вы не создадите его самостоятельно — что, кстати, рекомендуется для каждого из ваших доменов. Например, в собственном robots.txt вы можете указать, что ваш блог не должен быть публичным и какие записи поисковые системы не должны отображать.
- Сначала загрузите нужный вам плагин для WordPress: WordPress Yoast SEO Plugin
- Разархивируйте загруженный файл.
- Теперь полностью загрузите разархивированную папку в каталог WordPress в «wp-content/plugins».
- Активируйте новый плагин и начните создавать robots.txt в соответствии с вашими пожеланиями.
Без собственной конфигурации WordPress сам создает robots.txt
Без пользовательских настроек все разделы вашего блога WordPress будут доступны для поиска в основных поисковых системах.
- WordPress поэтому автоматически создает соответствующий robots.txt, поскольку большинство владельцев интернет-доменов также хотят, чтобы опубликованный контент был найден.
- Если вы не хотите никаких ограничений на видимость содержимого вашего WordPress, вам больше ничего не нужно делать.
- Несмотря на самоопределенные ограничения в robots.txt, нельзя исключать, что ваш контент все-таки будет найден в Google & Co.
- Если вы не хотите делать некоторые изображения или другой конфиденциальный контент публичным, используйте частные группы или другие непубличные каналы связи с людьми, которым адресован ваш контент.