Еще одна вещь, которую вам нужно сделать, чтобы повысить рейтинг вашего сайта в поисковых системах, — это указать путь ботам. Боты играют большую роль в обнаружении страниц. Для этого вам необходимо создать файл robots.txt и правильно его настроить. Вы можете продолжить чтение этой статьи, чтобы узнать, как это сделать.

Что такое Robots.txt?

Поисковые системы сканируют сайты с помощью ботов. Файл robots.txt WordPress Он инструктирует поисковые системы, как вести себя при сканировании. Файл robots.txt Даже если вы его не создадите, ваш сайт будет сканироваться поисковыми системами. Не забывайте об этом.

Как создать файл robots.txt

Вы можете создать файл robots.txt в WordPress вручную или с помощью плагина.

Создание WordPress Robots.txt

Создание файла Robots.txt с помощью Rank Math SEO

Плагин Rank Math SEO помогает вам добиться внутренней SEO-оптимизации ваших сообщений и страниц. Таким образом, вы сможете сделать SEO-работу более успешной. То же самое касается создания файла robots.txt. После установки и активации плагина нажмите «Общие настройки» в меню Rank Math SEO панели администратора. Нажмите кнопку «Редактировать Robots.txt», чтобы открыть экран редактирования Robots.txt. Если у вас правильные права на запись/чтение, вы можете редактировать свой виртуальный файл robots.txt здесь. Если у вас уже есть файл robots.txt, этот раздел неприменим.

Создание Robots.txt через FTP

Откройте Блокнот и напишите в его содержимом правила robots.txt. Если вы не знаете, что написать, вы можете воспользоваться рекомендуемыми правилами robots.txt, о которых мы упоминали в следующем разделе нашей статьи. Сохраните файл с расширением .txt, подключитесь к корневому каталогу вашего сайта (обычно public_html) через FTP-соединение и загрузите файл.

Создание файла Robots.txt с помощью файлового менеджера

После входа в используемую вами панель управления хостингом (cpanel, plesk, Directadmin, cwp и т. д.) откройте файловый менеджер. Получите доступ к корневому каталогу вашего сайта (обычно public_html) из файлового менеджера. В меню создания нового файла нажмите «Создать новый файл» и установите расширение файла .txt. Напишите правила robots.txt и сохраните файл.

Создание файла Robots.txt с помощью плагина редактора Robots.txt

Плагин редактора robots.txt Он позволяет легко создавать и редактировать файлы robots.txt без файлового менеджера или доступа по FTP.

Страница плагина -> https://wordpress.org/plugins/robots-txt-editor/

После скачивания плагина активируйте его. Затем откройте страницу «Чтение» в разделе «Настройки» с помощью левой боковой панели WordPress. Напишите правила robots.txt в поле robots.txt внизу страницы и сохраните их.

Правила WordPress Robots.txt

Рекомендуемые правила файла robots.txt для WordPress следующие. Вам нужно написать собственный адрес сайта вместо домена.com и URL-адрес sitemap.xml, который вы используете вместо sitemap.xml. Мы хотели бы дать вам важный совет: если вы используете плагин Rank Math SEO или Yoast SEO, ваша карта сайта будет создана как sitemap_index.xml, а не sitemap.xml. Не забудьте проверить написанный вами URL-адрес, введя его в браузере.

https://www.domain.com/sitemap.xml" style="color:#272822;display:none;background-color:#F8F8F2" aria-label="Копировать" data-copied-text="Скопировано!" data-has-text-button="textSimple" data-inside-header-type="headlights" aria-live="polite" class="code-block-pro-copy-button">Копировать
User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Sitemap: https://www.domain.com/sitemap.xml

Получите бесплатную поддержку при создании файла robots.txt

Если вам не удалось создать файл robots.txt или вы хотите получить бесплатную поддержку по файлу robots.txt, изложите свою проблему с подробным объяснением в разделе комментариев. Мы ответим на ваш комментарий в течение 24 часов и предложим бесплатную поддержку.

Получите профессиональную поддержку для создания Robots.txt

Если вам не удалось создать файл robots.txt или вы хотите получить профессиональную поддержку по файлу robots.txt, введите свое имя и номер телефона в форму ниже. Позвольте нам связаться с вами как можно скорее.