Какво е Robot.txt?Пълно ръководство за разбиране на настройките на файла robots.txt на WordPress

Robot.txt е мощен инструмент, когато става въпрос за SEO на вашия уебсайт.Когато публикувате публикация, ботовете на търсачките обхождат сайта ви за индексиране.

За да гарантирате, че вашият уебсайт или публикация се класират високо в страниците с резултати от търсачките (SERP), трябва да улесните „ботовете“ на търсачките да навигират в най-важните им страници.добре структуриранrobots.txt Файловете ще помогнат за насочването на тези ботове към страниците, които искате да индексират.

Тази статия тук обясняваSEORobots.txt файлотзначение, и как да създадете submit robots txt файл за WordPress сайт?

Какво е WordPress робот .txt?

Файл robots.txt (известен също като протокол за изключване на роботи или стандарт) ви позволява да откажете на търсачките достъп до определени файлове и папки.Или кажете на уеб ботовете (търсачките) кои страници, публикации на вашия сайт да обхождат.

Значението на вашия файл Robots.txt за вашето SEO?

Както споменахме по-рано, вашият файл Robots.txt казва на търсачките кои страници да посещават и кои страници да не индексират на вашия сайт.Например, ако посочите във вашия файл Robots.txt, че не искате търсачките да имат достъп до вашата страница за обратна връзка, страницата няма да се показва в резултатите от търсенето и уеб потребителите няма да могат да я намерят.Блокирането на търсачките за достъп до определени страници на вашия сайт е от решаващо значение за поверителността и SEO на вашия уебсайт.

Къде е robots txt в WordPress?

Този файл обикновено се намира в главната папка на сайта.Можете да видите този файл, като се свържете с вашия сайт с помощта на FTP клиент.Можете също да използвате файловия мениджър на cPanel, за да направите това.

Имам ли нужда от файл robots.txt за WordPress?

По подразбиране WordPress настройва файла robots.txt, но изобщо не може да бъде достъпен от никоя директория.Въпреки това, ако искате да го промените, ще трябва да създадете свой собствен файл и да го качите в основната си папка като замяна.

Как да създадете robot txt файл?

Много е лесно да създадете робот txt файл за вашия уебсайт

• Отворете Notepad, Microsoft Word или всеки текстов редактор
• Запазете файла като "робот" (уверете се, че сте избрали .txt като разширение за тип файл)
• След това добавете следните два реда текст към файла:

Потребителски агент: *
забрани:

„Потребителски агент“ е друг термин за бот или паяк на търсачката.Звездичка (*) показва, че този ред се отнася за всички паяжини.Тук няма изброени файлове или папки в реда "забранено", което означава, че всяка директория на сайта е достъпна.Това е основният текстов файл на робота.

Блокирането на паяци на търсачките от целия сайт също е една от опциите на robots.txt.За да направите това, добавете тези два реда към файла:

Потребителски агент: *
забрани:/

Ако искате да блокирате паяци в определени области на вашия сайт, вашият robots.txt може да изглежда така:

Потребителски агент: *
Забранено: /база данни/
Забранено: /скриптове/

Горните три реда казват на всички роботи да не им разрешават достъп до нищо в директорията или поддиректориите на базата данни и скриптове.

Забележка: Имайте предвид, че редът „забрани“ може да използва само един файл или папка.Можете да добавите толкова забранени линии, колкото искате.

Не забравяйте да добавите удобния за SEO XML файл с карта на сайта към текстовия файл на ботовете.Това ще гарантира, че роботите могат да намерят вашата карта на сайта и лесно да индексират всички страници от вашия сайт.Използвайте следния синтаксис:
Карта на сайта: http://www.mydomain.com/sitemap.xml

След като приключите, запазете файла robots.txt и го качете в главната директория на вашия уебсайт.

www.mydomain.com/robots.txt.

Създайте файл robots.txt с Yoast

SEO плъгините като Yoast имат опцията да създават и редактират файлове robots.txt от таблото за управление на WordPress.

• Инсталирайте Yoast SEO и отидете на страницата Инструменти под менюто SEO.
• Тук можете да видите файла robots.txt за вашия уебсайт/блог.
• Ако нямате файл robots.txt, щракнете върху бутона Създаване на файл robots.txt, за да създадете такъв.

Ако не виждате опция за файловия редактор, това е, защото сте подобрили сигурността на WordPress.Можете да активирате опциите за редактиране на файлове, като премахнете следния ред от файла wp-config.php.

define('DISALLOW_FILE_EDIT', вярно);

Вашият съществуващ файл Robot.txt ще се появи като:

Потребителски агент: *

не е позволено: /

ако използвате  Всичко в едно SEO, в арматурното таблоОтвори"Мениджър на функции"страница.Вътре ще намерите файл, нареченRobots.txtНастроики , неговатаПо-долуИма очевидно "активиране"бутон, за да изпратите Robots.txt.

Как се чувстваш относнов WordPressредактирамrobots.txtимайте някакви съмнения?Уведомете ни в секцията за коментари по-долу!