Cos'è Robot .txt?Una guida completa per comprendere le impostazioni del file robots.txt di WordPress

Quando si tratta di SEO per il tuo sito web, Robot.txt è uno strumento potente.Quando pubblichi un post, i robot dei motori di ricerca cercheranno il tuo sito Web per l'indicizzazione.

Al fine di garantire che il tuo sito Web o post sia in alto nelle pagine dei risultati dei motori di ricerca (SERP), devi fare in modo che i "bot" dei motori di ricerca esplorino facilmente le sue pagine più importanti.Ben strutturatorobots.txt Il file aiuterà a indirizzare questi bot alla pagina che vuoi che indicizzino.

Questo articolo qui spiegaGestione SEOFile Robots.txt的importanza, E come creare e inviare file txt di robot per il sito Web di WordPress?

Che cos'è WordPress Robot .txt?

Il file robots.txt (noto anche come protocollo o standard di esclusione dei robot) consente di negare ai motori di ricerca l'accesso a determinati file e cartelle.Oppure comunica ai robot web (motori di ricerca) quali pagine e post eseguire la scansione del tuo sito web.

L'importanza del tuo file SEO Robots.txt?

Come accennato in precedenza, il tuo file Robots.txt indica ai motori di ricerca quali pagine visitare e quali pagine indicizzare sul tuo sito Web da non visitare.Ad esempio, se specifichi nel file Robots.txt che non desideri che i motori di ricerca possano accedere alla tua pagina di feedback, la pagina non verrà visualizzata nei risultati della ricerca e gli utenti della rete non saranno in grado di trovarla.Per la privacy e la SEO del sito web, è importante impedire ai motori di ricerca di accedere a determinate pagine del tuo sito web.

Dov'è il txt dei robot in WordPress?

Questo file si trova solitamente nella cartella principale del sito.Puoi visualizzare questo file collegandoti al tuo sito tramite un client FTP.Puoi anche usare il file manager cPanel per farlo.

Ho bisogno del file robots.txt di WordPress?

Per impostazione predefinita, WordPress imposta il file robots.txt, ma non è possibile accedervi da nessuna directory.Tuttavia, se vuoi cambiarlo, devi creare il tuo file e caricarlo nella cartella principale in sostituzione.

Come creare un file txt del robot?

Creare un file txt robot per il tuo sito web è molto semplice

• Apri Blocco note, Microsoft Word o qualsiasi editor di testo
• Salva il file come "robot" (assicurati di selezionare .txt come estensione del tipo di file)
• Quindi, aggiungi le seguenti due righe di testo al file:

Agente utente:*
vietare:

"User agent" è un altro termine per robot o spider dei motori di ricerca.Un asterisco (*) significa che questa linea si applica a tutte le ragnatele.Qui, nessun file o cartella è elencato nella riga "Proibito", il che significa che è possibile accedere a tutte le directory del sito.Questo è il file di testo di base del robot.

Anche il blocco degli spider dei motori di ricerca dall'intero sito Web è una delle opzioni di robots.txt.Per fare ciò, aggiungi queste due righe al file:

Agente utente:*
vietare:/

Se vuoi bloccare gli spider in determinate aree del tuo sito web, il tuo robots.txt potrebbe avere questo aspetto:

Agente utente:*
Vietato: /database/
Vietato: /script/

Le tre righe sopra indicano a tutti i robot che non sono autorizzati ad accedere a nessun contenuto nel database e nelle directory o sottodirectory degli script.

Nota: ricorda che nella riga "Proibito" è possibile utilizzare solo un file o una cartella.Puoi aggiungere tutte le righe Disallow che desideri.

Assicurati di aggiungere il file della mappa del sito XML compatibile con il motore di ricerca al file di testo del robot.Ciò garantirà che i crawler possano trovare la tua mappa del sito e indicizzare facilmente tutte le pagine del tuo sito.Utilizzare la seguente sintassi:
Mappa del sito: http://www.miodominio.com/sitemap.xml

Al termine, salva il file robots.txt e caricalo nella directory principale del tuo sito web.

www.miodominio.com/robots.txt.

Usa Yoast per creare il file robots.txt

I plugin SEO come Yoast possono scegliere di creare e modificare i file robots.txt dalla dashboard di WordPress.

• Installa Yoast SEO e vai alla pagina "Strumenti" nel menu SEO.
• Qui puoi vedere il file robots.txt del tuo sito web/blog.
• Se non hai un file robots.txt, fai clic sul pulsante Crea file robots.txt per crearne uno.

Se non vedi l'opzione dell'editor di file, è perché hai rafforzato la sicurezza di WordPress.Puoi abilitare l'opzione di modifica del file eliminando la riga seguente dal file wp-config.php.

define('DISALLOW_FILE_EDIT', true);

Il tuo file Robot.txt esistente apparirà come:

Agente utente: *

Non autorizzato: /

Se stai usando  All in One SEO, Per favore nel centro informazioniAprire"Responsabile di funzione"pagina.All'interno troverai un file chiamatoRobots.txtOpzioni ,suoSottoC'è un evidente"Attivazione"Pulsante per inviare Robots.txt.

ComeIn WordPressModificarobots.txtavere qualche dubbio?Fatecelo sapere nella sezione commenti qui sotto!