Hva er Robot.txt?En komplett guide for å forstå WordPress robots.txt-filinnstillingene

Robot.txt er et kraftig verktøy når det kommer til SEO for nettstedet ditt.Når du publiserer et innlegg, gjennomsøker søkemotorroboter nettstedet ditt for indeksering.

For å sikre at nettstedet eller innlegget ditt rangerer høyt på søkemotorresultatsidene (SERPs), må du gjøre det enkelt for søkemotorens "roboter" å navigere på de viktigste sidene deres.godt strukturertrobots.txt Filene vil hjelpe til med å lede disse robotene til sidene du vil at de skal indeksere.

Denne artikkelen her forklarerSEORobots.txt-filavbetydning, og hvordan lage en innsend robots txt-fil for WordPress-nettstedet?

Hva er WordPress Robot .txt?

En robots.txt-fil (også kjent som en Robot Exclusion Protocol eller Standard) lar deg nekte søkemotorer tilgang til visse filer og mapper.Eller fortell nettroboter (søkemotorer) hvilke sider, innlegg på nettstedet ditt som skal gjennomsøkes.

Betydningen av Robots.txt-filen din for SEO?

Som nevnt tidligere, forteller Robots.txt-filen søkemotorene hvilke sider de skal besøke og hvilke sider som ikke skal indekseres på nettstedet ditt.Hvis du for eksempel spesifiserer i Robots.txt-filen din at du ikke vil at søkemotorer skal kunne få tilgang til tilbakemeldingssiden din, vil siden ikke vises i søkeresultatene og nettbrukere vil ikke kunne finne den.Å blokkere søkemotorer fra å få tilgang til bestemte sider på nettstedet ditt er avgjørende for nettstedets personvern og SEO.

Hvor er robots txt i WordPress?

Denne filen er vanligvis plassert i rotmappen på nettstedet.Du kan se denne filen ved å koble til nettstedet ditt ved hjelp av en FTP-klient.Du kan også bruke cPanel-filbehandlingen til å gjøre dette.

Trenger jeg robots.txt-fil for WordPress?

Som standard setter WordPress opp en robots.txt-fil, men den kan ikke nås fra noen katalog i det hele tatt.Men hvis du vil endre den, må du lage din egen fil og laste den opp til rotmappen som en erstatning.

Hvordan lage en robot txt-fil?

Det er veldig enkelt å lage en robot txt-fil for nettstedet ditt

• Åpne Notisblokk, Microsoft Word eller et annet tekstredigeringsprogram
• Lagre filen som "robot" (sørg for å velge .txt som filtypetype)
• Deretter legger du til følgende to linjer med tekst til filen:

Bruker agent: *
forby:

"User-Agent" er et annet begrep for en bot eller søkemotoredderkopp.En stjerne (*) indikerer at denne raden gjelder alle edderkoppnett.Her er ingen filer eller mapper oppført på "forbudt"-linjen, noe som betyr at hver katalog på nettstedet er tilgjengelig.Dette er den grunnleggende robottekstfilen.

Blokkering av søkemotoredderkopper fra hele nettstedet er også et av robots.txt-alternativene.For å gjøre dette, legg til disse to linjene i filen:

Bruker agent: *
forby:/

Hvis du ønsker å blokkere edderkopper i visse områder av nettstedet ditt, kan robots.txt-filen din se slik ut:

Bruker agent: *
Forbudt: /database/
Forbudt: /scripts/

De tre linjene ovenfor forteller alle roboter at de ikke skal få tilgang til noe i databasen og skriptkatalogen eller underkatalogene.

Merk: Husk at "forby"-linjen kan bare bruke én fil eller mappe.Du kan legge til så mange Disallow-linjer du vil.

Sørg for å legge til den SEO-vennlige XML sitemap-filen til bots-tekstfilen.Dette vil sikre at crawlere kan finne nettstedskartet ditt og enkelt indeksere alle sidene på nettstedet ditt.Bruk følgende syntaks:
Nettstedkart: http://www.mydomain.com/sitemap.xml

Når du er ferdig, lagrer du robots.txt-filen og laster den opp til rotkatalogen på nettstedet ditt.

www.mittdomene.com/robots.txt.

Lag robots.txt-fil med Yoast

SEO-plugins som Yoast har muligheten til å lage og redigere robots.txt-filer fra WordPress-dashbordet.

• Installer Yoast SEO og naviger til Verktøy-siden under SEO-menyen.
• Her kan du se robots.txt-filen for din nettside/blogg.
• Hvis du ikke har en robots.txt-fil, klikker du på knappen Opprett robots.txt-fil for å opprette en.

Hvis du ikke ser et alternativ for filredigering, er det fordi du har styrket WordPress-sikkerheten din.Du kan aktivere filredigeringsalternativer ved å fjerne følgende linje fra wp-config.php-filen.

define('DISALLOW_FILE_EDIT', sant);

Din eksisterende Robot.txt-fil vil vises som:

Bruker agent: *

ikke tillatt: /

hvis du bruker  All in One SEO, i dashbordetÅpen"Funksjonsbehandler"side.Inne finner du en fil som heterRobots.txtAlternativer ,det erUnderDet er en åpenbar "aktivering"knappen for å sende inn Robots.txt.

Hva føler du omi WordPressRedigerrobots.txtHar du spørsmål?Gi oss beskjed i kommentarfeltet nedenfor!