Wat is Robot.txt?'n Volledige gids om die WordPress robots.txt-lêerinstellings te verstaan

Robot.txt is 'n kragtige hulpmiddel wanneer dit kom by jou webwerf SEO.Wanneer jy 'n plasing publiseer, deursoek soekenjin-bots jou werf vir indeksering.

Om te verseker dat jou webwerf of plasing hoog op die soekenjin-resultatebladsye (SERP's) rangskik, moet jy dit maklik maak vir soekenjin-“bots” om hul belangrikste bladsye te navigeer.goed gestruktureerrobots.txt Die lêers sal help om hierdie bots na die bladsye te stuur wat jy wil hê hulle moet indekseer.

Hierdie artikel hier verduidelikSEORobots.txt-lêer的belangrikheid, en hoe om 'n stuurrobot-txt-lêer vir WordPress-webwerf te skep?

Wat is WordPress Robot .txt?

'n Robots.txt-lêer (ook bekend as 'n Robot-uitsluitingsprotokol of -standaard) laat jou toe om soekenjins toegang tot sekere lêers en vouers te weier.Of vertel webbots (soekenjins) watter bladsye, plasings op jou werf moet deurkruis.

Die belangrikheid van jou Robots.txt-lêer vir jou SEO?

Soos vroeër genoem, vertel jou Robots.txt-lêer vir soekenjins watter bladsye om te besoek en watter bladsye om nie op jou werf te indekseer nie.Byvoorbeeld, as jy in jou Robots.txt-lêer spesifiseer dat jy nie wil hê dat soekenjins toegang tot jou terugvoerbladsy moet hê nie, sal die bladsy nie in soekresultate verskyn nie en webgebruikers sal dit nie kan vind nie.Om soekenjins te blokkeer om toegang tot sekere bladsye op jou werf te kry, is van kritieke belang vir jou webwerf se privaatheid en SEO.

Waar is die robots txt in WordPress?

Hierdie lêer is gewoonlik in die hoofmap van die webwerf geleë.Jy kan hierdie lêer bekyk deur met 'n FTP-kliënt aan jou werf te koppel.U kan ook die cPanel-lêerbestuurder gebruik om dit te doen.

Het ek robots.txt-lêer vir WordPress nodig?

By verstek stel WordPress die robots.txt-lêer op, maar dit kan glad nie vanaf enige gids verkry word nie.As jy dit egter wil verander, sal jy jou eie lêer moet skep en dit na jou wortellêerlêer moet oplaai as 'n plaasvervanger.

Hoe om 'n robot txt-lêer te skep?

Dit is baie maklik om 'n robot txt-lêer vir jou webwerf te skep

• Maak Notepad, Microsoft Word of enige teksredigeerder oop
• Stoor die lêer as "robot" (maak seker dat jy .txt as die lêertipe-uitbreiding kies)
• Voeg dan die volgende twee reëls teks by die lêer:

Gebruiker-agent: *
verbied:

"User-Agent" is 'n ander term vir 'n bot of soekenjinspinnekop.'n Asterisk (*) dui aan dat hierdie ry op alle spinnerakke van toepassing is.Hier word geen lêers of vouers op die "verbode" reël gelys nie, wat beteken dat elke gids op die webwerf toeganklik is.Dit is die basiese robottekslêer.

Om soekenjinspinnekoppe van die hele webwerf te blokkeer is ook een van die robots.txt-opsies.Om dit te doen, voeg hierdie twee reëls by die lêer:

Gebruiker-agent: *
verbied:/

As jy spinnekoppe in sekere areas van jou werf wil blokkeer, kan jou robots.txt soos volg lyk:

Gebruiker-agent: *
Verbode: /databasis/
Verbode: /scripts/

Die bogenoemde drie reëls vertel alle robotte om hulle nie toe te laat om toegang te verkry tot enigiets in die databasis en skrifte-gids of subgidse nie.

Let wel: Hou in gedagte dat die "verbied" reël slegs een lêer of gids kan gebruik.Jy kan soveel Disallow-lyne byvoeg as wat jy wil.

Maak seker dat jy die SEO-vriendelike XML-werfkaartlêer by die bots-tekslêer voeg.Dit sal verseker dat deurkruisers jou werfkaart kan vind en maklik alle bladsye van jou werf kan indekseer.Gebruik die volgende sintaksis:
Werfkaart: http://www.mydomain.com/sitemap.xml

Sodra jy klaar is, stoor die robots.txt-lêer en laai dit op na die wortelgids van jou webwerf.

www.mydomain.com/robots.txt.

Skep robots.txt-lêer met Yoast

SEO-inproppe soos Yoast het die opsie om robots.txt-lêers van binne die WordPress-kontroleskerm te skep en te redigeer.

• Installeer Yoast SEO en gaan na die Tools-bladsy onder die SEO-kieslys.
• Hier kan jy die robots.txt-lêer vir jou webwerf/blog sien.
• As jy nie 'n robots.txt-lêer het nie, klik die Skep robots.txt-lêer-knoppie om een ​​te skep.

As jy nie 'n opsie vir die lêerredigeerder sien nie, is dit omdat jy jou WordPress-sekuriteit opgeskerp het.Jy kan lêer redigering opsies aktiveer deur die volgende reël van die wp-config.php lêer te verwyder.

definieer ('DISALLOW_FILE_EDIT', waar);

Jou bestaande Robot.txt-lêer sal as volg verskyn:

Gebruiker-agent: *

nie toegelaat nie: /

as jy gebruik  Alles in een SEO, in die dashboardoop"Kenmerkbestuurder"bladsy.Binne, sal jy 'n lêer genaamd vindRobots.txtOpsies , syHieronderDaar is 'n duidelike "aktivering"knoppie om Robots.txt in te dien.

Hoe voel jy oorin WordPresswysigrobots.txtenige twyfel hê?Laat weet ons in die kommentaar afdeling hieronder!