Apakah Robot.txt?Panduan lengkap untuk memahami tetapan fail robots.txt WordPress

Robot.txt ialah alat yang berkuasa apabila ia berkaitan dengan SEO tapak web anda.Apabila anda menerbitkan siaran, bot enjin carian merangkak tapak anda untuk pengindeksan.

Untuk memastikan tapak web atau siaran anda mendapat kedudukan tinggi dalam Halaman Hasil Enjin Carian (SERP), anda perlu memudahkan "bot" enjin carian untuk menavigasi halaman terpenting mereka.tersusun dengan baikrobots.txt Fail akan membantu mengarahkan bot ini ke halaman yang anda mahu mereka indeks.

Artikel ini di sini menerangkanSEOFail Robots.txtDaripadakepentingan, dan bagaimana untuk membuat menghantar fail txt robot untuk tapak WordPress?

Apakah WordPress Robot .txt?

Fail robots.txt (juga dikenali sebagai Protokol Pengecualian Robot atau Standard) membolehkan anda menafikan akses enjin carian kepada fail dan folder tertentu.Atau beritahu bot web (enjin carian) halaman, siaran di tapak anda untuk dirangkak.

Kepentingan Fail Robots.txt Anda untuk SEO Anda?

Seperti yang dinyatakan sebelum ini, fail Robots.txt anda memberitahu enjin carian halaman yang hendak dilawati dan halaman yang tidak diindeks di tapak anda.Contohnya, jika anda menyatakan dalam fail Robots.txt anda bahawa anda tidak mahu enjin carian boleh mengakses halaman maklum balas anda, halaman itu tidak akan muncul dalam hasil carian dan pengguna web tidak akan dapat menemuinya.Menyekat enjin carian daripada mengakses halaman tertentu di tapak anda adalah penting untuk privasi tapak web anda dan SEO.

Di manakah robot txt dalam WordPress?

Fail ini biasanya terletak dalam folder akar tapak.Anda boleh melihat fail ini dengan menyambung ke tapak anda menggunakan klien FTP.Anda juga boleh menggunakan pengurus fail cPanel untuk melakukan ini.

Adakah saya memerlukan fail robots.txt untuk WordPress?

Secara lalai, WordPress menyediakan fail robots.txt, tetapi ia tidak boleh diakses daripada mana-mana direktori sama sekali.Walau bagaimanapun, jika anda ingin menukarnya, anda perlu mencipta fail anda sendiri dan memuat naiknya ke folder akar anda sebagai pengganti.

Bagaimana untuk membuat fail txt robot?

Sangat mudah untuk mencipta fail txt robot untuk tapak web anda

• Buka Notepad, Microsoft Word atau mana-mana penyunting teks
• Simpan fail sebagai "robot" (pastikan untuk memilih .txt sebagai sambungan jenis fail)
• Seterusnya, tambahkan dua baris teks berikut pada fail:

Ejen Pengguna: *
melarang:

"Ejen Pengguna" ialah istilah lain untuk bot atau labah-labah enjin carian.Asterisk (*) menunjukkan bahawa baris ini digunakan untuk semua sarang labah-labah.Di sini, tiada fail atau folder disenaraikan pada baris "dilarang", yang bermaksud bahawa setiap direktori di tapak boleh diakses.Ini ialah fail teks robot asas.

Menyekat labah-labah enjin carian dari keseluruhan tapak juga merupakan salah satu pilihan robots.txt.Untuk melakukan ini, tambahkan dua baris ini pada fail:

Ejen Pengguna: *
melarang:/

Jika anda ingin menyekat labah-labah di kawasan tertentu tapak anda, robots.txt anda mungkin kelihatan seperti ini:

Ejen Pengguna: *
Dilarang: /database/
Dilarang: /skrip/

Tiga baris di atas memberitahu semua robot untuk tidak membenarkan mereka mengakses apa-apa dalam pangkalan data dan direktori skrip atau subdirektori.

Nota: Perlu diingat bahawa baris "larang" hanya boleh menggunakan satu fail atau folder.Anda boleh menambah seberapa banyak baris Disallow yang anda mahu.

Pastikan anda menambah fail peta laman XML mesra SEO pada fail teks bot.Ini akan memastikan bahawa perangkak boleh mencari peta laman anda dan mengindeks semua halaman tapak anda dengan mudah.Gunakan sintaks berikut:
Peta laman: http://www.mydomain.com/sitemap.xml

Setelah selesai, simpan fail robots.txt dan muat naik ke direktori akar tapak web anda.

www.mydomain.com/robots.txt.

Buat fail robots.txt dengan Yoast

Pemalam SEO seperti Yoast mempunyai pilihan untuk mencipta dan mengedit fail robots.txt dari dalam papan pemuka WordPress.

• Pasang Yoast SEO dan navigasi ke halaman Alat di bawah menu SEO.
• Di sini anda boleh melihat fail robots.txt untuk tapak web/blog anda.
• Jika anda tidak mempunyai fail robots.txt, klik butang Buat fail robots.txt untuk menciptanya.

Jika anda tidak melihat pilihan untuk editor fail, ini kerana anda telah meningkatkan keselamatan WordPress anda.Anda boleh mendayakan pilihan penyuntingan fail dengan mengalih keluar baris berikut daripada fail wp-config.php.

define('DISALLOW_FILE_EDIT', benar);

Fail Robot.txt sedia ada anda akan dipaparkan sebagai:

Ejen Pengguna: *

tidak dibenarkan: /

jika anda menggunakan  All in One SEO, dalam papan pemukaBuka"Pengurus Ciri"halaman.Di dalam, anda akan menemui fail yang dipanggilrobots.txtPilihan , iaDi bawah iniAda yang jelas"pengaktifan"butang untuk menyerahkan Robots.txt.

Bagaimana anda rasa tentangdalam WordPressEditrobots.txtAda sebarang pertanyaan?Beritahu kami di bahagian komen di bawah!