Apakah bajet merangkak?

Satu istilah yang banyak disebutkan hari ini dalam komuniti SEO adalah bajet merangkak. Jika kami menerjemahkannya, ia akan dibaca sebagai "tracking budget". Ia adalah tanah pertengahan yang jarang berlaku, tetapi ini adalah konsep yang sangat lama di kawasan SEO.

Mereka yang bekerja dengan projek berskala besar seperti e-dagang besar, portal kandungan, dan pakar SEO, memahami anggaran merangkak sebagai masa yang Google membelanjakan untuk membaca laman web anda pada hari tertentu.

Indeks kandungan

Ia adalah masa yang diambil oleh perayap Google untuk membaca halaman laman web. Tapi kali ini crawler yang menghabiskan di laman web anda bergantung pada beberapa faktor; seperti pihak berkuasa laman web, peratusan kandungan pendua, kesilapan halaman dan banyak lagi.

Bagaimanapun, menurut blog webmaster rasmi Google, dinyatakan bahawa tidak semua orang harus prihatin tentang masalah anggaran perayapan ini. Maksudnya, jika mereka mempunyai laman web dengan beberapa puluh halaman, tidak perlu risau tentang isu ini merangkak halaman, seperti Google akan melakukannya tanpa halangan.

Tetapi jika anda mempunyai kedai dalam talian atau mana-mana projek web lain dengan beberapa ribu halaman, anda perlu memberi perhatian dan mengoptimumkan anggaran merangkak mengenai laman web anda.

Anggarkan bajet dan kedudukan web

Dari Google, mereka mengesahkan bahawa belanjawan merangkak tidak mempengaruhi kedudukan, namun itu dapat mempengaruhi, dan kadang-kadang mengawal, negatif yang lain dari lebih dari 200 faktor yang berpangkat dalam enjin carian.

Tetapi mengapa kita mahu Google merangkak laman web kami lebih banyak kali? Di sisi lain, kami mendapati beberapa pakar SEO yang memastikan bahawa mempunyai bajet merangkak yang baik akan meningkatkan kedudukan keseluruhan halaman laman web dalam ranking dan dengan demikian meningkatkan lalu lintas organik.

Pada dasarnya, Google mempunyai masa yang tertentu untuk dibelanjakan dalam laman web anda, kerana ia harus memutuskan berapa banyak masa yang akan dibelanjakan untuk setiap laman web di seluruh dunia, yang mana ia akan perlu untuk mengira berapa banyak sambungan serentak yang akan dapat dibuat untuk dapat baca halaman laman web anda.

Kualiti laman web

Google meluangkan masa untuk dapat menyambung di laman web, membaca halaman ini dan hentikan bacaan ini. Ulangi ini sepanjang hari, tetapi selalu ada sebahagian kecil masa. Fraksi masa itu, biasanya berkadar dengan kuasa laman web anda, bilangan halaman baru, dan perkaitannya terhadap Google.

Ini diberikan oleh kualiti kandungan anda dan pautan yang menunjuk ke laman web, iaitu, jika anda mempunyai banyak petunjuk kualiti yang menunjuk, mungkin Google memahami anda dengan lebih banyak kualiti dan menghabiskan lebih banyak masa di laman web anda, asalkan ada jumlah halaman yang lebih tinggi.

Secara umum, belanjawan merangkak tidak banyak berubah untuk tapak halaman 10, 50 atau 100, jadi dalam beberapa halaman tidak banyak perbezaan. Tetapi untuk laman web yang besar, jika Google mempunyai yang kedua untuk pergi ke laman web anda dan anda memberitahu apa yang harus dibaca, itu akan sangat berguna bagi crawler, menyelesaikan tugas merayap mereka dengan lebih cepat.

Tetapkan yang merupakan halaman penting

Pertama, anda perlu memetakan maklumat seni bina laman web yang lebih teratur, mewujudkan halaman mana yang tidak diperlukan, dan tidak membiarkan halaman tertentu diindeks dengan memeriksa fail robots.txt.

Google tidak sepatutnya meluangkan masa di bahagian pencarian di laman web atau bahkan di bahagian di mana terdapat navigasi penapis, contohnya, seperti di kedai dalam talian, di mana anda boleh memilih saiz kasut, saiz apartmen atau warna baju. Penapis ini ialah orang yang biasanya memanggil "navigasi terdahulu" atau "penapis navigasi".

Sesetengah webmaster cenderung untuk menghalang penapis ini dan carian tersebut dalam fail robots.txt, supaya Google tidak meluangkan masa untuk membaca halaman-halaman ini, kerana, sebenarnya, mereka berfokus pada pengguna yang mencari pengalaman itu, dan mereka adalah kandungan yang sudah pun boleh didapati di halaman dalaman lain laman web ini.

Kami mengesyorkan membaca: Kesilapan untuk dielakkan ketika membuat laman web

Baris lain ialah dengan mewujudkan halaman penting laman web anda, anda dapat menjimatkan masa Google pada halaman yang mempunyai kandungan duplikat, seperti kasus navigasi yang dihadapi, halaman dasar privasi, syarat dan syarat, dan bukannya anda mahu mereka dibaca. Halaman ini hanya akan tersedia untuk pengguna yang ingin melihat halaman ini.

Masa tidak boleh disia-siakan di halaman nilai rendah ini, kerana anda tidak mahu pangkat untuk mereka dan mereka tidak membuat perbezaan paling sedikit dalam hidup anda, tetapi mereka perlu berada di sana kerana sesetengah pengguna ingin merujuk maklumat ini pula.

Bagaimana bajet merangkak berfungsi secara dalaman

Secara umum, bajet merangkak adalah berdasarkan kepada seni bina. Anda menentukan pautan ke halaman yang Google akan dapat membaca dan memprioritaskannya dengan tahap kepentingannya.

Lagipun, pautan yang keluar dari halaman ini adalah yang mungkin diprioritaskan oleh Google. Oleh itu, adalah wajar logik untuk berfikir dengan baik tentang menghubungkan dalaman dan cara halaman anda disusun.

Belanjawan merangkak adalah masa yang dibelanjakan oleh Google untuk dapat membaca, memahami maklumat di laman web dan menilai elemen seperti organisasi seni bina dan menyekat dalam robots.txt. Menggunakan tag nofollow pada pautan menghalang Google daripada mengikuti melalui pada pautan tersebut. Sebagai contoh, jika pautan mempunyai atribut nofollow, tetapi pautan dalaman lain tidak mempunyai satu halaman untuk mendapatkannya, maka Google akan mengambil jalan kedua, menjadikan anda menghabiskan sedikit masa.

Manfaat tapak yang dioptimumkan

Ada perkara yang akan membantu anda mempunyai lebih banyak halaman dibaca setiap hari, yang boleh berguna untuk laman web mana pun. Sebagai contoh, jika pelayan anda lebih cepat, Google akan, pada masa itu, meminta lebih banyak halaman.

Jika halaman anda dimampatkan, Google akan, dalam permintaan ini, meminta lebih banyak halaman. Dan jika anda mempunyai kod yang bersih dan mencukupi, Google juga akan menerima halaman yang lebih dimampatkan pada akhir hari, dengan bit yang lebih baik. Iaitu, pengoptimuman laman web, kelajuan laman web dan pelayan, sangat mempengaruhi isu anggaran merangkak.

Bagaimana untuk mengira bajet merangkak laman web anda

Bilangan kali bahawa labah-labah enjin carian Google merangkak laman web anda dalam peruntukan waktu tertentu yang kami panggil "merangkak bajet". Oleh itu, jika Googlebot melawat laman web anda sebanyak 32 kali sehari, kami dapat mengatakan bahawa anggaran penjejakan Google adalah sekitar 960 sebulan.

Anda boleh menggunakan alat seperti Google Search Console dan Alat Webmaster Bing untuk mengira anggaran anggaran merangkak laman web anda. Cukup log masuk dan tuju ke Penjejakan> Statistik Penjejakan untuk melihat purata bilangan halaman yang dikesan setiap hari.

Bajet bajet dan SEO: adakah mereka sama?

Ya dan tidak Walaupun kedua-dua jenis pengoptimuman bertujuan untuk menjadikan laman anda lebih jelas dan memberi kesan terhadap SERP anda, SEO memberikan penekanan yang lebih besar terhadap pengalaman pengguna, sementara pengoptimuman laba-laba adalah sama sekali mengenai menarik bot.

Pengoptimuman enjin carian (SEO) lebih tertumpu kepada proses pengoptimuman untuk pertanyaan pengguna. Sebaliknya, pengoptimuman Googlebot memberi tumpuan kepada bagaimana crawler Google mengakses laman web anda.

Bagaimana untuk mengoptimumkan bajet merangkak

Terdapat beberapa cara untuk mengoptimumkan belanjawan merangkak mana-mana laman web, bergantung kepada setiap projek web, bilangan halaman dan isu-isu lain, berikut adalah beberapa perkara yang perlu dipertimbangkan:

Pastikan halaman anda boleh dijejaki

Halaman anda boleh dikesan jika labah-labah enjin carian boleh mencari dan mengikuti pautan dalam laman web anda, jadi anda perlu mengkonfigurasi fail .htaccess dan robots.txt supaya mereka tidak menyekat halaman kritikal di laman web anda. Anda juga mungkin ingin menyediakan versi teks halaman yang sangat bergantung pada file media kaya, seperti Flash dan Silverlight.

Sudah tentu, sebaliknya adalah benar jika anda mahu mengelakkan halaman muncul dalam hasil carian. Walau bagaimanapun, menetapkan fail robots.txt untuk "tidak membenarkan" tidak mencukupi jika anda mahu mengelakkan halaman daripada diindeks. Menurut Google, peraturan "tidak membenarkan" tidak menjamin bahawa halaman tidak muncul dalam hasilnya.

Jika maklumat luaran (sebagai contoh, pautan masuk) terus mendorong lalu lintas ke halaman yang anda telah ditolak, Google boleh memutuskan bahawa halaman itu masih relevan. Dalam kes ini, anda mestilah secara manual menghalang pengindeksan halaman menggunakan tag meta noindex atau header HTTP X-Robots-Tag.

- Noeta meta tag: letakkan meta tag ini di bahagian halaman anda untuk menghalang kebanyakan crawler web daripada mengindeks laman anda:

noindex "/>

- X-Robots-Tag - Tempat yang berikut dalam respon header HTTP untuk mengarahkan perayap untuk tidak mengindeks laman:

X-Robots-Tag: noindex

Sila ambil perhatian bahawa jika anda menggunakan tag meta noindex atau Tag Robot X-Robot, anda tidak sepatutnya tidak membenarkan halaman dalam robots.txt. Halaman mesti dirangkak sebelum tag dilihat dan dipatuhi.

Berhati-hati menggunakan fail media yang kaya

Terdapat masa ketika Googlebot tidak dapat merangkak kandungan seperti JavaScript, Flash, dan HTML. Masa-masa itu telah lama berlalu (walaupun Googlebot masih mempunyai masalah dengan Silverlight dan beberapa fail lain).

Walau bagaimanapun, walaupun Google boleh membaca fail media yang paling kaya, enjin carian lain mungkin tidak dapat, yang bermaksud anda harus menggunakan fail ini dengan bijak, dan anda mungkin mahu mengelakkannya sepenuhnya pada halaman yang anda mahukan. kedudukan.

Elakkan mengalihkan rentetan

Setiap URL yang anda redirect menyebabkan anda membazirkan sedikit bajet merangkak anda. Apabila tapak web anda telah mengalihkan rentetan panjang, iaitu sejumlah besar pengalihan 301 dan 302 berturut-turut, adalah mungkin untuk labah-labah seperti Googlebot crash sebelum mencapai halaman arahan, yang bermaksud bahawa halaman tidak akan diindeks. Amalan terbaik dengan pelencongan adalah untuk mempunyai beberapa pelencongan yang mungkin di laman web, dan tidak lebih daripada dua berturut-turut.

Betulkan pautan yang rosak

Apabila John Mueller ditanya tentang sama ada pautan yang rosak mempengaruhi kedudukan atau tidak, beliau menjawab bahawa ia lebih tertumpu kepada pengalaman pengguna daripada untuk tujuan kedudukan.

Ini adalah salah satu perbezaan asas antara SEO dan pengoptimuman Googlebot, kerana ia bermakna bahawa pautan yang rosak tidak memainkan peranan yang besar dalam kedudukan, walaupun mereka sangat menghalang keupayaan Googlebot untuk mengindeks dan meletakkan laman web.

Dengan itu, anda harus mengikuti nasihat Mueller memandangkan algoritma Google telah bertambah baik sejak beberapa tahun lalu, dan apa pun yang mempengaruhi pengalaman pengguna mungkin akan mempengaruhi SERP.

Tetapkan parameter dalam URL dinamik

Labah-labah merawat URL dinamik yang membawa kepada halaman yang sama dengan halaman berasingan, yang bermaksud anda mungkin tidak perlu membazirkan anggaran perayapan anda. Anda boleh mengurus parameter URL dengan mengakses Konsol Carian dan mengklik Penjejakan> Parameter URL. Dari sini, anda boleh memaklumkan Googlebot jika CMS anda menambah parameter pada URL anda yang tidak mengubah kandungan halaman.

Bersihkan sitemap

Sitemap XML membantu kedua-dua pelawat dan robot labah-labah, menjadikan kandungan lebih teratur dan lebih mudah dicari. Oleh itu, cuba simpan laman web terkini dan bersihkan sebarang kekacauan yang boleh merosakkan kebolehgunaan laman web anda, termasuk 400 halaman peringkat, pengalihan yang tidak perlu, halaman bukan kanonik dan halaman yang disekat.

Cara paling mudah untuk membersihkan peta tapak adalah menggunakan alat seperti Juruaudit Laman Web. Anda boleh menggunakan penjana sitemap XML Juruaudit Laman Web untuk membuat sitemap bersih yang tidak termasuk semua halaman yang disekat dari pengindeksan. Selain itu, dengan pergi ke pilihan "Audit Tapak" anda boleh mencari dan membaiki kesilapan 4xx, 301 dan 302 pelencongan dan halaman bukan kanonik.

Menggunakan suapan

Kedua-dua suapan, RSS, XML dan Atom membenarkan kandungan dihantar kepada pengikut apabila mereka tidak melayari laman web. Ini membolehkan pengguna melanggan laman kegemaran mereka dan menerima kemas kini tetap setiap kali kandungan baru diterbitkan.

Sebagai tambahan kepada fakta bahawa suapan RSS telah lama menjadi cara yang baik untuk meningkatkan pembaca dan pertunangan, mereka juga merupakan antara laman web yang paling banyak dikunjungi oleh Googlebot. Apabila laman web anda menerima kemas kini (sebagai contoh, produk baru, catatan blog, kemas kini halaman, dll.), Hantar ke Google Feed Burner untuk memastikan ia diindeks dengan betul.

Buat pautan luaran

Bangunan pautan kekal sebagai topik hangat, dan tidak ada gambaran bahawa ia akan hilang dalam masa terdekat.

Menanam hubungan secara dalam talian, menemui komuniti baru, membina nilai jenama; Kemenangan kecil ini sepatutnya telah dicetak dalam proses perancangan pautan anda. Walaupun terdapat elemen tersendiri bagi bangunan pautan yang sekarang jadi 1990, keperluan manusia untuk berhubung dengan orang lain tidak akan berubah.

Pada masa ini, kami sudah mempunyai bukti bahawa pautan luar berkaitan dengan bilangan labah-labah yang dilihat oleh laman web anda.

Mengekalkan integriti penyambungan dalaman

Walaupun mewujudkan hubungan dalaman tidak memainkan peranan penting dalam kelajuan merangkak, itu tidak bermakna ia dapat diabaikan sepenuhnya. Struktur tapak yang dikendalikan dengan baik menjadikan kandungan anda mudah ditemui oleh robot carian tanpa membuang bajet anda.

Struktur pautan dalaman yang teratur juga boleh meningkatkan pengalaman pengguna, terutamanya jika pengguna boleh mencapai mana-mana kawasan laman web anda dalam tiga klik. Membuat semuanya lebih mudah diakses bermakna pengunjung akan bertahan lebih lama, yang boleh meningkatkan SERP.

Apakah kesimpulan yang kita buat?

Sekali lagi, memperkukuhkan apa yang telah disebutkan di atas, isu anggaran merangkak ini penting bagi laman web yang besar dengan beratus-ratus laman web yang beribu-ribu laman web, jika tidak, ia tidak perlu dibimbangkan, kerana Google akan menjejaki laman web dengan lancar.

Kita tidak boleh merumitkan merangkak halaman laman web kami ke Google. Terdapat banyak laman web yang mempunyai ralat yang cukup, dan bahkan dengan halangan yang dibuat oleh fail robots.txt dan sitemap.xml yang menghalang Google mengakses kandungan. Sekiranya kita ingin meningkatkan kedudukan dalam peringkat Google, maka kita perlu memberi kuasa dan memudahkan halaman laman web agar Google dapat mengakses, indeks dan kedudukan dengan cepat. Sangat mudah.

Sekarang, anda mungkin menyedari trend dalam artikel ini: Amalan terbaik untuk kebolehkesanan juga cenderung meningkatkan kebolehlihatan. Jadi, jika anda tertanya-tanya apakah pengoptimuman anggaran merangkak penting untuk laman web anda, jawapannya adalah ya.

Ringkasnya, jika anda memudahkan Google untuk mencari dan mengindeks laman web anda, anda akan menikmati lebih banyak perayapan, yang bermakna kemas kini yang lebih pantas apabila anda menyiarkan kandungan baru. Anda juga akan meningkatkan pengalaman keseluruhan pengguna, meningkatkan keterlihatan dan, akhirnya, kedudukan SERPs.

Ini hanya beberapa perkara, antara yang lain, untuk meningkatkan dan mengoptimumkan bajet merangkak sebuah laman web.