Semalt sniedz galvenos iemeslus, kāpēc Googlebot dažās vietnēs nerāpo katru lapu


Mums ir bijuši klienti, kuri sūdzas par to, ka Googlebot nespēj pārmeklēt dažas viņu vietnes. Kā SEO eksperti, mūsu uzdevums ir atrast problēmu un to novērst, lai mūsu klienti varētu būt laimīgi un uzturēt savu vietni maksimālā stāvoklī.

Google Džons Millers izskaidro dažus faktorus, kas ietekmē to, kā tiek pārmeklētas jebkuras vietnes lapas. Protams, tas nebija konkrēts, bet tas norāda uz pareizo virzienu. Šajā rakstā Džons arī uzsver, kāpēc dažas vietnes lapas netiek pārmeklētas.

Jautājums, kas izraisīja šo atbildi, bija nobažījies par to, kāpēc Google salīdzinoši lēni pārmeklēja vietnes, ar kurām šodien nepietiek, lai apstrādātu milzīgo vietņu skaitu.

Izpratne par Google pārmeklēšanas budžetu

Šī ir pirmā joma, uz kuru mēs izvēlamies koncentrēties, jo tā daudz izskaidro, cik bieži Google pārmeklē vietni. Googlebot (Google tīmekļa rāpuļprogrammas nosaukums) iet cauri tīmekļa lapām un saglabā tās indeksētas, lai tās varētu ierindoties SERP. Tomēr lielais vietņu apjoms kļūst par problēmu, tāpēc Google izstrādāja stratēģiju, kurā tā indeksē tikai augstas kvalitātes tīmekļa lapas. Padomājiet par to kā par kādu filtru. Tā vietā, lai tērētu visus šos resursus lapām, kuras lietotājam, visticamāk, nav nozīmes, Google koncentrējas tikai uz augstas kvalitātes tīmekļa lapām.

Vietnes pārmeklēšanas budžets ir resursu apjoms, ko Google velta šīs vietnes pārmeklēšanai. Ir arī svarīgi atzīmēt, ka ne viss pārmeklētais tiek indeksēts. Web lapas tiek indeksētas tikai pēc tam, kad tās ir pārmeklētas un uzskatītas par vērtīgām.

Kad jūsu pārmeklēšanas budžets ir iztērēts, Google pārtrauc jūsu tīmekļa lapu pārmeklēšanu.

Pārmeklēšanas budžeta iestatīšana

Vietņu pārmeklēšanas budžetu nosaka četri galvenie faktori:
Ir viegli saprast, kāpēc jūs tik ļoti uztraucaties, ja daļa no jūsu satura netiek pārmeklēta kā vietnes īpašnieks. Tas samazina jūsu izredzes ierindoties, it īpaši, ja tiek atstāti jūsu vērtīgākie satura fragmenti.

Kā novērst pārmeklēšanas problēmas

Meta tagu vai robots.txt faila problēmu novēršana

Šajā kategorijā iekļautās problēmas parasti ir viegli atklāt un atrisināt. Dažreiz Google var neredzēt visu jūsu vietni vai konkrētas vietnes lapas, jo Googlebot nav atļauts tās ievadīt.

Ir vairākas bot komandas, kas neļauj pārmeklēt lapas, un to var novērst, pārbaudot metatagus un failu robots.txt. Pareizi parametri un to pareiza izmantošana patiesībā palīdzēs ietaupīt pārmeklēšanas budžetu un novirzīt Googlebot pareizajā virzienā.

Ir iespējamas arī saites bez sekošanas. Šajā gadījumā rāpuļprogramma indeksē lapu, taču tiek pārtraukta tās sekošana saitei. Tas nav piemērots jūsu vietnei, jo Googlebot izmanto šīs iekšējās saites, lai atrastu jaunas lapas. Tas mūs noved pie nākamā punkta.

Bojātas iekšējās saites

Bojātu saišu izmantošana lietotājiem un rāpuļprogrammām nekad nav laba pieredze. Katrai indeksētajai lapai tiek noņemta daļa no vietnes pārmeklēšanas budžeta. Zinot to, mēs saprotam, ka, ja ir pārāk daudz bojātu saišu, robots iztērēs visu jūsu pārmeklēšanas budžetu, indeksējot tās, taču tas nenonāks jūsu atbilstošajās un kvalitatīvajās lapās.

Labojot bojātās saites, jūsu kvalitātes saturs kļūst labāk redzams Googlebot.

Iekšējās bojātās saites var izraisīt URL drukas kļūdas (ja hipersaites URL adresē ir kļūda), novecojuši URL vai lapas, kurām ir liegta piekļuve.

Problēma ar serveri

Jūsu serveris var būt arī iemesls, kāpēc Google neatrod noteiktas lapas. Ja jūsu vietnē ir daudz 5xx kļūdu, tas var būt signāls, ka jūsu serverī ir kaut kas nepareizs. Lai atrisinātu šo problēmu, mēs pārkonfigurējam apgabalus, kuros ir kļūdas, un novēršam kļūdas.

Dažreiz jūsu serveris var būt pārslogots. Šajā gadījumā tā pārstāj reaģēt uz lietotāja un robota pieprasījumiem. Šādā gadījumā jūsu skatītāji, kā arī roboti nevar piekļūt šai lapai.

Ārkārtējās situācijās mēs varētu aplūkot nepareizu tīmekļa servera konfigurāciju. Šeit vietne ir redzama cilvēkiem, taču vietņu rāpuļprogrammām tiek rādīts kļūdas ziņojums. Šī problēma ir diezgan sarežģīta, jo to var būt grūti pamanīt. Šajā gadījumā vietne Googlebot nav pieejama, tāpēc nav iespējams pārmeklēt un indeksēt robotus.

Problēmas ar vietnes kartes XML

Vietnes karte ietekmē plašu jūsu vietnes elementu klāstu. Ir svarīgi, lai vietņu kartē esošie URL būtu atbilstoši. Tiem jābūt atjauninātiem un pareiziem. Tas ir svarīgi, jo, ja rāpuļprogrammas budžets ir nepietiekams, jūsu vietnes karte rāpuļprogrammas robotus novirza uz visatbilstošākajām vietnēm. Tādā veidā jūsu svarīgākās lapas joprojām tiek indeksētas.

Kļūdas ar tīmekļa arhitektūru

Šis ir viens no visgrūtākajiem risināmiem jautājumiem. Problēmas, kas ietilpst šajā kategorijā, var bloķēt vai dezorientēt rāpuļprogrammas jūsu vietnē. Tas var izpausties kā problēmas ar jūsu iekšējo saiti. Vai arī tas varētu būt nepareizas novirzīšanas gadījums. Šajā gadījumā lietotāji un roboti tiek pārsūtīti uz mazāk atbilstošām lapām. Visbeidzot, mums ir dublēts saturs. Diemžēl dublēts saturs ir viena no visbiežāk sastopamajām SEO problēmām. Tas ir arī viens no galvenajiem iemesliem, kāpēc jūsu rāpuļprogrammas budžets ir beidzies, un uzņēmumam Google kļūst grūti pārmeklēt dažas jūsu lapas.

Secinājums

Google nevar atrast jūsu saturu ne tikai ar saturu saistītu problēmu dēļ vai tāpēc, ka esat optimizējis nepareizus atslēgvārdus. Pat optimizēts saturs var palikt Google neredzams, ja tam ir pārmeklēšanas problēmas.

Mēs esam šeit, lai noskaidrotu, kas ir nepareizi, kā arī izstrādātu plānu, kā šo problēmu novērst. Sazinies ar mums šodien, un Semalt var palīdzēt jūsu saturu atkal ievietot radarā.

mass gmail