145
Mnoho odborníků na SEO ve své praxi čelilo neochotě vyhledávačů indexovat konkrétní stránky webu, zatímco v 90% případů jsou příčiny těchto problémů banální: náhodné uzavření stránek v robotech.TXT, zákaz indexování prostřednictvím meta robots, nesprávné kánony a podobné možnosti.
Nestačí však jen najít a odstranit příčinu nesprávného indexování. Po jeho odstranění je nutné co nejdříve odeslat důležitý obsah k reindexaci a ujistit se, že web a stránky zájmu začaly být indexovány.
V tomto článku sdílíme všechny nalezené Možnosti indexování stránek ve vyhledávači Google.
Způsoby, jak urychlit indexování Google
1. Google Search Console (GSC)
Nejběžnější způsob indexování / opětovného indexování stránek v "manuálním" režimu je prostřednictvím panelu Webmaster Google.
Stránky jsou indexovány rychle (od několika sekund do vzhledu ve vyhledávání), ale práce probíhá v stránkovém režimu + potřebujete čas na skenování stránky vyhledávacím robotem, takže tato metoda je efektivní, ale ne nejpohodlnější, protože není možné stáhnout seznam ze skupiny URL najednou a odeslat do hromadného indexování.
2. Sitemap.xml
Použití XML Sitemap je klasická metoda pro urychlení indexování nových stránek. To se provádí zadáním hypertextového odkazu na soubor Sitemap Sitemap.xml v souboru Robots.txt (samozřejmě před tím musíte vytvořit samotný soubor Sitemap.xml).. Sitemap.xml »
To obvykle stačí pro jakýkoli typ webu.
Chcete - li vytvořit soubor Sitemap, existuje mnoho různých pluginů na populárních CMS, lze jej také vytvořit pomocí jednoho z webových nebo stolních prohledávačů, například prostřednictvím bezplatného Siteanalyzeru.. SiteAnalyzer »
3. Ping Sitemap.xml
Pinginging způsobí, že vyhledávací robot provede operativní přepojení vašeho Sitemap.xml. Toto je druh analogie přidání sitmapu do Google Search Console. Tímto způsobem posíláme společnosti Google další signál, že je třeba znovu použít soubor Sitemap ,což urychluje pravděpodobnost indexování stránek (nikoli však skutečnost, že je bot okamžitě roztrhne, aby je obešel).
Odkazy na ping na Webmap na Google a Bing:
- Google: http://google.com/webmasters/tools/ping?sitemap=https://site-analyzer.pro/sitemap.xml
- Bing: https://www.bing.com/ping?sitemap=https://site-analyzer.pro/sitemap.xml
4. Instalace přesměrování 301 ze stránek provozního webu
Toto řešení umožňuje částečně přenést statickou hmotnost a provoz z kvalitního webu na web, který vyžaduje větší pozornost vyhledávačů, nebo existují problémy s jeho indexováním.
Přesměrování jsem vložil ze stránky "zprávy" webu s dobrým provozem na podobnou stránku webu, která měla problémy s indexováním. Přesměrování bylo" zohledněno " společností Google již druhý den a stránka dárcovského webu zmizela z indexu Google.
Jakmile je stránka akceptorového webu indexována, přesměrování lze odstranit.
5. Odebrání webu z webmasteru Google a opětovné přidání webu
Myšlenkou bylo, aby vyhledávač obrátil" pozornost " na web a tím znovu prošel stránkami.
Experiment nefungoval, protože při opětovném přidání projektu se v něm okamžitě zobrazili roboti.txt a další dříve použitá nastavení-zjevně, když byl web odstraněn, jednoduše zmizel ze seznamu a poté, když byl znovu "přidán", byl znovu zobrazen.
6. Úplné uzavření webu z indexování
Zavřete web od Googlu v robotech.txt pro úplnou deindexaci.
V době testování visela v indexu" první " verze stránky s WWW a bez uložené kopie (mladý web). Na detekci aktualizované verze robotů.Google Txt trvalo 1-2 hodiny. Po 2 dnech zmizela z indexu jediná dříve indexovaná stránka. Na webu zbývá 0 stránek ve Vyhledávání Google.
Po úplné deindexaci byl robots otevřen.txt pro robota Google.
Soudě podle protokolů však bot šel jednou denně, takže jednou denně vstoupil a pokračoval. Celkově se frekvence návštěv na webu Bot Google nezměnila.
7. Přidání reklam do služby Google AdSense
Obvykle, pokud web není moderován v Google AdSense, pak se ve vašem osobním účtu objeví seznam možných důvodů, proč web nepřijali (kontrola trvá až dva týdny, trvalo mi to jeden a půl). Tyto informace mohou pomoci s identifikací příčin, které jsou s webem špatné.
Co se obecně stalo-web nebyl přijat s poznámkou "obsah s nízkým obsahem".
Myslím, že nízká úroveň indexování stránek byla spojena právě s tím. Ale přinejmenším jsme dostali víceméně rozumnou odpověď ,která by se mohla hodit jindy (například k určení sankcí uvalených na web).
8. Přeposílání přes Google Translate
Tato metoda je založena na předpokladu ,že" spuštěním " stránek prostřednictvím služeb Google jim věnujeme další pozornost vyhledávacím robotům.
Vložíme adresu URL webu do Překladače Google, klikneme na odkaz s překladem stránky, přejdeme prsty a doufáme v zázrak.
V mém případě se zázrak nestal.
9. Směrujeme provoz ze sociálních sítí a telegramů
Chcete-li urychlit indexování webu, můžete sdílet příspěvky na sociálních sítích (Twitter, Facebook, Linkedin atd.), nebo zveřejněním příspěvků na telegramu (ve skutečnosti je to stejné jako přilákání provozu ze sociálních sítí, ale dochází k tomu umístěním odkazů na web z reklamních příspěvků na tematických kanálech).
V současné době nejsou odkazy na sociální sítě indexovány vyhledávači a nepočítají se do hodnocení, takže tato možnost zrychlení indexování webu s největší pravděpodobností nebude účinná, může však na Web přilákat "živý" provoz, díky kterému se na něj vyhledávací roboti začnou častěji přihlašovat a indexovat více obsahu.
10. Provoz z kontextu
Vytváříme reklamní kampaně v Google AdWords a směrujeme provoz na přistávací stránky, abychom je rychleji indexovali, aby vyhledávací roboti častěji navštěvovali stránky webu, čímž se zvyšuje pravděpodobnost jejich indexování.
11. Kontrola optimalizace pro mobilní telefony v Google Search Console
Pomocí testovací stránky mobilní verze webu nasměrujte robota na nové stránky: https://search.google.com/test/mobile-friendly/result?id=28OJNYqIhMMT4grjojk-uw
Hypotéza, že zasláním dodatečného signálu společnosti Google k přepojení stránek webu prostřednictvím nástroje pro testování mobilní verze, opět upozorní web na větší pozornost. Není však jisté, že to přináší alespoň nějaký hmatatelný výsledek.
12. Provoz z Pinterestu
Pinterest je populární obsahová stránka na západě, takže je atraktivní nejen pro návštěvníky, ale také pro roboty vyhledávačů. Vyhledávací roboti na něm neustále "žijí", zejména Bot Google, takže jednoduchým vytvořením pinů můžete robota Google nasměrovat na stránky zájmu webu.
V mém případě to nepřineslo žádné výsledky.
13. Běh přes hromadné indexery založené na kartách prohlížeče Google Chrome
Pokud vím, pokud toto téma kdysi fungovalo (služba IndexGator a její analogy), je nyní naprosto mrtvá.
Ano, a podle protokolů serveru-po takovém indexování se robot na web nedostal.
14. Vytvoření Sitemap.txt
Soubor Sitemap.txt je zjednodušená verze Sitemap.xml. V zásadě je to stále stejný seznam adres URL webu, ale bez zadání dalších atributů (lastmod, priority, frequency).
https://mysite.com/
https://mysite.com/page-1/
https://mysite.com/page-2/
https://mysite.com/page-3/
https://mysite.com/page-4/
https://mysite.com/page-5/
Tato možnost je méně běžná než běžný Sitemap.xml, ale přesto při přidávání odkazu na něj v robotech.txt, roboti to začínají skenovat stejně ochotně jako běžný Sitemap.
15. Vnitřní přeřazení
Zrychlení indexování vložením odkazů na nové stránky webu ze stránek " hub " (stránky s vysokým provozem / hmotností).
Za tímto účelem se obvykle píše skript, který vezme balíčky neindexovaných odkazů z předem připraveného seznamu a umístí je na zvláště navštěvované stránky. Po indexování stránek je umístěn další blok odkazů atd. Indexování se kontroluje prostřednictvím různých služeb nebo prostřednictvím rozhraní Google Webmaster Tools API.
16. Budování vnější referenční hmoty
Google uznává, že stránky jsou důvěryhodné, pokud jsou propojeny z renomovaných webů.
Mít zpětné odkazy říká Googlu, že stránky jsou důležité a měly by být indexovány.
Tím, že budujete kvalitní externí referenční hmotu na propagované stránky a na web jako celek, můžete společnosti Google signalizovat, že tento web musí věnovat větší pozornost a častěji krást obsah.
17. Kreativní metoda pomocí Flickru (pouzdro Viktor Karpenko)
Vytvoříme si účet na foto hostingu Flickr, nahrajeme tam mnoho fotografií (tisíce, Nejlépe desítky tisíc) - fotografie není důležitá, odkud můžete dokonce použít jiné fotografické hostingy, Instagram atd.
Pod každou fotografii píšeme, že při použití fotografie musíte dát zpětný odkaz na web, který propagujete (nezapomeňte zmínit jeho adresu URL).
V důsledku toho můžete zdarma přijímat provoz a desítky odkazů měsíčně z dobrých webů a médií.
Poznámka. Příklad se týká spíše linkbuildingu, ale také umožňuje směrovat provoz na určité stránky vašeho webu a tím zlepšit jejich indexování.
18. Indexování pomocí Google Indexing API
Squeeze instrukce pro PHP od uživatele Mahmud:
- Zaregistrujeme servisní účet v Google Cloud, získáme přístupový klíč (soubor json), udělíme práva servisního účtu na cerchkonsol, povolíme API v Google Cloud.
- Vytvoříme skript v PHP, ze kterého bude Adresa URL přidána do indexu.
- Stáhnout z Github klienta pro práci s API: https://github.com/googleapis/google-api-php-client
- Kód pro dávkové přidávání dotazů:
require_once '/_google-api-php-client/vendor/autoload.php';
$client = new \Google_Client();
$client->setAuthConfig('/_google-api-php-client-php70/blablabla-777c77777777.json'); // path to json file received when creating a service account
$client->addScope('https://www.googleapis.com/auth/indexing');
$client->setUseBatch(true);
$service = new \Google_Service_Indexing($client);
$batch = $service->createBatch();
foreach ($links as $link) // URLs list
{
$postBody = new \Google_Service_Indexing_UrlNotification();
$postBody->setUrl($link);
$postBody->setType('URL_UPDATED');
$batch->add($service->urlNotifications->publish($postBody));
}
$results = $batch->execute();
print_r($results);
- V odpovědi $batch->execute() pošle pole podle počtu odkazů v požadavku (pokud má odpověď \Google\Service\Exception, pak kód 429 - překročení limitu, 403 - problémy s přístupovým klíčem nebo povolením api, 400 - zakřivená data).
- Odkaz na popis chyb: https://developers.google.com/search/apis/indexing-api/v3/core-errors?hl=ru#api-errors
- Nezapomeňte propojit účet API s konzolou Google + vystavit se vlastníkovi (vlastníkovi), jinak skript nebude fungovat (v poli bude chyba 404, že neexistuje přístup k indexování webu - Permission denied. Failed to verify the URL ownership).
Poznámka: psaní skriptu mi trvalo ~40 minut, včetně času na malé "roubíky" a googling chyb.
19. Blokování přístupu k botům Google (případ Vladimir Vershinin)
Všiml jsem si, že špatně přidané na jednom z projektů dokumenty do indexu Google. Točili se, špízy-všechno je k ničemu.
Z nepřímých důvodů se objevila hypotéza, že roboti nemohou získat nic ze zdrojů, protože jsou odříznuti na úrovni služby ochrany DDoS.
Přidali jsme seznam / ipranges / do služby ochrany proti DDoS whitelist 26.dne a již 27. jsme obdrželi +50k dokumentů v indexu a v současné době již +300K dokumentů v indexu za 15 dní.
Většina" létajících "dokumentů ležela v GSC jako " naskenovaná, ale dosud neindexovaná".
Odkaz na rozsah IP adres robotů Google: https://developers.google.com/search/apis/ipranges/googlebot.json
20. Napište Johnu Muellerovi
Tweetujte Johnovi Muellerovi, popište svůj problém, zkřížte prsty a počkejte na odpověď. Twitter »
V mém případě to nefungovalo, nikdo mi neodpověděl, v indexu se neobjevily žádné nové stránky. Zvláštní, samozřejmě, dobře a dobře.
Ale kdo ví, možná budete mít štěstí )
***
Zdá se, že již neexistují žádné známé možnosti zrychlení indexování nových i starých stránek. Pokud jsem však najednou něco zmeškal, Prosím, podělte se o své vlastní případy a příklady v komentářích - rád je doplním o článek.
P.S. IndexNow. Pro úplné pokrytí tématu stojí za zmínku relativně nová možnost hromadného indexování stránek prostřednictvím IndexNow (otevřené API s možností přidat do indexu vyhledávačů až 10 000 stránek denně). V současné době jsou podporovány vyhledávače Yandex a Bing. Je možné, že připojení vyhledávače Google k této technologii je hned za rohem, i když již nyní má technologie malou armádu kritiků, kteří vědí, zda se v budoucnu bude vyvíjet.
Ostatní články
