Google-де сайтты индекстеуді жеделдетудің 20 нұсқасы

Көптеген SEO мамандары өз тәжірибелерінде іздеу жүйелерінің сайттың белгілі бір беттерін индекстеуге құлықсыздығына тап болды, ал 90% жағдайда бұл мәселелердің себептері қарапайым: роботтардағы беттерді кездейсоқ жабу.txt, meta robots арқылы индекстеуге тыйым салу, дұрыс емес канониклдер және сол сияқтылар.

Алайда, дұрыс емес индекстеудің себебін табу және жою жеткіліксіз. Оны жойғаннан кейін маңызды мазмұнды мүмкіндігінше тезірек қайта индекстеуге жіберу керек және сайт пен қызығушылық парақтары индекстеле бастағанына көз жеткізу керек.

Бұл мақалада біз Google іздеу жүйесінде табылған барлық бетті индекстеу опцияларымен бөлісеміз.

Google-де индекстеуді жеделдету жолдары

1. Google Search Console (GSC)

Google вебмастер тақтасы арқылы "қолмен" режимде беттерді индекстеудің / қайта индекстеудің ең кең тараған әдісі.

Беттер тез индекстеледі (іздеуде пайда болғанға дейін бірнеше секунд), алайда жұмыс беттік режимде жүреді + іздеу ботымен бетті сканерлеуге уақыт қажет, сондықтан бұл әдіс тиімді, бірақ ең ыңғайлы емес, өйткені сіз списокl тобынан тізімді бірден жүктеп, жаппай индекстеуге жібере алмайсыз.

2. Sitemap.xml

XML сайт картасын пайдалану жаңа беттерді индекстеуді жеделдетудің классикалық әдісі болып табылады. Бұл сайт картасы файлына гиперсілтемені көрсету арқылы жүзеге асырылады.robots файлындағы xml.txt (әрине, бұған дейін Sitemap файлын жасау керек.xml).. Sitemap.xml »

Әдетте бұл сайттың кез-келген түрі үшін жеткілікті.

Сайт картасын жасау үшін танымал CMS-те көптеген түрлі плагиндер бар, оны веб - немесе жұмыс үстелі краулерлерінің бірімен жасауға болады, мысалы, тегін SiteAnalyzer арқылы.. SiteAnalyzer »

3. Sitemap Пингинг.xml

Пингинг іздеу роботын сіздің Sitemap-қа жедел ауысуға мәжбүр етеді.xml. Бұл Google Search Console-ге сайтмап қосудың өзіндік аналогы. Осылайша, біз Google-ге сайт картасын ауыстыру қажеттілігі туралы қосымша сигнал жібереміз, осылайша беттерді индекстеу ықтималдығын тездетеміз (бірақ бот оларды бірден айналып өтуге тырыспайды).

Сілтемелер Пингования Сайтмап Google және Bing:

• Google: http://google.com/webmasters/tools/ping?sitemap=https://site-analyzer.pro/sitemap.xml
• Bing: https://www.bing.com/ping?sitemap=https://site-analyzer.pro/sitemap.xml

4. Трафик сайтының беттерінен 301 қайта бағыттауды орнату

Бұл шешім статикалық салмақ пен трафикті сапалы Сайттан іздеу боттарына көбірек назар аударуды қажет ететін сайтқа ішінара ауыстыруға мүмкіндік береді немесе оны индекстеуде проблемалар бар.

Мен индекстеу проблемалары бар сайттың ұқсас бетіне жақсы трафигі бар сайттың "жаңалықтар" бетінен қайта бағыттадым. Қайта бағыттау екінші күні Google-да "ескерілді" және донорлық сайттың беті Google индексінен жоғалып кетті.

Акцептор сайтының беті индекстелгеннен кейін, қайта бағыттауды алып тастауға болады.

5. Google веб-шеберінен сайтты жою және сайтты қайта қосу

Идея іздеу жүйесінің сайтқа "назар аударуы" және сол арқылы қайтадан беттер арқылы өтуі болды.

Эксперимент жұмыс істемеді, өйткені жобаны қайта қосқан кезде ол бірден robots-ты көрсетті.txt және бұрын қолданылған басқа параметрлер-жойылған кезде сайт тізімнен жасырылған сияқты, содан кейін қайтадан "қосылған" кезде ол қайтадан көрсетілді.

6. Сайтты индекстеуден толық жабу

Біз веб-сайтты Google-ден robots-қа жабамыз.толық индекстеу үшін txt.

Тестілеу кезінде индексте www парағының "бірінші" нұсқасы ілулі болды және оның көшірмесі сақталмады (жас сайт). Роботтардың жаңартылған нұсқасын табу үшін.TXT Google-ге 1-2 сағат қажет болды. 2 күннен кейін индекстелген жалғыз бет индекстен жоғалып кетті. Сайтта Google іздеуде 0 бет қалды.

Толық индекстеуден кейін роботтар ашылды.Google ботына арналған txt.

Алайда, журналдарға қарағанда, бот күніне бір рет кіріп, күніне бір рет кіріп, жалғастырды. Жалпы алғанда, Google ботының сайтқа кіру жиілігі өзгерген жоқ.

7. Google AdSense-ке жарнама қосу

Әдетте, егер сайт Google AdSense-де модерациядан өтпесе, онда жеке кабинетте сайтты қабылдамаудың мүмкін себептерінің тізімі пайда болады (тексеру екі аптаға созылады, маған бір жарым уақыт кетті). Бұл ақпарат сайтта не дұрыс емес екенін анықтауға көмектеседі.

Жалпы, бұл орын алды-сайт "пайдалы емес мазмұн"белгісімен қабылданбады.

Менің ойымша, сайтты индекстеудің төмен деңгейі осыған байланысты емес. Бірақ, кем дегенде, біз азды-көпті түсіндірме жауап алдық, ол басқа уақытта пайдалы болуы мүмкін (мысалы, сайтқа салынған санкцияларды анықтау үшін).

8. Google Translate арқылы өту

Бұл әдіс Google қызметтері арқылы беттерді "қуып", біз оларға іздеу боттарына қосымша назар аударамыз деген болжамға негізделген.

Біз сайттың URL мекенжайын Google аудармашысына енгіземіз, парақтың аудармасымен сілтемеге өтіп, саусақтарымызды айқастырамыз және кереметке үміттенеміз.

Менің жағдайда керемет болған жоқ.

9. Біз трафикті әлеуметтік желілер мен Жеделхаттардан жібереміз

Сайтты индекстеуді жеделдету үшін Сіз әлеуметтік желілердегі жазбалармен бөлісе аласыз (Twitter, Facebook, Linkedin және т.б.) немесе Telegram-да хабарламалар орналастыру арқылы (іс жүзінде бұл әлеуметтік желілерден трафикті тарту сияқты, бірақ бұл сайтқа сілтемелерді жарнамалық хабарламалардан тақырыптық арналарға орналастыру арқылы жүзеге асырылады).

Қазіргі уақытта әлеуметтік желілерден сілтемелер іздеу жүйелерімен индекстелмейді және рейтингте ескерілмейді, сондықтан сайтты индекстеуді жеделдетудің бұл нұсқасы тиімді болмайды, алайда бұл сайтқа "тірі" трафикті тартуы мүмкін, соның арқасында іздеу боттары оған жиі кіріп, көбірек мазмұнды индекстей бастайды.

10. Контекстен Трафик

Біз Google AdWords-те жарнамалық науқандар жасаймыз және оларды тезірек индекстеу үшін трафикті қону беттеріне бағыттаймыз, осылайша іздеу боттары сайт беттеріне жиі кіріп, оларды индекстеу ықтималдығын арттырады.

11. Google Search Console-да мобильді оңтайландыруды тексеру

Біз сайттың мобильді нұсқасын тестілеу бетін ботқа жаңа беттер туралы көрсету үшін қолданамыз: https://search.google.com/test/mobile-friendly/result?id=28OJNYqIhMMT4grjojk-uw

Тағы да, Google-ге мобильді нұсқаны тексеру құралы арқылы сайт беттерін айналдыру үшін қосымша сигнал жіберу арқылы ол сайтқа мұқият назар аударады деген гипотеза. Алайда, бұл кем дегенде нақты нәтиже беретініне сенімді емеспін.

12. Pinterest-тен Трафик

Pinterest-батыста танымал мазмұн алаңы, бұл оны келушілер үшін ғана емес, сонымен қатар іздеу жүйесінің боттары үшін де тартымды етеді. Ол үнемі іздеу боттарын, әсіресе Google боттарын "мекендейді", сондықтан қарапайым түйреуіштер жасау арқылы сіз Google ботын сайттың қызықты беттеріне бағыттай аласыз.

Менің жағдайда бұл нәтиже бермеді.

13. Google Chrome браузерінің қойындыларына негізделген жаппай индексаторлар арқылы жүгіру

Менің білуімше, егер бұл тақырып бір кездері жұмыс істеген болса (IndexGator қызметі және оның әріптестері), қазір ол мүлдем өлі.

Ия, және сервердің журналдары бойынша-мұндай индекстеуден кейін Робот сайтқа кірмеді.

14. Sitemap Құру.txt

Sitemap Файлы.txt-sitemap сайт картасының жеңілдетілген Sitemap.xml. Бұл сайттың URL мекен-жайларының тізімі, бірақ қосымша атрибуттарды көрсетпестен (lastmod, priority, frequency).

https://mysite.com/
https://mysite.com/page-1/
https://mysite.com/page-2/
https://mysite.com/page-3/
https://mysite.com/page-4/
https://mysite.com/page-5/

Бұл опция әдеттегі Sitemap-қа қарағанда сирек кездеседі.xml, бірақ соған қарамастан, оған robots-қа сілтеме қосқанда.txt, боттар оны қарапайым Sitemap сияқты оңай сканерлей бастайды.

15. Ішкі байланыс

"Хаб" беттерінен (үлкен трафик / салмағы бар беттер) сайттың жаңа беттеріне сілтемелер қою арқылы индекстеуді жеделдету.

Әдетте бұл үшін сценарий жазылады, ол алдын-ала дайындалған тізімнен индекстелмеген сілтемелер пакеттерін алады және оларды арнайы кіретін беттерге орналастырады. Беттерді индекстегеннен кейін келесі сілтемелер блогы орналастырылады және т.б. Индекстеу әртүрлі Қызметтер арқылы немесе Google Webmaster Tools API арқылы тексеріледі.

16. Сыртқы сілтеме массасын құру

Google беттер беделді сайттардан сілтеме жасаса, сенімді екенін мойындайды.

Сілтемелердің болуы Google-ге беттердің маңызды екенін және оларды индекстеу керектігін айтады.

Осылайша, жарнамаланған беттерге және жалпы сайтқа жоғары сапалы сыртқы сілтеме массасын құра отырып, Google-ге осы сайтқа көбірек назар аудару және мазмұнды жиі ұрлау қажет екендігі туралы сигнал беруге болады.

17. Flickr көмегімен шығармашылық әдіс (Виктор Карпенкос)

Біз Flickr фотохостингінде аккаунт жасаймыз, онда көптеген фотосуреттерді жүктейміз (мыңдаған, жақсырақ ондаған мың) - біз фотосуретті қайдан алғанымыз маңызды емес, сіз басқа фотохостингтерді, Instagram және т. б.

Әр фотосуреттің астында біз фотосуретті пайдаланған кезде сіз жарнамалайтын сайтқа кері сілтеме қою керек деп жазамыз (оның URL мекен-жайын айтуды ұмытпаңыз).

Нәтижесінде жақсы сайттар мен бұқаралық ақпарат құралдарынан ай сайын трафик пен ондаған сілтемелерді тегін алуға болады.

Ескерту. Мысал сілтеме жасау туралы көбірек, сонымен қатар трафикті сіздің сайтыңыздың белгілі бір беттеріне бағыттауға және сол арқылы олардың индекстелуін жақсартуға мүмкіндік береді.

18. Google Indexing API көмегімен индекстеу

PHP үшін қысу нұсқаулары пайдаланушыдан Махмуд:

• Сервистік есептік жазбаны Google Cloud-қа тіркейміз, кіру кілтін (JSON файлы) аламыз, сервистік есептік жазбаның құқықтарын серчконсольге береміз, API-ді Google Cloud-қа қосамыз.
• Біз PHP-де сценарий жасаймыз, одан индекске URL мекен-жайы қосылады.
• API-мен жұмыс істеу үшін Github клиентімен жүктеңіз: https://github.com/googleapis/google-api-php-client
• Сұрауларды пакеттік қосуға арналған Код:

require_once '/_google-api-php-client/vendor/autoload.php';

$client = new \Google_Client();

$client->setAuthConfig('/_google-api-php-client-php70/blablabla-777c77777777.json'); // path to json file received when creating a service account

$client->addScope('https://www.googleapis.com/auth/indexing');

$client->setUseBatch(true);

$service = new \Google_Service_Indexing($client);

$batch = $service->createBatch();

foreach ($links as $link) // URLs list
{
  $postBody = new \Google_Service_Indexing_UrlNotification();
  $postBody->setUrl($link);
  $postBody->setType('URL_UPDATED');
  $batch->add($service->urlNotifications->publish($postBody));
}

$results = $batch->execute();

print_r($results);

• Жауап ретінде $batch->execute() сұраудағы сілтемелер саны бойынша массив жібереді (егер жауапта \Google\Service\Exception болса, онда 429 коды шектен асып кетеді, 403 - кіру кілтімен немесе api қосумен байланысты мәселелер, 400 - қисық деректер).
• Қате сипаттамасына сілтеме: https://developers.google.com/search/apis/indexing-api/v3/core-errors?hl=ru#api-errors
• API есептік жазбасын Google консолімен байланыстыруды ұмытпаңыз + өзіңізді иесі ретінде көрсетіңіз (Owner), әйтпесе сценарий жұмыс істемейді (массивте 404 қатесі пайда болады, бұл сайтты индекстеуге рұқсат жоқ - permission denied. Failed to verify the URL ownership).

Ескерту: сценарийді жазу үшін маған ~40 минут қажет болды, оның ішінде кішкене "штепсельдер" мен қателерді іздеу уақыты.

19. Google ботына кіруді бұғаттау (Vladimir Vershinin корпусы)

Google боттарының IP мекенжайларының ауқымына сілтеме: https://developers.google.com/search/apis/ipranges/googlebot.json

20. Джон Мюллерге Хат Жазыңыз

Джон Мюллерге Твиттер жазыңыз, проблемаңызды сипаттаңыз, саусақтарыңызды айқастырыңыз және жауап күтіңіз. Twitter »

Менің жағдайда бұл жұмыс істемеді, маған ешкім жауап бермеді, индексте жаңа беттер пайда болмады. Біртүрлі, әрине, жарайды.

Бірақ кім біледі, сізде сәттілік болуы мүмкін )

***

Жаңа және ескі беттерді индекстеуді жеделдетудің белгілі нұсқалары қалмаған сияқты. Алайда, егер Мен кенеттен бірдеңені жіберіп алсам, түсініктемелерде өз кейстеріммен және мысалдарыммен бөлісуді сұраймын - олармен мақаланы қуана толықтырамын.

P.S. IndexNow. Тақырыпты толық қамту үшін IndexNow арқылы беттерді жаппай индекстеудің салыстырмалы түрде жаңа мүмкіндігін атап өткен жөн (іздеу жүйесінің индексіне күніне 10 000 бетке дейін қосу мүмкіндігі бар ашық API). Қазіргі уақытта Яндекс және Bing іздеу жүйелеріне қолдау көрсетіледі. Google іздеу жүйесінің осы технологияға қосылуы жақын жерде болуы мүмкін, дегенмен, егер технология қазірдің өзінде сыншылардың шағын армиясына ие болса, оның болашақта дамитынын кім біледі.

Басқа мақалалар

• Шолу жаңа нұсқасын SiteAnalyzer 2.8
• SiteAnalyzer: ішкі PageRank есептеу принциптері
• BatchUniqueChecker