Швидкість обходу від Яндекса, яка загрожує вашому сайту

1. Як це сталося і що за швидкість обходу сайту?
2. Як забезпечити доступність мого сайту з урахуванням нових змін Яндекса і підключити CDN?

Яндекс опублікував в своєму блозі статтю про нові зміни в обробці директиви, яка регулює частоту обходу вашого сайту роботами. Мова про Crawl-delay. Нововведення загрожують несподіваними негативними наслідками майже для всіх сайтів, які покладалися на раніше задані правила для обходу свого сайту. Якщо раніше роботам Яндекса директивно заборонялося заходити на сайт, тепер Яндекс почав ігнорувати задані директиви і за замовчуванням надав своїм роботам необмежені можливості до частоти звернень до сайтів. Як це вплине на доступність вашого сайту і в чому небезпека для SEO і продажів вашого сайту або інтернет-магазину?

Нові зміни призвели до того, що роботи Яндекса стали ігнорувати налаштовані вами або вашими SEO-фахівцями настройки за рекомендованою частоті обходу сторінок вашого сайту. В результаті одна з найпопулярніших в Росії пошукових систем автоматично привласнила всім сайтам значення "" За замовчуванням ", через які до сайту може надходити безліч надмірно частих запитів від роботів, які кидають ваш сайт і роблять його недоступним для відвідувачів. Часта недоступність вашого сайту може негативно позначитися на пошуковій видачі. І вона точно позначиться на лояльності ваших клієнтів, які не змогли вчасно отримати потрібну інформацію або оформити покупку. Очевидно, що ви втрачаєте гроші.

Як це сталося і що за швидкість обходу сайту?

Пошукові системи часто оновлюють свої алгоритми по індексуванню сайтів і пошукової видачі. Більшість з них робиться для максимально швидкого оновлення сайтів, що відповідають запитам користувачів Яндекса. Однак благі наміри обертаються часто несподіваними наслідками. Тому вкрай важливо, щоб ваші маркетологи і SEO-фахівці були в курсі всіх останніх змін від Яндекса і Google. У Яндекс.Вебмастере з'явився новий інструмент "Швидкість обходу". Він доступний до зміни налаштувань з автоматичних на ручні в розділі «Індексування». З появою цього інструменту (лютий 2018 г.) Яндекс почав ігнорувати прописану на вашому сайті директиву Crawl-delay і тепер орієнтується тільки на ваші настройки в Яндекс.Вебмастере. В результаті багато владельции сайтів зіткнулися з тим, що сайти з незрозумілої причини стали часто недоступні. Запити в техпідтримку свого хостингу прояснили ситуацію, але не запропонували варіантів її вирішення в більшості своїй.

Пояснимо: значення, обиране Яндексом за замовчуванням, встановлює в Я.Вебмастере максимально можливу частоту обходу для кожного сайту, беручи до уваги (на свій розсуд) рівень максимально допустимих навантажень для вашого поточного сервера. Найчастіше це створює вкрай неприємні наслідки для власників сайтів та інтернет-магазинів. Роботи Яндекса починають звертатися надто часто, сервера не витримують навантаження і сайт падає. Падає досить регулярно. А кожне падіння сайту - це втрачені клієнти та знижується лояльність ваших відвідувачів. Адже якщо сайт не доступний, відвідувачі стають менш упевнені в надійності вашої компанії.

Як забезпечити доступність мого сайту з урахуванням нових змін Яндекса і підключити CDN?

Якщо у вас немає Яндекс.Вебмайстер, у вас є три варіанти:

• створити і налаштувати обліковий запис Яндекс.Вебмайстер (буде корисно, але не вирішить всі ваші проблеми з доступністю сайту і швидким завантаженням)
• змиритися з тим, що ваш сайт буде часто падати і може бути недоступний
• налаштувати CDN для вашого сайту , Щоб знизити навантаження на ваш хостинг і забезпечити доступність сайту

За допомогою в налаштуванні CDN звертайтеся до вашого менеджера в А25 або надішліть запит в нашу Службу турботи А25 .

Хочете бути спокійні за свій сайт?

Тарифи на підтримку сайту

Аудит сайту вартість

SEO аудит сайту