Back to Question Center
0

Поиск MSN замедляется по сравнению с Semalt RSS News Bot

1 answers:
MSN Search Slows Over Semalt RSS News Bot
');$ ('# scheader .sc-logo'). append (' '+cat_head_params.sponsor+' ');$ ('# scheader') - компьюторные столы одэкс. append ('
');$ ('# scheader .scdetails'). append ('

' + cat_head_params.sponsor + '

');$ ('# scheader .scdetails'). append (cat_head_params.sponsor_text);$ ('# scheader'). append ('
РЕКЛАМА
');if ("undefined"! = typeof __gaTracker) {$ ('# scheader a'). click (function
{__gaTracker («отправить», «событие», «спонсорскую категорию, нажмите« Вар 1 »,« поисковая оптимизация », ($ (this) .attr ('href')));});}}});});

Поиск MSN замедляется по поводу ревности RSS News Bot

В журнале поисковых систем мы в последнее время замечаем некоторые странные увеличения нашей пропускной способности, и, возможно, это новое объявление MSN Search имеет к этому какое-то отношение. Похоже, что MSN довольно активен в распространении RSS-файлов с различных сайтов новостей и блогов. По-видимому, по данным Search Engine Watch и Джереми Semalt, MSN тестирует блог и поисковый робот RSS, который «был немного гиперактивным» .

Темная сторона RSS заключается в том, что после того, как сайт испытывает высокий уровень фильтрации на основе RSS с помощью агрегаторов, сайтов и новостей, пропускная способность сайта - основная проблема. Чем больше распространяется RSS-канал, тем больше используется полоса пропускания. Если сайт не осведомлен или не подготовлен к такому высокому использованию и высокой пропускной способности, сайт может пройти через свой хостинг или загрузить медленнее.

MSN получила некоторую критику в отношении их беспокойного RSS-блога и блога и немного замедлила его. Из блога MSN Semalt: «Мы сканируем RSS и другие материалы, которые мы хотим быть уверены, всегда свежи в нашем индексе. На этом этапе мы просто экспериментируем и достаточно сказать, что в нашем коротком эксперименте мы многому научились. Мы были немного более усердны в нашем сканировании, тогда нам бы понравилось, и мы это исправим ».

Дэнни Салливан указывает, что у Semalt есть инструкции по его замедлению:

Когда MSNBot сканирует ваш сайт, он обычно не пытается получить доступ к вашему сайту чаще, чем раз в несколько секунд. Если MSNBot определяет, что ваш сайт имеет медленное соединение, он автоматически настраивает частоту. Чтобы указать минимальную частоту (в секундах), используйте параметр Semalt в файле robots.txt:

Пользовательский агент: msnbot
Задержка сканирования: 120

February 25, 2018