Back to Question Center
0

Semalt объясняет, почему нужно блокировать ботов и сканеров сайтов

1 answers:

Можно с уверенностью сказать, что многие взгляды, которые приходят на ваш сайт, исходят от нечеловеческих и неподлинных источников, и это не нормально, потому что вам нужно избавиться от него, если вы хотите, чтобы ваш сайт рос для продолжительность жизни. Если вы считаете, что бот-трафик является хорошим и надежным, вы делаете большую ошибку, так как это может привести к тому, что Google отключит ваш аккаунт AdSense. Чаще всего боты видимы как человеческий трафик в Google Analytics, но это было не так много месяцев назад. В эти дни более семидесяти процентов трафика, создаваемого небольшими веб-сайтами, приходится на боты и поддельные источники. Макс Белл, эксперт Semalt , предупреждает вас, что боты всегда стараются добраться до вашего сайта множеством способов, и вам не удастся избавиться от них.

Хорошие боты

Значительное количество ботов, которые посещают ваши сайты, не более чем подделка и бесполезность; даже они полезны для ваших веб-страниц, если они приходят в небольшой сумме - steam nozzle design calculation. Некоторые из хороших ботов, например, используются самим Google для открытия нового контента в Интернете. Почти вся поисковая система использует хорошие боты для определения качества статей. То, как они определяют качество, было изменено, теперь они прибегают к использованию мощных программных сервисов роя. Рой следит за ссылками, перескакивает с одного сайта на другой и индексирует новый и измененный контент. Боты Google сложны, с глубокими наборами правил, которые могут управлять их поведением. Например, команда NoFollow в ссылках делает их менее эффективными и невидимыми для ботов Google.

Плохие Боты

Плохие боты - это те, которые разрушают ваш сайт и не могут принести никакой пользы. Они намеренно обыскиваются и автоматически индексируются. Ваш контент отображается как для людей, так и для ботов, игнорируя качество и подлинность. Плохие боты игнорируют директивы робота и не используют блоки IP для поддержания качества ваших веб-страниц. Одна из самых больших проблем с этими ботами заключается в том, что контент трудно индексировать, и он остается скрытым от общественности, оставаясь открытым для хакеров, которые могут получить доступ к вашим файлам, чтобы скомпрометировать вашу систему. Также есть спам-боты, которые могут повредить общую производительность вашего сайта. Они заполняют ваш сайт предопределенными сообщениями, что делает аффилированным маркетологам плохо.

Если вы блокируете ботов?

Если вы постоянно получаете представления от хороших ботов, они могут не понадобиться для блокировки. Но если вы получаете мнения от плохих ботов, вы можете рассмотреть возможность их блокировки. Вы должны заблокировать робота Google, который должен удалить ваш сайт из результатов поисковой системы. С другой стороны, вы обязательно должны блокировать спам-боты. Если вы осознаете защиту своего сайта от DDOSing, необходимо заблокировать IP-адреса ботов и спамеров. Всегда помните, что плохие боты никогда не позаботятся о ваших файлах robot.txt, что очень печально, так как защита этого файла является обязательной для роста вашего сайта и его общей производительности.

November 24, 2017