Основной тезис статьи: Если на одном с вами сервере находятся сайты компаний с похожей деятельностью или сайты с запрещенным контентом, то ваш сайт может пострадать.
Статья дополнена. Есть экспериментальные доказательства, что если вы делите хостинг с «плохими» сайтами (взрослый контент, запрещенная тематика, сайты распространяющие вирусы), то позиции в поиске будут ниже.
- Какие минусы общего хостинга?
- Что такое аффилиаты?
- Как поисковики относятся к аффилиатам?
- Как узнать IP сайта
- Как узнать сайты на одном IP
- Реальные примеры
- Доказательство, что плохое соседство вредит позициям
- Заключение
Хороший SEO оптимизатор проверяет, какие еще сайты находится с вами на одном сервере. Почему? Большинство компаний для своих сайтов используют виртуальный хостинг. Виртуальный хостинг отличается от настоящего сервера тем, что вместе с вами на одном физическом сервере находятся еще сотни или тысячи сайтов.
Какие бывают IP адреса
Это самый доступный вид хостинга, когда вы делите ресурсы одного сервера с другими компаниями. Вы наверняка используете именно такой.
Раз уж мой блог о продвижении сайтов, то сразу скажу, что я переводил сайты некоторых клиентов на выделенный IP и преимуществ в SEO никаких не получили, но это была не главная цель.
Какие минусы общего хостинга?
- Ресурсы сервера ограничены. Если какой-то сайт будет перегружен или подвержен атаке, то скорость и доступность вашего сайта пострадает.
- Если ваш сайт превысит разрешенную нагрузку, то вас могут отключить и заставить перейти на более дорогой тариф. В моей практике был хостинг, который сразу отключал сайт и присылал уведомление на почту. Обычно же, сначала несколько раз присылают предупреждение и потом отключают.
- Если кто-то рассылает спам и IP сервера попал в черный список, то ваши письма тоже перестанут доходить до адресатов.
- Опасное соседство. Если на вашем хостинге находится чья-то ссылочная ферма, дорвеи, сетка саттелитов, то вы можете пострадать «за компанию»
- Схожие компании. Если два похожих сайта находятся на одном IP-адресе, поисковые системы могут посчитать, что они принадлежат одной фирме.
Последнему пункту и я посветил эту статью. Насколько реально опасно такое соседство? Сначала разберемся с термином «аффилиат». Ведь если ваш сайт признали чьим-то аффилиатом, вы теряете посетителей.
Что такое аффилиаты?
Поддержка Яндекс не использует термин «аффилиат», но он используется сеошниками и стоит знать что это такое. Аффилиат — это сайт, который дублирует информацию основного сайта и/или принадлежит одному владельцу.
Зато, в справке Яндекса есть раздел «Некачественные сайты», в котором написано, какие сайты считаются некачественными. В том числе, это:
«Группы сайтов одного владельца/компании, предоставляющие пользователю одни и те же товары или услуги, созданные с целью заполнения нескольких позиций в результатах поиска и сбора трафика.»
Чем отличается белый и серый IP-адреса.
Да, есть компании, которые создают несколько сайтов в своей нише, чтобы занять несколько позиций и получить больше трафика. Поисковые системы с этим борятся и для честного большинства — это хорошо.
Если вы заметили у конкурента два сайта в поисковой выдаче, можете смело жаловаться. Яндекс любит такие жалобы, ниже скриншоты ответов из клуба Вебмастеров от представителя Яндекс:
Как же поисковые системы вычисляют аффиалиты или сайты одной компании? Признаков очень много
- самые простые: одинаковые телефоны, адрес, один владелец доменов, один IP и хостинг
- посложней: один логин для Метрики или Аналитикса, один рекламный аккунт, подключенные сервисы, одинаковые фото товаров, прайсы, одинаковый владелец фирм, регулярная работа с сайтами с одного компьютера
Хостинг и IP определить вообще не проблема. Значит, если на одном с вами IP находится сайт компании с похожей деятельностью, то вы можете попасть под подозрение. А если у вас еще и регион совпадает, то пиши пропало.
Как поисковики относятся к аффилиатам?
В худшем случае один из сайтов полностью исключают из результатов поиска, это бывает если сайт полностью копирует основной. Но чаще всего, такие сайты просто не показываются одновременно в результатах поиска по одинаковым запросам.
Если вы сделали для своей компании два одинаковых сайта, то при поиске по названию компании вы увидите только один из сайтов. Точно также с услугами и товарами — по каким-то запросам сайт конкурента будет показан вместо вашего или наоборот, но никак не одновременно, как должно быть.
Как узнать IP сайта
Прежде всего нужно узнать IP сайта. Это можно сделать с помощью сервисов или в командной строке.
Запустите командную строку (Windows + R) и введите CMD, либо просто найдите приложение «Командная строка» в меню Пуск.
В командной строке вводим: nslookup адрес-сайта
Но так смотреть дольше, чем воспользоваться каким-нибудь из сервисов:
- https://2ip.ru/whois/
- https://2whois.ru/?t=nslookup
- https://ip-calculator.ru/siteip/
Как узнать сайты на одном IP
Зная IP адрес, мы можем с помощью уже других сервисов, посмотреть какие еще сайты находятся на этом IP. Проблема в том, что многие из них платные, нужно регистрироваться и оформлять подписку. А бесплатные находят не все сайты.
Вот список пока-что рабочих и бесплатных:
- https://2ip.online/domain-list-by-ip/
- https://deltahost.ua/ip-check-service.html
Я же обычно пользуюсь другим способом с помощью поисковика Bing. Но в нем надо ввести какой-то текстовый запрос, чтобы он искал сайты по такому запросу. Для моих целей это как раз подходит, я не собираюсь просматривать каждый отдельный сайт, мне важно только определить наличие сайтов со взрослым контентом и спамеров.
Реальные примеры
Насколько всё это реально? Может ли быть такое, что на одном IP находятся сайты похожих компаний? А давайте возьмем и проверим.
Я беру первый попавшийся сайт автосервиса в Москве, смотрю его айпи-адрес с помощью сервиса 2whois.ru. Затем проверяю с помощью поисковой системы Bing какие сайты подходят под запрос «автосервис» и находятся на этом же IP адресе. У нас получилось на одном IP два автосервиса в Москве и два из СПб (другой регион не очень критично)
Затем проверим сайты по металлопрокату. Точно также беру любой сайт из выдачи Яндекса, узнаю IP адрес и проверяю в Bing. Опять несколько компаний. На одном сервере находятся несколько сайтов одной компании, плюс 2 других компании
Теперь грузоперевозки. 6 разных сайтов!
Стоит добавить, что я не искал примеры специально. Каждый второй сайт делит хостинг с похожими сайтами. На виртуальном хостинге на одном IP могут сидеть тысячи сайтов.
Теперь проверим на взрослый контент. Берем последний пример с грузоперевозками. Видим на этом сервере как минимум один секс-шоп и портал с видео для взрослых:
С большой вероятностью на вашем хостинге есть сайты для взрослых или сайты компаний с похожей деятельностью. А значит стоит задуматься.
Доказательство, что плохое соседство вредит позициям
Я нашел исследование посвященное вопросу этой статьи — опасно ли делить хостинг с другими сайтами. Теперь можно точно сказать, что сайты на одном IP адресе влияют на позиции в поисковых системах.
В эксперименте было создано 20 похожих сайтов: 10 на выделенных IP-адресах и хорошем хостинге, а другие 10 на дешевых хостингах, где находилось много сайтов для взрослых.
Как проводился эксперимент:
- Сделали 20 сайтов, которые оптимизировали под несуществующий ранее запрос. Позиции проверяли по этому запросу.
- Все сайты были максимально похожи, но отличались достаточно, чтобы не быть дубликатами.
- Все сайты мониторились на доступность и скорость загрузки, чтобы исключить влияние качества хостинга.
- Для сайтов были зарегистрированы домены, которые раньше нигде не упоминались.
- Были проанализированы дешевые хостинги, на которых размещаются сотни и тысячи сайтов. Для экспериментов выбрали хостинги, где размещается много сайтов для взрослых.
Эксперимент был проверен и признан ведущими экспертами зарубежного SEO, такими как Сайрус Шепард.
Я очень сильно упростил, авторы расписывают намного подробней. Если знаете английский, то в оригинале можно ознакомиться по ссылке:
Заключение
Я рассказал, что такое аффилиаты, как это может вам помешать и показал, как найти сайты на одном IP с вами. Рассказал об эксперименте, который доказывает, что лучше использовать выделенный IP.
Следует понимать, что поисковые системы наверняка учитывают такую особенность интернета, знают, что есть виртуальный хостинг и десятки тысяч сайтов могут иметь один IP-адрес. Однако эксперименты показывают, что риски есть. Также, нет экспериментов, которые доказывали бы обратное.
Поэтому я рекомендую использовать выделенный IP-адрес. Он стоит в районе 1000 руб/год.
Источник: ilyapronin.ru
Анализ использования диапазонов IP-адресов популярными хостингами почты
Насколько почтовые сервисы эффективно используют выделенный им дефицитный в наши дни ресурc IP-адресов? Насколько целесообразно расходуются известными поисковыми системами для своих хостингов почты предоставленные им региональными регистратурами в администрирование диапазоны? Узнать ответ на этот вопрос можно проведя небольшое исследование сервисов почты Gmail, Mail.ru и Яндекс.
Узнать количество адресов, выделенных каждой поисковой системой под свой хостинг почты, можно проанализировав строки SPF-записи соответствующего домена. Из ответа DNS-сервера мы можем узнать каждый адрес, зарезервированный для обмена почтой, а попробовав соединиться по 25/tcp (SMTP) узнать количество действующих.
Способ оценки — SPF в помощь
SPF — акроним от Sender Policy Framework, технология идентификации отправителя электронной почты, которая была принята в качестве стандарта ещё в далёком 2006 году. В DNS домена при внесении информации SPF создаётся TXT-запись, в тексте которой содержится список хостов, которым разрешено и запрещено отправлять письма от имени этого домена. Принимающая сторона имеет возможность в самом начале входящего SMTP соединения проверить информацию в доменной зоне заявляемого в поле «От:» отправителя и адреса в SPF-записи, сравнив с фактическим IP компьютера отправителя. Например, если фактический адрес содержится в списке SPF, сессия продолжается и письмо успешно принимается. В случае если отправителя не удаётся определить как входящего в указанный владельцем домена список SPF, то письмо может быть либо отклонено как подозрительное, либо принято для дальнейшей проверки в зависимости от указанной политики по умолчанию.
SPF предоставляет серверам почты возможность с одной стороны проверить легитимность отправителя письма, с другой — предотвратить подделку писем от чужого доменного имени. Немаловажно, что эта возможность требует совсем немного коммуникационных и вычислительных мощностей принимающего и совсем не требует их от отправляющего сервера почты. Это имеет большое значение для высоко нагруженных почтовых хостингов, программы которых обрабатывают электронную почту миллионами сообщений в сутки.
Диапазон IP Яндекс почты
При анализе SPF-записи Яндекс почты выясняем, что за политики для основного адресного пространства IP наиболее распространённой версии 4 отвечает доменное имя _spf.yandex.ru Дав с любого компьютера (например, можно выбрать программу nslookup в Windows) DNS-запрос текстового типа к нему получаем:
> set type=txt
> _spf-ipv4.yandex.ru
Не заслуживающий доверия ответ:
_spf-ipv4.yandex.ru text =
«v=spf1 ip4:77.88.46.0/23 ip4:77.88.60.0/23 ip4:84.201.143.128/26 ip4:87.250.248.0/24 ip4:95.108.130.0/23 ip4:95.108.252.0/23 ip4:213.180.223.192/26 ip4:84.201.186.0/23 ip4:93.158.136.48/28 ip4:77.88.34.0/27 ip4:77.88.19.32/27 ip4:77.88.58.128/26 ~all»
- +all — разрешать приём почты (почти не используется);
- -all — отклонять почту (самое строгое и полезное, стоит выбрать);
- ~all — разрешать приём почты, принять решение о доставке позже (не рекомендовано к использованию).
То есть, как мы видим в настройках SPF почты поисковой системы Яндекс используется хоть и не самая бессмысленная (+all), но всё же достаточно бесполезная для спам-фильтров получателей конструкция (~all). Тильда указывает, что отправитель перекладывает решение по определению легальности отправителя и самого письма на получателя, практически никак в этом не помогая ему. В отличие от явного запрета (-all), при котором получатель тут же разорвёт SMTP соединение, такая почта должна будет приняться на этом этапе сервером получателя и определять спам или подделку в нём ему нужно самостоятельно без всякой помощи со стороны Яндекса.
Такое небрежение корректностью настроек SPF не в последнюю очередь играет на руку отправителям спама, мошенникам и злоумышленникам, широко использующим бесплатный почтовый сервис Яндекса для отправки своих мусорных, а зачастую и вредоносных писем. К сожалению, это не единственный недостаток бесплатной почты от отечественного поисковика * , но в данном случае его SPF-запись нам интересна диапазонами, которые можно в ней найти, а именно:
ip4:77.88.46.0/23 ip4:77.88.60.0/23 ip4:84.201.143.128/26 ip4:87.250.248.0/24 ip4:95.108.130.0/23 ip4:95.108.252.0/23 ip4:213.180.223.192/26 ip4:84.201.186.0/23 ip4:93.158.136.48/28 ip4:77.88.34.0/27 ip4:77.88.19.32/27 ip4:77.88.58.128/26
Приставка «ip4:» в начале показывает, что речь идёт об обычной интернет нумерации наиболее распространённой 4 версии протокола. /23, /24 и другие указывают битовые маски сетей и уточняют размер диапазона IP. Обратите внимание, это лишь резерв адресов, которые сам поисковик указал как свои хосты SMTP — совершенно необязательно, что все они используются для обработки электронной почты. Сканирование указанных списков позволяет узнать какое количество IP из них действительно работает для приёма-передачи электронной почты по протоколу SMTP. Для этого нужно совершить попытку подключения по стандартному для передачи писем между хостами порту 25 протокола TCP, например, с помощью open source сканера портов Nmap.
Диапазон | Всего | Используется | Ссылка на результаты проверки |
77.88.46.0/23 | 512 | 0 | 77.88.46.0.txt |
77.88.60.0/23 | 512 | 266 | 77.88.60.0.txt |
84.201.143.128/26 | 64 | 21 | 84.201.143.128.txt |
87.250.248.0/24 | 256 | 59 | 87.250.248.0.txt |
95.108.130.0/23 | 512 | 266 | 95.108.130.0.txt |
95.108.252.0/23 | 512 | 387 | 95.108.252.0.txt |
213.180.223.192/26 | 64 | 31 | 213.180.223.192.txt |
84.201.186.0/23 | 512 | 442 | 84.201.186.0.txt |
93.158.136.48/28 | 16 | 7 | 93.158.136.48.txt |
77.88.34.0/27 | 32 | 0 | 77.88.34.0.txt |
77.88.19.32/27 | 32 | 0 | 77.88.19.32.txt |
77.88.58.128/26 | 64 | 32 | 77.88.58.128.txt |
Всего: | 3088 | 1511 |
Полученные данные показывают, что из 3088 адресов SMTP-хостов электронной почты работает всего 48,9%.
Диапазон IP хостинга почты от Google — Gmail
Сравним использование IP с почтовым хостингом от Google — Gmail. Способ прежний, SPF-запрос к зоне google.com даёт нам возможность узнать следующие диапазоны интернет идентификаторов:
Диапазон | Всего | Используется | Ссылка на результаты проверки |
216.239.32.0/19 | 8190 | 135 | 216.239.32.0.txt |
64.233.160.0/19 | 8190 | 46 | 64.233.160.0.txt |
66.249.80.0/20 | 4094 | 1437 | 66.249.80.0.txt |
72.14.192.0/18 | 16382 | 3415 | 72.14.192.0.txt |
209.85.128.0/17 | 32766 | 3505 | 209.85.128.0.txt |
66.102.0.0/20 | 4094 | 9 | 66.102.0.0.txt |
74.125.0.0/16 | 65634 | 17742 | 74.125.0.0.txt |
64.18.0.0/20 | 4094 | 1716 | 64.18.0.0.txt |
207.126.144.0/20 | 4094 | 585 | 207.126.144.0.txt |
173.194.0.0/16 | 65634 | 16434 | 173.194.0.0.txt |
Всего: | 213174 | 45024 |
Конечно, было бы несправедливо сопоставлять крупнейшую интернациональную корпорацию Google стоимостью более 71,7 млрд. долларов (на 2012 год) и российское ООО «Яндекс» и его сайт, известны почти исключительно лишь русскоязычным пользователям интернета. Проведём проверку почтовой службы ещё одного отечественного поисковика Mail.ru
Диапазон IP хостинга почты Mail.ru
Список по информации, анонсированной поисковой системой в строке записи SPF для своего сервиса почты следующий:
ip4:94.100.176.0/20 ip4:217.69.128.0/20 ip4:128.140.168.0/21 ip4:195.218.168.66 ip4:188.93.58.0/24 ip4:185.5.136.0/22 ip4:89.184.66.210 ip4:89.184.66.211
Результат поиска работающих на них SMTP-демонов:
Диапазон | Всего | Используется | Ссылка на результаты проверки |
94.100.176.0/20 | 4096 | 2272 | 94.100.176.0.txt |
217.69.128.0/20 | 4096 | 1811 | 217.69.128.0.txt |
128.140.168.0/21 | 2048 | 792 | 128.140.168.0.txt |
195.218.168.66 | 1 | 0 | 195.218.168.66.txt |
188.93.58.0/24 | 256 | 51 | 188.93.58.0.txt |
185.5.136.0/22 | 1024 | 524 | 185.5.136.0.txt |
89.184.66.210 | 1 | 0 | 89.184.66.210.txt |
89.184.66.211 | 1 | 0 | 89.184.66.211.txt |
Всего: | 11523 | 5450 |
Подведём итоги по собранной информации
Эффективность использования адресов Internet Protocol хостингами почты:
Хостинг почты | Всего IP для SMTP | Используется | Коэффициент использования | Количество пользователей | Пользователей на действующий адрес |
Gmail | 213174 | 45024 | 0,21 | 425 миллионов | 9439 |
Mail.ru | 11523 | 5450 | 0,47 | 42,7 миллионов | 7835 |
Яндекс почта | 3088 | 1511 | 0,49 | 25,1 миллионов | 16612 |
Количество пользователей почтовых сервисов по данным сайта Википедия.
Полученные данные неутешительны — отечественные поисковики не используют и 1/2 анонсированных ими для целей хостинга почты адресов. Но мировой гигант Gmail переплюнул даже такой результат, у него действительно функционирует лишь пятая часть.
Выходит, IP тот же Яндекс в своё время зарегистрировал на себя заметно больше, чем ему нужно для предоставления нехарактерных для сервиса поиска услуг электронной почты. В чём вполне открыто расписался, показав их в своей SPF-записи.
Также, сравнивая количество IP, используемых почтовыми сервисами в расчёте на каждого своего пользователя можем узнать степень нагрузки на каждый адрес. У сервиса почты Яндекса на один почтовый IP адрес приходится более 16 тыс. пользователей, что более чем в 2 раза больше чем у Mail.ru и в 1,7 раза чем у Gmail. Очевидно, что кратное превышение этого показателя не может не сказаться негативно на качестве и надёжности обслуживания пользователей этого хостинга почты.
Между тем в положении тотального недостатка блоков нумерации версии 4 регистратор адресного пространства Европы вовсе прекратил регистрацию новых диапазонов так как их попросту нет, они исчерпаны. В ARIN (American Registry for Internet Numbers), обслуживающей Серверную Америку, дела обстоят иначе, там свободные сети IP v4 ещё можно найти, они продолжают выдаваться клиентам по новым заявкам. Возможно, поэтому Google всё ещё может позволить себе владеть таким гигантским количеством неиспользуемых интернет адресов выделенных только для хостинга почты Gmail — почти 170 тысяч! А вот регистратору RIPE для решения проблемы недостатка блоков в Европе (и России в том числе), возможно, следует задуматься об отзыве неиспользуемых адресов у операторов, которые загружают их лишь наполовину и определённо не могут найти чем занять оставшуюся.
* — также существуют ограничения на количество отправляемых сообщений, на списки рассылки, количество DNS-записей и многое другое. Узнать полезную информацию в тексте на странице «Корпоративная почта Яндекс — бесплатно хорошо не бывает».
При перепубликации статьи установка активной индексируемой гиперссылки на источник — сайт Tendence.ru обязательна!
Источник: tendence.ru
Что кто-то может сделать с вашим IP-адресом?
Адрес интернет-протокола (IP) — это то, как веб-приложения находят вас в Интернете, а это означает, что любой, кто знает ваш IP-адрес, может определить, где находится ваше устройство. Считается ли это угрозой? конечно, нет. Но, как и ожидалось, хакер часто использует его для атаки на жертв. Как это может произойти только с рядом чисел, разделенных точками?
Итак, что кто-то может сделать с вашим IP-адресом? Здесь вы узнаете все об этом. Без дальнейших церемоний, давайте начнем. Проверять Как изменить свой IP-адрес в Windows 10 (и почему вы это делаете).
Может ли кто-нибудь узнать ваш IP-адрес?
Вы когда-нибудь задумывались, знает ли ваш босс, правительство или любой случайный человек ваш IP-адрес? Ну да и вряд ли нет. Вы можете подключить свое устройство к Интернету или использовать его для получения содержимого по сети.
Кроме того, возможно, что вы используете сеть своего интернет-провайдера (ISP) для доступа к интернет-ресурсам. Каждый провайдер обычно назначает общедоступный IP-адрес: идентификатор, в котором подробно описывается, где находится ваше устройство.
Некоторые приложения запрашивают ваш IP-адрес, чтобы узнать, где вы находитесь, чтобы помочь им предоставлять персонализированный контент. Это не вредно. Но аналогичным образом хакеры также могут создавать веб-сайты или приложения, содержащие ссылки, которые перехватывают IP-адрес жертвы. Раскрытие вашего IP-адреса для других не должно причинять никакого вреда. Но это часть деталей, которыми злоумышленники могут воспользоваться, чтобы атаковать вас или угрожать вам.
Что люди могут делать с вашим IP-адресом?