Картинка блога

Не стесняясь скажу, это пожалуй самая полезная из статей, по крайней мере на момент написания и по крайней мере для меня, которую я писал на своем блоге. Вся информация, выложенная здесь является абсолютно открытой, но разбросана по всему интернету. Я уверен, что еще не раз буду обращаться к сервисам, описанным здесь, и конечно к этой статье с дополнениями.
Надеюсь вся эта информация будет использована только в мирных целях, а не для сбора данных «об очередной жертве».

Экскурс.

Для того, чтобы понять откуда берется информация, нужно знать некоторые особенности работы интернета.
Все сайты лежат на серверах. Так как сейчас интернет окутывает весь мир, пользователю практически все равно, как далеко от него расположен сервер. Для того, чтобы добраться до сайта используются сложные алгоритмы маршрутизации по протоколу TCP/IP, но это совсем другая история.
Каждому серверу присвоен свой IP — числовой код. Тоже самое и с клиентом, но в этом случае он может часто меняться и это выглядит немного сложней. Между двумя точками (компьютерами) образуется соединение (канал), с помощью которого они могут общаться. Так как на одном сервере (как в общем-то и на клиенте) могут одновременно работать несколько сервисов (например HTTP — для передачи сайтов, FTP — протокол передачи файлов, MailServer — для почты и т.д.), для их определения используются порты. Например для HTTP — тот что отвечает за передачу HTML (страниц) и другого контента (картинок и музыки) всемирно принято использовать порт номер 80. Этот стандарт настолько вошел в наш мир, что нам даже не надо его писать в браузерной строке запроса. Например — http://domain.com равнозначно http://domain.com:80.
Последний вопрос, это имена. С начала рождения интернета каждому IP может соответствовать свое имя, этим занимаются DNS сервера, которые хранят таблицы имен и соответствующих им IP адресов. Сейчас, когда адресов начинает не хватать, одному IP может соответствовать несколько разных имен и сайтов. Этот подход называется — «Виртуальный сервер». Например на одном сервере с одним и тем-же IP может быть несколько разных сайтов http://domain2.com и http://domain3.com.

Определение владельца сайта.

Думаю теперь понятно, что имя сайта (домен) и его содержимое могут находится на разных серверах и волне комфортно могут существовать друг без друга. Но, чтобы сайт принял привычную форму, его автору нужно зарегистрировать имя и создать соглашение о хостинге. Это могут быть разные фирмы или фирма — предлагающая все в одном. И так, имя. Для регистрации имени нужно ввести определенные данные о пользователе, сейчас эта на большинстве доменов не контролируется, но каждая уважающая себя компания, никогда не будет скрывать от пользователей эти данные.
Для получения информации о владельце пользователя, используются сервис whois. Для разных доменов первого уровня он может быть свой. По этому, чтобы найти подходящий, придется воспользоваться поиском. whois.net например стоит первым в гугле. Это действительно не плохой сервис с поддержкой большого количества доменов.
Кроме пользовательской информации есть ещё даты — первая регистрация и дата истечения оплаты. Перед последней датой владелец должен оплатить домен на следующий год, иначе он его лишится.

Определение физического положения сайта.

По IP адресу сайта, можно узнать где находится сайт. Практически весь инструментарий есть на сайтах IPTools.com, tools.WebMax и DomainTools.com.

Основной из них — это traceroute. Эта утилита показывает все точки сети (сервера, маршрутизаторы и т.д.), которые прошел сетевой пакет от одной точки до другой. Последней записью будет соответственно сервер сайта. Стоит также иметь в виду, что используя traceroute с сайтов, начальной точкой является не ваш компьютер, а сервер сайта предоставляющего этот сервис.

Есть также сервисы, которые определяют местоположение IP адреса на карте. Естественно, эта информация приблизительна до города, а иногда и страны. Для определения положения сервера можно использовать программу VisualRoute. В общем, она делает тоже самое, что и traceroute, плюс добавляет точки на карту. Недостаток в том, что эту программу нужно устанавливать на компьютер. К счастью есть альтернативы, например geoBytes IP Locator, который способен определить положение и показать его на карте.

Часто, но не всегда DNS сервер предоставляется той же компанией что и хостинг. Это можно проверить утилитой DIG (или nslookup, dnslookup). Она возвращает записи с сервера, которые разделены по секциям. Подробнее о секциях можно узнать из Википедии.

Кто соседи сайта?

Если хостинг виртуальный (несколько сайтов на одном IP адресе) есть способ узнать о его «соседях».
Для этого можно использовать например сайт myipneighbors.com.

Проверка сервера на открытые порты.

Для этого используют широко известную в мире Linux утилиту NMAP. На нее есть и утилиты online. Не думаю, что эта информация может каким — либо образом быть полезна в мирных целях. Так что, больше информации на эту тему не понадобится.

Ознакомление с эволюцией сайта.

В сети есть так называемый архив сайтов. Сервис хранит изменения главной страницы по времени. Больше информации можно из моей предыдущей записи.

Посещаемость и рейтинг сайта.

Самые популярные сайты, такие как Yandex, Google, Yahoo, Live создают так называемый рейтинг сайта. Такой рейтинг в разных поисковых системах рассчитывается по своему. Дополнительную информацию о расчётах рейтинга можно узнать на соответствующих сайтах. Самый простой способ получить эту информацию в одном месте, это установить дополнение для FireFox — Alexa. Правда всю информацию, которую предоставляет сервис, можно получить только по первым, 100 тысячам по популярности сайтам. Тем не менее, кое-что можно узнать.
Еще одна интересная возможность мониторинга популярности сайтов по странам и категориям.
В дополнение стоит сказать расчете рейтинга в предположительной цене ресурса, такой расчет например использует logi.ru.
Подобный иностранный сайт, WebSiteOutlook, позволяет также определить примерное количество посещений. В моем случае цифры оказались несколько завышенными.

Добросовестность на предмет спама.

Первым шагом в борьбе со спамом стало создание баз данных о недобросовестных сайтах. Эти базы используют различные провайдеры или программы электронной почты. Эту информацию можно получить и с соответствующих сайтов. Среди таких, например, уже описанный WebMax.

Определение сервера, под которым работает сайт.

Сервер обычно можно определить если подключится к серверу с помощью telnet через 80-ый порт. Но DomainTools.com готов сделать все это за вас. Эта информация находится на его Whois, в панели Server Data.
Если нужна дополнительная информация или название подменено. Можно по пробовать HttpPrint.

Хостинг виртуальный или выделенный?

Думаю теперь тут все просто:

  1. Проверяем наличие «соседей» сайта.
  2. Получаем IP адрес сайта с помощью утилиты PING или любой подобной, и подставляем ее в браузер следующим образом — http://xxx.xxx.xxx.xxx, где xxx.xxx.xxx.xxx соответственно IP адрес. Если получаем ошибку или другой сайт, значит хостинг виртуальный.

Совместимость с браузерами.

Первое, что можно сделать, это провести проверку сайта на соответствие стандартов w3c в HTML, CSS и т.д. Скорее всего это не совсем то что вам надо. Несомненно, соответствие стандартам добавляет некоторую ценность сайту и подчёркивает профессионализм его разработчиков. Но к сожалению далеко не всегда это обозначает совместимость с разными браузерами. Для того чтобы определить совместимость сайта с разными версиями браузеров, совсем не обязательно их всех устанавливать. В сети есть незаменимый сервис, который создает изображения с разных браузеров в различных операционных системах. За несколько кликов можно получить вид из более 50 браузеров, включая их версии. Сервис называется BrowserShots.

Конкурентоспособность.

Гугл предаставляет не плохой сервис для сравнения популярности слов между собой. Его можно использовать и для сравнительного анализа сайта и его конкурентов. Cервис называется Trends. Для достаточно популярных сатов сравнительный анализ также делает Alexa.
Например следующий анализ стал для меня открытием: webmoney и e-gold.

Кто ссылается на сайт?

Мне сейчас сложно сказать как именно это сделать с помощью WEB. Но для FireFox есть отличный плагин — SeoQuake. Этот плагин собирает рейтинги разных ресурсов относительно текущего сайта, в том числе и показывает количество внешних ссылок, зарегистрированных различными поисковыми системами.

Какие ссылки проиндексировал Гугл?

Гугл предусматривает поиск по домену. Для этого нужно использовать ключевое слово ‘site’. Например: site:. Подобные ключевые слова управления поиском есть в любом популярном поисковике.

Добросовестность на предмет авторского права.

Для этого особых сервисов нет. Все что надо, это набрать часть проверяемого текста в кавычках. Проблема в том, что даже гугл часто ошибается выдавая копию гораздо выше оригинала. Печально.

Самые посещаемые суб-домены сайта.

Это довольно ценная информация даже с точки зрения безопасности.
До написания этой статьи у меня было предположение, что эту информацию должен дать DIG. Но нет, решение неожиданно — alexa. Если субдомен проиндексирован, он скорее всего будет в списке.

Другие сетевые инструменты

Вот еще несколько сайтов, которые предоставляют сервисы схожей тематики.

abouthisite
Очередной сайт собирающий различную информацию в одном месте.
sitetruth
Этот ресурс проверяет содержание сайта и пытается определить проблемные места. Такие как отсутствие адреса или сомнительное авторство.
DomainCrawler
Еще один сайт про домены и популярность сайта

Итоги.

Очень вероятно, что эта статья не освещает и половины информации, которую можно вытащить о сайте. Тем не менее, надеюсь, что она была полезной, и вы узнали что-то новое 🙂

UPD: sitehistory.ru

Метки:, , ,

29 комментариев в “Полная информация о сайте.”

  1. Действительно очень полезная статья! не зря старались!

    п.с. у вас блок навигации, комметариев и т.д. на странице статьи съезжает внизх. Разрешение экрана у меня: 1280х1024, IE 7.0.7

  2. Большое спасибо за добрые слова и что заметили ошибку в разметке.
    Все исправил.

  3. Да много чего узнал

  4. СПС за поучительную статью

  5. Еще одна ссылка вокруг этой темы : webhosting.info.
    Тут например можно узнать информацию о хостинг компаниях эстонии:
    http://www.webhosting.info/web.....Country/EE

  6. Еще один сервис. История заголовков, отправляемых сервером:
    whats.ru

  7. Некий агрегат статистических сайтов:
    http://dataopedia.com/

  8. Еще один аггрегатор данных о сайте http://www.markosweb.com/

  9. Русский сервис http://netchart.ru/ — посмотреть детальный портрет аудитории

  10. Очередной аггрегаттор http://www.webdatah.com/.
    Хотя имеет некоторую дополнительную информацию

  11. Агрегат
    http://www.webboar.com/

    Гугловый информатор (работает только с популярными сайтами)
    https://www.google.com/adplanner

  12. Приятный whois: whois7.ru

  13. Кто знает, чем надёжнее ссылки на сайт посмотреть?

  14. SeoQuake недостаточно?

  15. Вижу линк, спасибо — посмотрю.

  16. А без плагина SeoQuake можно как-нибудь взглянуть на ссылающиеся ссылки?

  17. Да, впринципе он делает запросы на поисковики со специальными клбючами. Сейчас могу вспомнить только программу Yazzle, но есть и бесплатные аналоги.

  18. Ваш сайт мне очень помог. Но может у Вас есть информация куда надо обратится если админ сайта всех обманул,забрал наши вложенные деньги а сайт закрыл. IP адрес сайта 178.162.250.57 Огромное спасибо за Ваш труд!

  19. Сткрыть настоящего владельца сайта очень просто. Боюсь я не могу тут помочь.
    Перед тем как давать кому-либо деньги в интернете, убедитесь что вы сможете их получить обратно в случае проблем. Для PayPal это Resolution center (нужно внимательно читать условия. Электронные товары, например они не страхуют). WebMoney — аттестат владельца и арбитраж. В других случаях — писменный договор, проверенный физический адрес и т.д.
    Ну и конечно самое главное — не участвовать в сомнительных схемах, которыми изобилует интернет.

  20. Большое спасибо,много чего узнал

  21. Полезная информация, спасибо!
    Из плагинов особенно полюбился SEOQuake.
    Выкатили бета-релиз системы управления задачами:
    http://www.planerka.info/
    Будем благодарны за тестирование и отзывы!

  22. Спасибо !!!! Очень полезная информация

  23. Большое спасибо! Очень полезная информация!

  24. Существует так же еще один ресурс, довольно свежий, на нем можно разузнать большую часть необходимой информации, в нем хорошо то, что он быстро всё сканирует и в считанные секунды выдает результат.
    Вот адрес: http://www.digimetr.com

  25. Если уж зашла тема об определении домена и прочих деталей, то можете воспользоваться сайтом Анализ сайта
    Здесь в наличии: основные показатели, внутренняя оптимизация, посещаемость и тд. Например на мой сайт собрало информацию за 4,73 сек

  26. спасибо огромное очень приятно что есть такие сайты

  27. С помощью сервиса http://seo-webtester.com/ можно получить много свединей о интересующим сайте.

  28. Всем нам известно, как сложно в наше время отстоять свои законные права и восстановить справедливость. Кому-то отказала страховая компания, кому-то не вернули долг, не оказали услугу или причинили вред имуществу, здоровью. И многие, отчаявшись, думают, что справедливости нет. Справедливость есть, но она восторжествует только при умелом и грамотном подходе квалифицированных специалистов, которые в силу своего опыта и знаний смогут найти выход из сложившейся ситуации. Для решения своего вопроса на сайте Юридического Консультационного Центра «ПРОЦЕСС» Вы можете в режиме онлайн задать свой вопрос нашим юристам, или обратиться в наш офис предварительно записавшись на консультацию. Мы с удовольствием проконсультируем Вас по интересующим Вас вопросам, а при необходимости, осуществим представительство Ваших интересов в суде. Юридический Консультационный Центр «ПРОЦЕСС» оказывает юридические услуги, как юридическим, так и физическим лицам.

    Юридические услуги для организаций:
    •юридическое сопровождение деятельности организаций;
    •разработка договоров, соглашений, и иных документов;
    •правовое обеспечение хозяйственных сделок;
    •правовое обеспечение трудовых отношений;
    •взыскание долгов (дебиторской задолженности);
    •представительство в Арбитражном суде;
    •представительство организации в государственных учреждениях;
    •регистрация юридических лиц;
    •юридическое сопровождение исполнительного производства (принудительное исполнение решения суда);
    •юридическое сопровождение сделок по аренде и купли — продажи коммерческой.

    Юридические услуги для граждан:
    •расторжение брака в судебном порядке и взыскание алиментов;
    •раздел совместно нажитого имущества супругов;
    •вступление в наследство по закону или завещанию;
    •регистрация права на недвижимое имущество;
    •трудовые споры и защита прав работников;
    •взыскание долгов, в том числе долгов по расписке;
    •взыскание денежных средств со страховых компаний;
    •представительство в Службе судебных приставов г. Москвы;
    •снятие с регистрационного учета граждан;
    •вселение/выселение граждан;
    •сопровождение сделок по купле-продаже недвижимости;
    •ведение судебных дел при дорожно-транспортном происшествии.

    Сайт: http://processs.ru/

Trackbacks/Pingbacks

  1. Проверенный хостинг DreamHost (дримхост)