20 фишек, как узнать всё про любой сайт

20 фишек, как узнать всё про любой сайт

В закладки

От посещаемости до секретов.

Сегодня мы продолжаем играть в детективов. Началось все с двух статей о сборе досье на человека с помощью общедоступных источников:

Теперь перед нами стоит задача собрать максимум информации о чужом сайте с минимальными усилиями.

Эта статья не для веб-разработчиков и специалистов по SEO или информационной безопасности. Она для простого человека, которому надо по-быстрому получить представление о ценности и качестве определенного интернет-ресурса.

Критерии отбора сервисов для статьи:

• Искомая информация предоставляется бесплатно;
• Чтобы посмотреть сведения о сайте, не нужно иметь к нему доступа;
• Желаемый результат можно получить немедленно, без регистрации или длительного ожидания.

Рейтинг ТОП 10 поисковиков

В соответствии с рейтингом 10 лучших поисковых систем мира можно выделить наиболее популярные механизмы, предоставляющие лучшие условия для быстрого поиска полезной информации.

1. Поиск Google

Google — ведущая поисковая система мира, занимающая лидирующие позиции в большинстве государств. За сутки регистрируется более 50 млн запросов. Гугл ищет информацию на 191 языке мира.

Компания Google была создана на территории США (1998 г.) и за короткий период стала одной из крупнейших мировых транснациональных IT корпораций.

2. Поиск bing

Bing — простая и функциональная программа поиска, позволяющая осуществлять поиск не только по словам, но и по фотографиям, медиа или новостям.

Bing была разработана специалистами Microsoft, анонсировавших ее в 2009 г. На сегодняшний день является поисковиком по умолчанию для браузера Internet Explorer, а так же является поиском для всех устройств на базе Windows (смартфонов, ноутбуков, приставок и т.д.). Наибольшее признание получила в США, Германии и Китае.

3. Поиск Yahoo!

Yahoo! — долгое время удерживал лидирующую позицию рейтинга лучших поисковых систем Земли, пока не был вытеснен Google. Основная часть пользователей — жители США и Канады.

Yahoo! является первым коммерчески успешным поисковиком мира: он был зарегистрирован в США (1994 г.) и одним из первых начал существовать как коммерческая организация.

4. Поиск Baidu

Baidu — это Китайский поисковик, вошедший в рейтинг мировых поисковых систем благодаря огромной аудитории пользователей из КНР (95% от всех).

Поиска был разработан в Китае (2000 г). На Baidu доступна электронная энциклопедия, являющаяся китайским аналогом Википедии.

5. Поиск Yandex

Яндекс — еще один локальный поисковик с одноименным браузером, обеспечивший себе высокую позицию списка за счет значительной аудитории из России, стран СНГ и ряде европейских стран. Является одной из наиболее популярных программ в сегменте русскоязычного поиска.

Yandex — продукт работы одноименной российской IT компании, на рынке с 2006 г. Кроме развития поиска компания активно развивает сервисы, Яндекс Такси, Яндекс Еда, Яндекс Драйв, что позволяет ей быть коммерчески успешной.

6. Поиск DuckDuckGo

Популярность DuckDuckGo связана с высоким уровнем ее конфиденциальности: поисковая программа не фиксирует историю поиска и запросов. Распространена в странах Европы и Америки и была разработана программистами из США (2008 г.).

7. Поиск Sogou

Sogou — китайский метапоисковик, обеспечивший себе лидирующие позиции рейтинга 10 поисковых систем благодаря большому количеству пользователей из КНР. На рынке с 2008 года.

8. Поиск Naver

Naver — южно-корейский поисковик, популярный у пользователей Юго-Восточной и Восточной Азии. Является первым метапоисковиком, собирающим все результаты запроса на одной странице.

9. Поиск Shenma

Девятый в нашем рейтинге и занимающая третью позицию списка по популярности у пользователей Китая, Shenma представляет первый мобильный браузер и поисковик Китая, вы устанавливаете приложение на смартфон и ищете все что необходимо. Запатентована и доступна для пользователей с 2014 года.

10. Поиск Ecosia

Ecosia — является продуктом труда немецких программистов, выпущенным в 2009 году. Особенность Ecosia в ее экологической функции: 80% прибыли направляется на финансирование международного проекта по озеленению.

Программа получила особую поддержку у пользователей Западной Европы, США

Рейтинг поисковых систем в разрезе отдельных стран меняется, в том числе и первая позиция списка. Для ряда государств характерны сильные позиции локальных систем поиска.

Команды логического исключения и объединения

Поисковик Яндекс

Поисковик Яндекс понимает следующие символы:

“” — запрос в кавычуах, поиск по точному вхождению цитаты;

| — или, разделяет два слова для поиска одного из них;

* — ставится во фразу, если между словами пропущено слово;

Ваш_Запрос Site:Ваш_сайт.ru — конкретный поиск на сайте (ваш_сайт.ru), по запросу (Ваш_запрос). Можно определить релевантные страницы запросу, например: [продвижение сайта Site:example.ru] или [«продвижение сайта» “example.ru”]

date:запрос — поиск документов по дате;

+ — плюс ставится перед словом запроса, которое должно обязательно быть в документе;

& — амперсанд, ставится между словами запроса, которые должны встречаться в пределах предложения.

У Яндекс настолько богатый язык поисковых запросов, что лучше посмотреть полные возможности ТУТ.

Примечание: Для Яндекс нормальная форма слова это именительный падеж, единственное число. С точки зрения Яндекс, слова «дом», «дома», «дому» и т. д. — это формы одного и того же слова, нормальной формой которых является форма «дом».

Для поиска, только форм одного слова, нужно перед словом поставить два восклицательных знака. Например: [!!дом] или [!!поиск].

Правильно составить поисковой запрос в поиске Google

Чтобы правильно составить поисковой запрос, нужно знать, что Google понимает следующие символы:

Пробел – в Google пробел это оператор «И»;

“” — запрос в кавычках, это поиск по точному вхождению цитаты;

| — оператор «или», разделяет два слова для поиска одного из них;

* — знак умножения, ставится во фразу, если между словами пропущено слово. Два знака если пропущены два слова и т.д.;

Ваш_Запрос”ваш_сайт.ru” — конкретный поиск по запросу «Ваш_запрос», на сайте (ваш_сайт.ru). С помощью такого запроса, можно определить релевантные запросу страницы сайта. Например: [продвижение сайта “example.ru”] или [«продвижение сайта» “example.ru”] или еще более конкретно, [«!продвижение !сайта“example.ru”]

! – восклицательный знак, указывает на поиск по точному вхождению слова, фразы в запрос.

+ — плюс ставится перед словом запроса, которое должно обязательно быть в документе;

Поисковые системы в Интернете на русском

1) Начнем с отечественной поисковой системы. Яндекс работает не только в России, но также работает в Белоруссии и Казахстане, в Украине, в Турции. Также есть Яндекс на английском языке.

p, blockquote 7,0,0,0,0 —>

2) Поисковик Google пришел к нам из Америки, имеет русскоязычную локализацию:

p, blockquote 9,0,0,0,0 —>

3)Отечественный поисковик Майл ру, который одновременно представляет социальную сеть ВКонтакте, Одноклассники, также Мой мир, известные Ответы Mail.ru и другие проекты.

p, blockquote 11,0,0,0,0 —>

4) Интеллектуальная поисковая система

p, blockquote 13,0,1,0,0 —>

Nigma (Нигма) http://www.nigma.ru/

p, blockquote 14,0,0,0,0 —>

С 19 сентября 2017 года «интеллектуалка» nigma не работает. Она перестала для её создателей представлять финансовый интерес, они переключились на другой поисковик под названием CocCoc.

p, blockquote 15,0,0,0,0 —>

5) Известная компания Ростелеком создала поисковую систему Спутник.

p, blockquote 16,0,0,0,0 —>

Есть поисковик Спутник, разработанный специально для детей, про который я писала ТУТ.

p, blockquote 18,0,0,0,0 —>

6) Рамблер был одним из первых отечественных поисковиков:

p, blockquote 19,0,0,0,0 —>

В мире есть другие известные поисковики:

• Bing,
• Yahoo!, ,
• Baidu,
• Ecosia,

подробнее о них ЗДЕСЬ.

p, blockquote 22,0,0,0,0 —>

Попробуем разобраться, как же работает поисковая система, а именно, как происходит индексация сайтов, анализ результатов индексации и формирование поисковой выдачи. Принципы работы поисковых систем примерно одинаковые: поиск информации в Интернете, ее хранение и сортировка для выдачи в ответ на запросы пользователей. А вот алгоритмы, по которым работают поисковики, могут сильно отличаться. Эти алгоритмы держатся в тайне и запрещено ее разглашение.

p, blockquote 23,0,0,0,0 —>

Введя один и тот же запрос в поисковые строки разных поисковиков, можно получить разные ответы. Причина в том, что все поисковики используют собственные алгоритмы.

p, blockquote 24,0,0,0,0 —>

Цель поисковиков

В первую очередь нужно знать о том, что поисковики – это коммерческие организации. Их цель – получение прибыли. Прибыль можно получать с контекстной рекламы, других видов рекламы, с продвижения нужных сайтов на верхние строчки выдачи. В общем, способов много.

p, blockquote 25,0,0,0,0 —>

Прибыль поисковика зависит от того, какой размер аудитории у него, то есть, сколько человек пользуется данной поисковой системой. Чем больше аудитория, тем большему числу людей будет показываться реклама. Соответственно, стоить эта реклама будет больше. Увеличить аудиторию поисковики могут за счет собственной рекламы, а также привлекая пользователей за счет улучшения качества своих сервисов, алгоритма и удобства поиска.

p, blockquote 26,1,0,0,0 —>

Самое главное и сложное здесь – это разработка полноценного функционирующего алгоритма поиска, который бы предоставлял релевантные результаты на большинство пользовательских запросов.

p, blockquote 27,0,0,0,0 —>

Работа поисковика и действия вебмастеров

Каждый поисковик обладает своим собственным алгоритмом, который должен учитывать огромное количество разных факторов при анализе информации и составлении выдачи в ответ на запрос пользователя:

• возраст того или иного сайта,
• характеристики домена сайта,
• качество контента на сайте и его виды,
• особенности навигации и структуры сайта,
• юзабилити (удобство для пользователей),
• поведенческие факторы (поисковик может определить, нашел ли пользователь то, что он искал на сайте или пользователь вернулся снова в поисковик и там опять ищет ответ на тот же запрос)
• и т.д.

Все это нужно именно для того, чтобы выдача по запросу пользователя была максимально релевантной, удовлетворяющей запросы пользователя. При этом алгоритмы поисковиков постоянно меняются, дорабатываются. Как говорится, нет предела совершенству.

p, blockquote 29,0,0,0,0 —>

С другой стороны, вебмастера и оптимизаторы постоянно изобретают новые способы продвижения своих сайтов, которые далеко не всегда являются честными. Задача разработчиков алгоритма поисковых машин – вносить в него изменения, которые бы не позволяли «плохим» сайтам нечестных оптимизаторов оказываться в ТОПе.

p, blockquote 30,0,0,0,0 —>

Как работает поисковая система?

Теперь о том, как происходит непосредственная работа поисковой системы. Она состоит как минимум из трех этапов:

• сканирование,
• индексирование,
• ранжирование.

Число сайтов в интернете достигает просто астрономической величины. И каждый сайт – это информация, информационный контент, который создается для читателей (живых людей).

p, blockquote 32,0,0,0,0 —>

Сканирование

Это блуждание поисковика по Интернету для сбора новой информации, для анализа ссылок и поиска нового контента, который можно использовать для выдачи пользователю в ответ на его запросы. Для сканирования у поисковиков есть специальные роботы, которых называют поисковыми роботами или пауками.

p, blockquote 33,0,0,0,0 —>

Поисковые роботы – это программы, которые в автоматическом режиме посещают сайты и собирают с них информацию. Сканирование может быть первичным (робот заходит на новый сайт в первый раз). После первичного сбора информации с сайта и занесения его в базу данных поисковика, робот начинает с определенной регулярностью заходить на его страницы. Если произошли какие-то изменения (добавился новый контент, удалился старый), то все эти изменения будут поисковиком зафиксированы.

p, blockquote 34,0,0,0,0 —>

Главная задача поискового паука – найти новую информацию и отдать ее поисковику на следующий этап обработки, то есть, на индексирование.

p, blockquote 35,0,0,0,0 —>

Индексирование

Поисковик может искать информацию лишь среди тех сайтов, которые уже занесены в его базу данных (проиндексированы им). Если сканирование – это процесс поиска и сбора информации, которая имеется на том или ином сайте, то индексация – процесс занесения этой информации в базу данных поисковика. На этом этапе поисковик автоматически принимает решение, стоит ли заносить ту или иную информацию в свою базу данных и куда ее заносить, в какой раздел базы данных. Например, Google индексирует практически всю информацию, найденную его роботами в Интернете, а Яндекс более привередлив и индексирует далеко не все.

p, blockquote 36,0,0,0,0 —>

Для новых сайтов этап индексирования может быть долгим, поэтому посетителей из поисковых систем новые сайты могут ждать долго. А новая информация, которая появляется на старых, раскрученных сайтах, может индексироваться почти мгновенно и практически сразу попадать в «индекс», то есть, в базу данных поисковиков.

p, blockquote 37,0,0,0,0 —>

Ранжирование

Ранжирование — это выстраивание информации, которая была ранее проиндексирована и занесена в базу того или иного поисковика, по рангу, то есть, какую информацию поисковик будет показывать своим пользователям в первую очередь, а какую информацию помещать «рангом» ниже. Ранжирование можно отнести к этапу обслуживания поисковиком своего клиента – пользователя.

p, blockquote 38,0,0,0,0 —>

На серверах поисковой системы происходит обработка полученной информации и формирование выдачи по огромному спектру всевозможных запросов. Здесь уже вступают в работу алгоритмы поисковика. Все занесенные в базу сайты классифицируются по тематикам, тематики делятся на группы запросов. По каждой из групп запросов может составляться предварительная выдача, которая впоследствии будет корректироваться.

p, blockquote 39,0,0,1,0 —> Рис. 1 Упреждающий поиск – выдаются подсказки при вводе первых букв в строку поиска

Предварительная выдача называется еще «упреждающим поиском» — это когда пользователь только начинает вводить свой запрос, а ему уже предлагаются различные варианты ответов.

p, blockquote 40,0,0,0,0 —>

В каждой поисковой системе есть модераторы – люди, отвечающие за оценку сайтов и результаты выдачи по определенным группам запросов. Модераторы нужны для того, что контролировать работу поисковика, а также замещать алгоритм там, где он работает недостаточно хорошо (корректировать его работу). Модераторы могут вручную менять позиции тех или иных сайтов, если видят, что алгоритм поисковика в каких-то случаях сработал некорректно.

Youtube раньше предлагал свой инструмент для подбора поисковых запросов, который назывался «Инструмент подсказки ключевых слов». C 1 сентября 2015 YouTube закрыл сервис подбора ключевых слов YouTube Keyword Tool.

Теперь статистику ключевых фраз на YouTube можно смотреть только в сторонних сервисах, либо использовать статистику из Яндекс Wordstat и Google ADS для анализа популярности поисковых фраз и предполагать, что в Youtube будет аналогичный спрос.

Несколько сервисов, которые можно использовать:

Ahrefs YouTube Keyword Tool

Главный минус, что он показывает только при точном совпадении слов в базе. Например, если в примере на скриншоте указать «пироги яблоки», то сервис ничего не выдаст. А например Google ADS даст много вариантов.

Google Trends Youtube

В Гугл Трендах вы не найдете конкретных поисковых фраз, но можно быстро узнать какие темы и запросы по искомой теме лидируют на Youtube.

Базы ключевых слов — в чем польза

В базы ключевых слов собираются запросы изо всех доступных источников. По актуальности они отстают от Вордстата, который выдает результаты за последний месяц, зато существенно превосходят сервисы поисковиков по количеству ключевых фраз, включая запросы с длинным хвостом более 7 слов. Комбинируя парсинг Вордстата и работу с базами ключевых слов, вы соберете максимально полное ядро для сайта.

Чтобы выбрать хорошую базу, надо смотреть не только на количество ключей, но и на регулярность обновлений. Чем чаще, тем актуальнее данные. Тем не менее, значения частотности из любых баз желательно уточнять.

3. Установка счетчика на сайт

3.1. Счетчик от liveinternet.ru

Форма для добавления сайта в систему: http://www.liveinternet.ru/add.

Я думаю, что объяснять как заполнять форму при добавление сайта не стоит, поскольку здесь все очевидно. Единственное, что хочу сказать: в последнем пункте «участие в рейтингах» не забудьте выбрать категорию (если, конечно, Вы планируете участвовать в общем рейтинге). Далее Вы попадете на страницу, где Вас попросят проверить правильность введенных данных. Если Все правильно, то нажимаете на кнопку зарегистрировать.

Попав на следующую страницу нажимайте на «получить html-код счетчика». Вы попадете на страницу выбора счетчика:

Я люблю счетчики второго типа, где показывается число просмотров за 24 часа, число посетителей за 24 часа и число посетителей за сегодня. После выбора счетчика, кликайте по нему и попадете на страницу выбора цвета.

После этого внизу страницы нужно выбрать тип счетчика.

Я всегда выбираю самый первый пункт: «в виде одной картинки» (он стоит по умолчанию). Далее в самом низу страницы будет кнопка «получить html-код счетчика», нажимайте на неё и перед Вам откроется новая страница с кодом.

Код счетчика LiveInternet выглядеть примерно так:

Полученный код нужно вставить в том месте Вашей html-страницы, где Вы хотите, чтобы был счетчик. Советую ставить его в самом низу страницы, чтобы не тормозить загрузку страницы.

Также советую закрыть счетчики в тег <noindex></noindex>, а к тегу a прибавить атрибут rel=»nofollow» , чтобы не передавать ссылочный вес.

3.2. Счетчик от top100.rambler.ru

Для начала нужно зарегистрироваться в рамблере: https://id.rambler.ru/account/external-registration. После этого авторизуйтесь и переходите на странице «добавить сайт».

Далее следуйте инструкциям. В общем смысл примерно тот же самый, что и в первом случае. Здесь придется заполнить немного больше полей, чем у лайвинтернета. В самом конце Вам будет предложено выбрать тип счетчика:

После этого получаете код счетчика и так же как в первом случае вставляете его в том месте на сайте, где хотите, чтобы он выводился.

Код будет выглядеть примерно так:

Рамблер стал очень капризным к модерации ресурсов. Сюда принимают только белые сайты. Если сайт серый, то его отклонят.

3.3. Счетчик от metrika.yandex.ru

Для добавления сайта в Яндекс Метрику Вы должны быть авторизированы на яндексе. После этого переходите на страницу http://metrika.yandex.ru/list/ и нажимайте вверху «добавить счетчик».

После этого необходимо будет заполнить соответствующие поля и аналогичным образом разместить код на сайте. Обычно счетчик от метрики я делаю невидимым на сайте.

После того как Вы добавите счетчики на сайт через пару деньков уже можете начинать анализировать статистику сайта.

3.4. Счетчик от top.mail.ru

Для добавления сайта в TOP Mail нужно зарегистрироваться в Mail.ru. После этого переходите на страницу https://top.mail.ru/add и вводите данные для добавления сайта.

У этого счетчика схожие параметры для просмотра счетчика с LI. Т.е. практически те же пункты. В этом плане, конечно, Яндекс Метрика куда интереснее.

Счетчик от мэйла хорош в первую очередь тем, что его рейтинг посещают множество пользователей. С этого рейтинга будут переходы на ваш сайт, если он будет иметь довольно большую посещаемость.