Независимый поиск. Поисковые системы интернета: обзор существующих решений

Вы когда-нибудь задумывались над тем, почему в разных поисковых системах, Вам по разному выдается поисковая выдача? Например если в Яндексе набрать Vindavoz , то результат будет таким:

а если в Гугле, то таким:


То же самое касается и других поисковых систем (Nigma, Bing, Yahoo, Rambler, Mail и т.д.).

Почему так происходит? В первую очередь из-за своих алгоритмов поиска и роботов, которые ищут информацию. Ну это само собой понятно. Не будут же все поисковики использовать один и тот же принцип, тогда и смысла в их разнообразии нет и можно пользоваться одним.

Другая особенность поисковиков - это отслеживание Ваших запросов. Да да да! Многие популярные поисковые системы (ПС буду обозначать далее) сохраняют у себя всю Вашу активность в интернете и используют в поисковой выдаче. Именно поэтому результаты всегда будут отличаться. И дело даже не в разных ПС, а так же влияет , операционная система и "машина" ( / и т.д.) с которой Вы ищите.

Поэтому Вы если и скажете другу "Да набери у себя в Яндексе Vindavoz и перейди по третьей ссылке", то у него третьей ссылкой вполне вероятно будет не та, которая показывается у Вас.

Хорошо ли это? С одной стороны (со стороны ПС так же) да. Ведь таким образом поисковик узнает про Вас (пол, место жительства, операционную систему, город проживания, интернет-провайдера, браузер, что Вы ищите и т.д.) и в результате показывает именно то, что предпочтительнее именно для Вас (точнее Вашим интересам) и таким образом результаты поисковой выдачи становятся более "личные".

Ну а с другой стороны это так же влияет на выдачу конкретной рекламы, как на самом поисковике, так и на сторонних сайтах (хотя тут другая система задействована, но всё же суть такая), которая основывается именно на собранных о Вас данных. Да и сам факт того, что про Вас собирают данные, так же не особо приятен.

Однако существуют такие поисковые системы, которые являются приватными и не собирают про Вас никакую информацию. Поэтому результат в них будет всегда одинаковый на разных браузерах, системах, компьютерах и в не зависимости от прошедшего времени пользования.

Итак, первый безопасный поисковик - это


Неплохой анонимный поисковик. При желании можно изменить тему (справа в углу значок), а так же настроить другие параметры по своему усмотрению (регион, язык, параметры открытия ссылок, горячие клавиши и т.д.) и под себя:


Поисковик использует для поиска результаты с Yahoo! Search BOSS, Wikipedia, Wolfram Alpha (без акцента на персональные данные) и собственного поискового робота.

Что ещё примечательного в нём?

  • Можно использовать в поисковой фразе символ "! " перед запросом. Например Вам нужно поискать что-то на ютубе. Вы пишите фразу "!youtube Rammstein " и после нажатия на Enter Вы сразу попадете на страничку ютуба с поисковой фразой Rammstein. Более подробно про эту команду и посмотреть список можно .
  • Он может отвечать на вопросы. Вот только понимает на английском языке. Например можно набрать "random password " и получите случайно генерированный пароль


    Поисковик работает с множеством подобных фраз и их конструкций: калькулятор, конвертер величин,размер территорий, известные даты, люди, преобразователь величин, whois и т.д.
  • Открытый исходный код как бы показывает доверие к пользователям. Правда не весь, но часть можно посмотреть здесь https://github.com/duckduckgo для знающих.
  • Возможность просмотра изображений и видео напрямую в поисковике

  • Другие мелкие "фишки" в виде защищенного интернет протокола (https изначально, а не http ), короткого домена ( , использование поисковика как прокси (командой !proxy адрес-сайта можно сразу перейти на сайт через прокси) и другие.

    Суть этого поисковика в том, что он ищет через популярные ПС (Google, Bing, Yahoo и даже DuckDuckGo), но с той особенностью, что он пересылает Ваш запрос на свои защищенные сервер, а они уже возвращают результат в той системе, которая была выбрана, при этом не передавая ей ничего Вашего личного - , браузер и т.д.


    Получается что Вы пользуетесь тем же самым Гуглом, но уже без сохранения Ваших данных.

    Ещё одной особенностью этого поисковика является то, что его можно установить как дополнение (расширение) для браузера, которое предоставит свою строку защищенного поиска в верхнюю часть

    Используя анонимные поисковики помните одну вещь - да, они защищают Вас от большинства методов слежения, но всё это прекращается когда Вы заходите на найденные странички, а там уже за Вами могут следить владельцы других сайтов и их скрипты

    Использовать такие приватные поисковые системы или нет - решать Вам, однако всё же стоит знать про них.

  • В 2017 году, когда в Интернете содержатся миллионы терабайт информации и каждое движение пользователя в Интернете записывается, никак не обойтись без анонимных поисковых систем. Ведь нам всем очень важно добраться до нужных данных как можно быстрее и как можно безопаснее. Но знают ли наши дорогие читатели, каким именно образом поисковики переводят вводимые символы в код? Догадываетесь ли Вы, что все запросы моментально переходят в маркетинговые отделы корпораций?

    Принцип работ обычных поисковых систем в 2017 году: анонимность на нуле

    Google

    Давайте зайдем в Google-поиск и посмотрим, как он отображает ссылку на сайт, например, whoer.net:


    Яндекс поиск

    А вот так это делает «Яндекс»:

    Как видим, не сильно очевидно. На самом деле это сделано специально, а набор символом является ничем иным, как скриптом, который обработает «клик» по ссылке и запоминает действие пользователя.
    Сегодня на нашем сайте мы поговорим об анонимных поисковых системах, которые не «загрязняют» поиск лишними скриптами и не хранят данные о ваших поисковых запросах.

    Наиболее популярной анонимной поисковой системой на 2017 год является DuckDuck, который в анонимном браузере Tor назначен средством поиска «по умолчанию».

    DuckDuck также предоставляется для выбора в браузерах Firefox и Opera. Приватный поисковик славится тем, что не использует скрипты в ссылках и не выводит в результаты поиска рекламные и вирусные сайты. DuckDuckGo позволяет пользователю указывать в запросе специальные знаки и символы. И, как мы уже говорили, поисковик не следит за действиями пользователя.

    Отображение результатов запроса в анонимном поисковике DuckDuck

    Как видим, здесь нет никаких скрытых поведенческих скриптов, а имеется только прямая ссылка!

    Преимущества DuckDuckGo

    Еще одним положительным моментом в системе DuckDuckGo можно считать его полную поддержку https- протокола. Пока, эта настройка выключена при первом запросе пользователя, но ее легко активировать через удобное главное меню поисковика. После выполнения данного действия весь поиск будет проходить дополнительное шифрование.

    Самой конфиденциальной поисковой системой в 2017 году называют IxQuick.

    Сервера этого поисковика «снаряжены» мощнейшей метапоисковой системой. Это обозначает следующее: после запроса на поиск IxQuick выдает результаты сразу от десятка поисковых систем, объединяя их в своем окне выдачи и присваивая каждой ссылке уникальный рейтинг, по которому происходит ранжирование.
    На скриншоте выше видно, что основные запросы берутся из Google, так что за релевантность выдачи беспокоиться не приходиться.

    Настройки приватности в анонимном поисковике IxQuick

    Несмотря на все производственные мощности, за пользователями не ведется никакой «слежки», более того, даже не фиксируются IP-адреса пользователей. Тем не менее, каждый пользователь может разрешить сохранять настройки своего поиска на сервере анонимного поисковика в виде куки-файлов, которые будут либо удаляться в автоматическом режиме раз в три месяца, либо обновляться при каждом заходе на главную страницу IxQuick.

    Плюсы и минусы IxQuick

    Огромным преимуществом IxQuick является метапоиск сопряженный с анонимностью запросов, которые поисковый робот «заметает» с помощью сложной сети перенаправления данных от оригинальной поисковой системы до пользователя.
    Из минусов анонимного поиска IxQuick.можно отметить лишь факт отсутствия русского языка в интерфейсе.


    Уже из скриншота внимательный читатель может сделать вывод, что StartPage является клоном анонимного поисковика IxQuick. Так и есть: история этого проекта зародилась раньше, чем IxQuick, но, не смотря на то, что сайт никак не анализировал и не сохранял результаты поиска пользователя, тем не менее, конкуренцию он проиграл и вскоре был выкуплен более мощным соперником.
    Впрочем, данный сайт до сих пор работает, поэтому можем порекомендовать использовать связку: в IxQuick настроить Bing основным поставщиком запросов, а в StartPage поставить по умолчанию поиск от Гугл. Таким образом, вы получите двойной анонимный поиск, легко сравнивая результаты ваших поисковых данных.

    Поисковая система — это база данных по определенной информации в интернете. Многие пользователи считают, что как только они вводят запрос в поисковую систему, тут же начинается сканирование всего интернета, но это совсем не так. Сканирование интернета происходит постоянно, многими программами, данные о сайтах заносятся в базу данных, где по определенным критериям все сайты и все их страницы распределяются в различного рода списки и базы данных. То есть это своего рода картотека данных, и поиск происходит не по интернету, а по этой картотеке.

    Популярные поисковые системы

    Яндекс — крупнейшая поисковая система в рунете.

    Кроме поисковой системы, компания Яндекс предлагает 77 дополнительных сервисов, самые популярные из них — почтовый сервис Яндекс , Яндекс-браузер , Яндекс-диск, информация о пробках и погоде, Яндекс-деньги и многое другое. Поисковая система учитывает Ваше местоположение при выдаче результатов поиска. Так же поисковая программа постоянно модернизируется для выдачи более корректных результатов, рассчитанных на наибольшую информативность для пользователя.

    Google — самая популярная поисковая система в мире.

    Кроме поисковой системы, компания Google предлагает множество дополнительных сервисов, программ и аппаратного обеспечения, среди которых почтовый сервис , браузер Google Chrome , крупнейшая видеотека youtube и многие другие проекты. Компания Google уверено скупает многие проекты приносящие крупную прибыль. Большинство сервисов направлены не на прямого пользователя, а на заработок в интернете и интегрирована с уклоном на интересы европейских и американских пользователей.

    Mail — поисковая система, популярная в основном из-за почтового сервиса.

    Имеется множество дополнительных сервисов, ключевым из которых является почта Mail , на данный момент компании Mail принадлежит социальная сеть Одноклассники , собственная сеть «Мой мир», сервис Деньги-mail, множество онлайн игр, три практически одинаковых браузера с различными названиями. Во всех приложениях и сервисах очень много рекламного наполнения. Социальная сеть «ВКонаткте» блокирует прямые переходы в сервисы Mail, агрументируя большим количеством вирусов.

    Википедия.

    Википедия — поисковая справочная система.

    Некоммерческая поисковая система, существующая на частные пожертвования, поэтому не наполняет страницы рекламой. Многоязычный проект, целью которого является создание полной справочной энциклопедии на всех языках мира. У нее нет определенных авторов, заполняется и управляется добровольцами со всех стран мира. Каждый пользователь может как написать, так и отредактировать статью.

    Официальная страница — www.wikipedia.org.

    Youtube — крупнейшая библиотека видеофайлов.

    Видеохостинг с элементами социальной сети, где каждый пользователь может добавить видео. С момента приобретения их компанией Google Ink, отдельная регистрация для ютуба не требуется, достаточно зарегистрироваться в почтовом сервисе Google .

    Официальная страница — youtube.com.

    Yahoo! — вторая по значимости поисковая система в мире.

    Имеются дополнительные сервисы, самым известным из которых является почта Yahoo. В рамках улучшения качества поисковой системы, Yahoo передает данные о пользователях и их запросах в компанию Microsoft. От этих данных формируется представление об интересах пользователей, а так же формируется рынок рекламного наполнения. Поисковая система Yahoo, так же как и , занимается поглощением других компаний, например, Yahoo принадлежат поисковой сервис Altavista и сайт электронной коммерции Alibaba.

    Официальная страница — www.yahoo.com.

    WDL — цифровая библиотека.

    В библиотеке собираются книги предоставляющие культурную ценность в цифровом виде. Основная цель — повышение уровня культурного содержания интернета. Доступ к библиотеке осуществляется бесплатно.

    Официальная страница — www.wdl.org/ru/.

    Bing — поисковая система от компании Microsoft.

    Официальная страница — www.baidu.com.

    Поисковые системы России

    Рамблер — «проамериканская» поисковая система.

    Изначально создавался как медийный интернет-портал. Как и другие многие поисковые системы, имеет сервисы поиска по картинкам, видеофайлы, карты, прогноз погоды, новостной раздел и многое другое. Так же издатели предлагают бесплатный браузер Рамблер-Нихром .

    Официальная страница — www.rambler.ru.

    Nigma — интеллектуальная поисковая система.

    Более удобная поисковая система из-за наличия множества фильтров и настроек. Интерфейс позволяет включать, либо исключать предлагаемые подобные значения в поиске для получения более качественных результатов. Так же, при получении результата поиска позволяет использовать информацию других крупных поисковиков.

    Официальная страница — www.nigma.ru.

    Aport — каталог товаров онлайн.

    В прошлом поисковая система, но впоследсвии того, что разработки и нововведения были прекращены, быстро сдала позиции и . В настоящий момент Апорт является торговой площадкой, на которой представляются товары более 1500 фирм.

    Официальная страница — www.aport.ru.

    Спутник — национальная поисковая система и интернет-портал.

    Создана компанией «Ростелеком». В настоящее время находится в стадии тестирования.

    Официальная страница — www.sputnik.ru.

    Metabot — развивающаяся поисковая система.

    В задачах Metabot стоит создание поисковой системы по всем другим поисковым системам, создавая позиции выдачи результатов с учетом данных всего списка поисковых систем. То есть это поисковая система по поисковым системам.

    Официальная страница — www.metabot.ru.

    Работа поисковой системы приостановлена.

    Официальная страница — www.turtle.ru.

    KM — мультипортал.

    Изначально сайт являлся мультипорталом с последующим внедрением поисковой системы. Поиск может проводиться как внутри сайта, так и по всем отслеженным сайтам рунета .

    Официальная страница — www.km.ru.

    Gogo — не работает, перенаправляет на поисковик .

    Официальная страница — www.gogo.ru.

    Российский мультипортал, не очень популярный, требует доработки. В поисковик включены новости, телевидение, игры, карта.

    Официальная страница — www.zoneru.org.

    Поисковая система не работает, разработчики предлагают воспользоваться поисковиком .

    Официальная страница — www.au.ru.

    Интересуют пользователей все больше и больше. Мы расскажем вам о трех поисковых системах без запретов, которые не собирают о вас личную информацию, а, напротив, защищают вашу приватность.

    Startpage: самая дискретная поисковая система в мире

    Startpage.com называет себя «самой дискретной поисковой системой в мире». С 2016 года сервис был объединен с сайтом Ixquick. В качестве доказательства безопасности своего поиска Startpage.com позиционирует себя как единственная поисковая система, имеющая сертификат ЕС о конфиденциальности.

    Startpage.com обещает не сохранять IP-адреса пользователей и, по утверждению сервиса, не использует файлы cookie для трекинга. Кроме того, Startpage.com доступен из сети Tor. Серверы поисковой системы находятся в Нидерландах . У сайта есть удобная особенность: результаты поиска можно просматривать при помощи опции «Прокси», которая шифрует соединение с соответствующей веб-страницей с помощью прокси-сервера. Таким образом, это настоящий поисковик без запретов: можно спокойно просматривать то, что блокирует ваш провайдер. Поисковые прокси - главная фишка Startpage, которые делают его поисковиком без цензуры. Если вам необходимо искать без блокировок, этот сервис для вас.

    DuckDuckGo - наиболее широко используемая безопасная альтернатива Google с более чем десятью миллионами запросов в день. Несмотря на то, что серверы поисковой системы находятся в США, DuckDuckGo.com, тем не менее, предлагает некоторые интересные функции.

    При поиске через DuckDuckGo.com ваш IP-адрес не будет сохранен. Система также не использует файлы cookie для отслеживания. DuckDuckGo применяет шифрование с использованием HTTPS. В поисковую систему также можно ввести запрос через сеть Tor. Кроме того, можно использовать различные темы, чтобы настроить отображение поисковой страницы.

    Открывать сайты через прокси тут нельзя. Но с учетом того, что система находится вне юрисдикции РФ , на него не распространяется, к примеру, «право на забвение» в том смысле, в котором оно понимается у нас. Результаты поиска могут быть не идеальными, но все же довольно полезными. Этот сервис больше подойдет тем, кому в первую очередь важна анонимность и поиск без слежения. Либо тем, кто хочет найти информацию, исключенную из результатов поисковой выдачи в РФ. Однако, следует предупредить: в России DuckDuckGo стал партнером Яндекса, так что можно ожидать всего.

    notEvil: поиск по интернету, которого нет Поисковик notEvil позволяет осуществлять поиск из интернета по анонимной сети Tor. Для этого не надо устанавливать никакого дополнительного программного обеспечения (хотя оно, понадобится для того, чтобы открывать результаты поиска).

    Эта поисковая система позволяет искать по так называемому даркнету - той части Интернета, которая обычно недоступна среднему пользователю. В связи с блокировками в нее постепенно переезжают полезные сервисы, например, для скачивания контента.

    Анонимные поисковые системы как безопасная альтернатива Google

    Все три поисковых системы не регистрируют ваш IP-адрес и не используют файлы cookie для слежки. Шифрование с использованием HTTPS предоставляется всеми названными поставщиками. Лучшие результаты поиска в тесте показал поисковик DuckDuckGo, а гарантированную безопасность при выборе альтернативного поисковика вы получите с системой Startpage.com. Сертификация защиты данных ЕС подтверждает, что поисковая система придерживается своих обещаний об анонимности поиска. Для поиска по даркнету, в свою очередь, пригодится notEvil.

    Представляем вашему вниманию новый курс от команды The Codeby - "Тестирование Веб-Приложений на проникновение с нуля". Общая теория, подготовка рабочего окружения, пассивный фаззинг и фингерпринт, Активный фаззинг, Уязвимости, Пост-эксплуатация, Инструментальные средства, Social Engeneering и многое другое.


    Для меня самое удивительное в поисковике Яндекс является то, что им до сих пор пользуется огромное количество народа. Моё знакомство с Интернетом, как и большинства в то время, началось через поисковик Яндекс. Популярных поисковиков, в том числе и российских, в то время было много. Я искал то, что мне нужно, с помощью разных поисковых машин и довольно долго мой эмпирический опыт подтверждал, что если чего-то не нашёл Яндекс, то другие уж точно не найдут по этому запросу ничего полезного. Ещё мне нравился слоган того Яндекса, что «Яндекс не цензор Интернета, а его зеркало». Имелось ввиду то, что Яндекс не фильтрует выдачу, даже если некоторые её результаты кому-то не нравятся.

    В то время было обычным делом доходить и до 7 и до 11 страниц выдачи и т. д. Т.к. то ли Рунет был ещё мал, то ли поисковые машины работали так себе. Это сейчас подавляющее большинство редко по какому запросу заходит хотя бы на вторую страницу результатов поиска.

    Некоторое время спустя я заметил, что Гугл догнал Яндекс по качеству поисковой выдачи. Но я продолжал пользоваться Яндексом даже тогда, когда понял, что Гугл стал лучше. Всё дело в консервативности, присущей большинству людей: на Яндексе у меня была почта, да и вообще с переменами у людей связаны какие-то опасения. В общем, я решился и полностью перешёл на поиск от Гугл и уже через пару недель мои опасения по переходу стали казаться наивными и смешными.

    Иногда я возвращаюсь, «тестирую» поисковую выдачу Яндекса и только лишний раз убеждаюсь, насколько я был прав, перестав им пользоваться. Рунет, глазами Яндекса, какой-то покоцанный, неполный, с какими-то перекошенными приоритетами.

    Некоторое время назад, трудно сказать когда точно, но и Гугл перестал вызывать чувство полного удовлетворения. Т.е. в подавляющем большинстве Гугл идеален и выдаёт именно то, что нужно на самых первых позициях. Но при поиске, например, фильмов или чего-то другого контрафактного, Гугл цензурирует выдачу. Гугл прямо об этом сообщает прямо на странице выдачи. Это, а также постоянное «Гугл следит за пользователями» всегда толкали на эксперименты с другими поисковиками.

    Я начал свою заметку с того, что большинство из нас очень консервативны и с большой неохотой меняет свои привычки. На сегодняшний день, судя по количеству переходов на мои сайты, пользователей duckduckgo.com совсем мало. Кто-то просто не знает о его существовании, кто-то попробовал раньше и ему не понравилось. Пришло время попробовать что-то новое. Всех желающих взглянуть на Интернет (Рунет) чистым, незамутнённым цензурой или бредовым «ранжированием» взглядом, я приглашаю попробовать поисковую систему



    Просмотров