Поисковые системы интернета: обзор существующих решений. Анонимная поисковая система: обзор и сравнение лучших
продолжим мастер класс по анонимным и не преследующим пользователя поисковикам.
по гуглу всё ясно, по продукции российского розлива тоже, поэтому обсуждаем действительно серьёзные ресурсы
отличная статья по свежим данным, просто копирую.
DuckDuckGo
Одно время DuckDuckGo представляли как «антишпионскую» альтернативу Google, однако даже быстрый анализ с помощью утилит вроде lightbeam (расширение для Mozilla Firefox) показывает, что он не так уж уважительно относится к вашей личной жизни. Причиной тому стала его бизнес-модель, которая в основном полагается на комиссионные от партнеров. То есть, не факт, что ему удается заработать без слежки за пользователями.
Кроме того, DuckDuckGo использует в качестве инфраструктуры облачные сервисы Amazon. Хотя с технической точки зрения это решение вполне оправдано, оно все равно вызывает вопросы с учетом того, что Amazon является главным поставщиком облачных услуг для ЦРУ и уже подчинился указанию американского правительства (с нарушением первой поправки) убрать из сети Wikileaks… Короче говоря, с DuckDuckGo все далеко не так чисто, как вам хотят показать.
Ixquick - это альтернатива, которая не лезет в вашу личную жизнь и предлагает похожий на DuckDuckGo интерфейс. Источником вдохновения для него послужил Google, но он является не поисковиком в буквальном смысле этого слова, а агрегатором результатов других поисковых систем. Такой подход, конечно, интересен, но его сложно назвать настоящей альтернативой. Он полагается на другие поисковики и не вносит никакого вклада в создание мира, где можно обойтись без Google.
Кроме того, к числу систем, которые не стремятся сунуть нос в вашу личную жизнь можно отнести и Qwant, поисковик «made in France». В отличие от Ixquick он является настоящим поисковиком и использует собственную поисковую технологию. Тем не менее, еще полгода назад он ценил неприкосновенность личной жизни едва ли больше DuckDuckGo и даже использовал Google Analytics для оценки трафика. А это, согласитесь, весьма неоднозначный ход, если вы хотите защитить конфиденциальность пользователей.
Но после того как люди привлекли их внимание к этому вопросу (к этому, кстати, приложил руку ваш покорный слуга, а также многие хакеры), они все же исправились и установили альтернативу Google Analytics с анонимными прокси-серверами (они становятся посредниками во взаимодействии пользователей с интернетом), что позволило всем желающим вести поиск в интернете и социальных сетях, не передавая никаких данных в фейсбук и твиттер.
Как и DuckDuckgo, Qwant стремится утвердиться в растущей нише не нарушающих конфиденциальность ресурсов и со всей серьезностью подходит к технической стороне вопроса. Для этого они устанавливают прокси (в результате пользователи могут совершенно анонимно проводить все запросы), вводят автономную и независимую от Google систему оценки трафика и используют логи (та информация, что остается на сервере после посещения), которые никак не связывают ваш IP с поисковыми запросами. Получается, что даже если власти конфискуют оборудование, у них никак не получится восстановить вашу историю поиска по IP-адресу. Некоторые хакеры критиковали Qwant за не слишком точный подход к защите личных данных пользователей, представители поисковика наладили связи с ними и активно развивают сотрудничество, чтобы улучшить существующие у них технологии. Короче говоря, проделанные ими усилия свидетельствуют о серьезном отношении к сохранности частной жизни пользователей. И это правильный подход, потому что в этой сфере Google никак не сможет затмить Qwant, а DuckDuckGo не стал принимать вещи всерьез и в конечном итоге дорого за это поплатится.
Наконец среди альтернатив Google стоит отметить и технологию, которую разрабатывает YaCy, децентрализованная поисковая система. Она не для всех, но в плане инфраструктуры мы видим действительно инновационный подход. Обратная сторона медали децентрализованной системы заключается в том, что ее эффективность зависит от количества пользователей (как, например, скорость загрузки файлов по протоколу P2P) в отличие от упомянутых выше централизованных систем. Пока что эта технология, конечно, интересна, но остается уделом «нердов». Как бы то ни было, вполне можно представить себе повторную децентрализацию интернета, в рамках которой подобный технологический подход приобрел бы уже совершенно другой смысл. Вообще, это единственный выход из формирующегося на наших глазах общества тотального контроля, в связи с чем YaCy в любом случае заслуживает нашей поддержки.
Google - тяжелый наркотик?
Тем не менее, простому смертному будет очень непросто совершить такой переход, потому что все давно и бесповоротно приучены к Google. Лично я стараюсь чаще использовать другой поисковик параллельно с Google, точно так же как затягиваюсь электронной сигаретой, чтобы курить поменьше настоящих. Когда же мне нужно найти некую «чувствительную» информацию, которая так или иначе связана с моими журналистскими расследованиями, я обычно пользуюсь только Qwant и Ixquick или же подключаю целый технологический арсенал, чтобы добиться полной анонимности в сети. Но он, как вы понимаете, недоступен для обычного пользователя.
Фабрис Эпельбуан (Fabrice Epelboin) - предприниматель, преподаватель Института политических исследований.
Оригинал публикации: Les alternatives pour ceux qui veulent se passer de Google
Представляем вашему вниманию новый курс от команды The Codeby - "Тестирование Веб-Приложений на проникновение с нуля". Общая теория, подготовка рабочего окружения, пассивный фаззинг и фингерпринт, Активный фаззинг, Уязвимости, Пост-эксплуатация, Инструментальные средства, Social Engeneering и многое другое.
Для меня самое удивительное в поисковике Яндекс является то, что им до сих пор пользуется огромное количество народа. Моё знакомство с Интернетом, как и большинства в то время, началось через поисковик Яндекс. Популярных поисковиков, в том числе и российских, в то время было много. Я искал то, что мне нужно, с помощью разных поисковых машин и довольно долго мой эмпирический опыт подтверждал, что если чего-то не нашёл Яндекс, то другие уж точно не найдут по этому запросу ничего полезного. Ещё мне нравился слоган того Яндекса, что «Яндекс не цензор Интернета, а его зеркало». Имелось ввиду то, что Яндекс не фильтрует выдачу, даже если некоторые её результаты кому-то не нравятся.
В то время было обычным делом доходить и до 7 и до 11 страниц выдачи и т. д. Т.к. то ли Рунет был ещё мал, то ли поисковые машины работали так себе. Это сейчас подавляющее большинство редко по какому запросу заходит хотя бы на вторую страницу результатов поиска.
Некоторое время спустя я заметил, что Гугл догнал Яндекс по качеству поисковой выдачи. Но я продолжал пользоваться Яндексом даже тогда, когда понял, что Гугл стал лучше. Всё дело в консервативности, присущей большинству людей: на Яндексе у меня была почта, да и вообще с переменами у людей связаны какие-то опасения. В общем, я решился и полностью перешёл на поиск от Гугл и уже через пару недель мои опасения по переходу стали казаться наивными и смешными.
Иногда я возвращаюсь, «тестирую» поисковую выдачу Яндекса и только лишний раз убеждаюсь, насколько я был прав, перестав им пользоваться. Рунет, глазами Яндекса, какой-то покоцанный, неполный, с какими-то перекошенными приоритетами.
Некоторое время назад, трудно сказать когда точно, но и Гугл перестал вызывать чувство полного удовлетворения. Т.е. в подавляющем большинстве Гугл идеален и выдаёт именно то, что нужно на самых первых позициях. Но при поиске, например, фильмов или чего-то другого контрафактного, Гугл цензурирует выдачу. Гугл прямо об этом сообщает прямо на странице выдачи. Это, а также постоянное «Гугл следит за пользователями» всегда толкали на эксперименты с другими поисковиками.
Я начал свою заметку с того, что большинство из нас очень консервативны и с большой неохотой меняет свои привычки. На сегодняшний день, судя по количеству переходов на мои сайты, пользователей duckduckgo.com совсем мало. Кто-то просто не знает о его существовании, кто-то попробовал раньше и ему не понравилось. Пришло время попробовать что-то новое. Всех желающих взглянуть на Интернет (Рунет) чистым, незамутнённым цензурой или бредовым «ранжированием» взглядом, я приглашаю попробовать поисковую систему
Ожидаемо Гугл занял первое место в мировом рейтинге. На его долю приходится более 70% поисковых запросов от жителей со всех уголков Земли. Причем треть всего трафика google.com приходится на граждан США. Кроме того, Гугл является самым посещаемым сайтом в мире. Средняя ежедневная продолжительность использования поисковой системы Гугл составляет 9 минут.
Преимуществом поисковика Гугл является отсутствие лишних элементов на странице. Лишь строка поиска и логотип компании. Фишкой являются анимированные картинки и браузерные игры, приуроченные к популярным и локальным праздникам.
2. Bing
Бинг — поисковая система от Microsoft , ведущая свою историю с 2009 года. С этого момента она стала обязательным атрибутом смартфонов на ОС Windows. Bing также отличает минимализм — помимо шапки с перечнем всех продуктов Microsoft, на странице расположена лишь поисковая строка и название системы. Наиболее популярен Бинг в США (31%), Китае (18%) и Германии (6%).
3. Yahoo!
Третье место закрепилось за одним из старейших поисковиков — Яху. Основная масса пользователей также проживает в США (24%). Складывается впечатление, что весь остальной мир сознательно избегает помощи поисковых роботов… Также поисковик популярен в Индии, Индонезии, Тайване и в Великобритании. Помимо строки поиска, на странице Yahoo! предлагается прогноз погоды в вашем регионе, а также мировые тренды в виде ленты новостей.
4. Baidu
Китайский поисковик, который в России снискал дурную славу. Из-за агрессивной политики и отсутствия перевода на русский или английский языки, расширения этой поисковый системы воспринимаются в качестве вирусов. Их очень сложно удалить до конца и избавиться от всплывающих окон с иероглифами. Тем не менее, этот сайт является четвертым в мире по посещаемости. 92% его аудитории составляют граждане Китая.
5. AOL
AOL — американская поисковая система, чье название расшифровывается как America Online. Ее популярность значительно ниже, чем у предыдущих систем. Ее рассвет приходился на 90-е и 00-е годы. Почти 70% аудитории АОЛ — жители Соединенных Штатов.
6. Ask.com
У этой поисковой системы, ведущей свою историю с 1995, довольно необычный интерфейс . Все запросы она воспринимает в качестве вопросов и предлагает варианты ответов в соответствии с поисковой выдачей. Это чем-то напоминает сервис Ответы.Мэйл. Однако в выдачу попадают не ответы любителей, а полноценные статьи. За последний год сайт потерял около 50 позиций в мировом рейтинге самых популярных интернет-ресурсов и на сегодняшний день занимает лишь 104 место.
7. Excite
Этот поисковик ничем не примечателен, и похож на массу других сайтов. Он предлагает пользователям массу сервисов (таких, как Новости, Почта, Погода, Путешествия и т.д.) Интерфейс сайта также вызывает воспоминания о вэбе 90-х гг и, можно предположить, мало изменился с тех пор.
8. DuckDuckGo
Разработчики сразу предупреждают, что данная поисковая система не отслеживает ваши действия в сети. В наши дни это является весомым аргументом при выборе поисковика. Дизайн сайта выполнен в современной манере, использует яркие краски и забавные картинки. В отличие от других поисковых машин, «утиный поисковик» переведен на русский язык. За последний год сайт отыграл около 400 позиций и в марте 2017г. находится на 504 строчке рейтинга популярности Alexa.
9. WolframAlpha
Отличительной чертой этого поиска является многообразие вспомогательных сервисов, рассчитанных на запросы, связанные с теми или иными знаниями. То есть, в выдаче вы не увидите ссылок на посты в соцсетях или статьи желтой прессы. Вам предложат конкретные цифры и проверенные факты в форме единого документа . Этот браузер идеально подходит школьникам и студентам.
10. Yandex
Поисковик, наиболее популярный в России и странах СНГ. Кроме того, около 3% аудитории сайта являются жителями Германии. Сайт примечателен большим количеством сервисов на все случаи жизни (музыка, радио, расписание общественного транспорта, недвижимость, переводчик и пр.) Также ресурс предлагает большой выбор индивидуального оформления сайта, а также настройку виджетов «под себя» . Яндекс занимает 31 место в мире по популярности, потеряв 11 позиций за последний год.
Вы когда-нибудь задумывались над тем, почему в разных поисковых системах, Вам по разному выдается поисковая выдача? Например если в Яндексе набрать Vindavoz
, то результат будет таким:
а если в Гугле, то таким:
То же самое касается и других поисковых систем (Nigma, Bing, Yahoo, Rambler, Mail и т.д.).
Почему так происходит? В первую очередь из-за своих алгоритмов поиска и роботов, которые ищут информацию. Ну это само собой понятно. Не будут же все поисковики использовать один и тот же принцип, тогда и смысла в их разнообразии нет и можно пользоваться одним.
Другая особенность поисковиков - это отслеживание Ваших запросов. Да да да! Многие популярные поисковые системы (ПС буду обозначать далее) сохраняют у себя всю Вашу активность в интернете и используют в поисковой выдаче. Именно поэтому результаты всегда будут отличаться. И дело даже не в разных ПС, а так же влияет , операционная система и "машина" ( / и т.д.) с которой Вы ищите.
Поэтому Вы если и скажете другу "Да набери у себя в Яндексе Vindavoz и перейди по третьей ссылке", то у него третьей ссылкой вполне вероятно будет не та, которая показывается у Вас.
Хорошо ли это? С одной стороны (со стороны ПС так же) да. Ведь таким образом поисковик узнает про Вас (пол, место жительства, операционную систему, город проживания, интернет-провайдера, браузер, что Вы ищите и т.д.) и в результате показывает именно то, что предпочтительнее именно для Вас (точнее Вашим интересам) и таким образом результаты поисковой выдачи становятся более "личные".
Ну а с другой стороны это так же влияет на выдачу конкретной рекламы, как на самом поисковике, так и на сторонних сайтах (хотя тут другая система задействована, но всё же суть такая), которая основывается именно на собранных о Вас данных. Да и сам факт того, что про Вас собирают данные, так же не особо приятен.
Однако существуют такие поисковые системы, которые являются приватными и не собирают про Вас никакую информацию. Поэтому результат в них будет всегда одинаковый на разных браузерах, системах, компьютерах и в не зависимости от прошедшего времени пользования.
Итак, первый безопасный поисковик - это
Неплохой анонимный поисковик. При желании можно изменить тему (справа в углу значок), а так же настроить другие параметры по своему усмотрению (регион, язык, параметры открытия ссылок, горячие клавиши и т.д.) и под себя:
Поисковик использует для поиска результаты с Yahoo! Search BOSS, Wikipedia, Wolfram Alpha (без акцента на персональные данные) и собственного поискового робота.
Что ещё примечательного в нём?
Поисковик работает с множеством подобных фраз и их конструкций: калькулятор, конвертер величин,размер территорий, известные даты, люди, преобразователь величин, whois и т.д.
Суть этого поисковика в том, что он ищет через популярные ПС (Google, Bing, Yahoo и даже DuckDuckGo), но с той особенностью, что он пересылает Ваш запрос на свои защищенные сервер, а они уже возвращают результат в той системе, которая была выбрана, при этом не передавая ей ничего Вашего личного - , браузер и т.д.
Получается что Вы пользуетесь тем же самым Гуглом, но уже без сохранения Ваших данных.
Ещё одной особенностью этого поисковика является то, что его можно установить как дополнение (расширение) для браузера, которое предоставит свою строку защищенного поиска в верхнюю часть
Используя анонимные поисковики помните одну вещь - да, они защищают Вас от большинства методов слежения, но всё это прекращается когда Вы заходите на найденные странички, а там уже за Вами могут следить владельцы других сайтов и их скрипты
Использовать такие приватные поисковые системы или нет - решать Вам, однако всё же стоит знать про них.
Поисковая система - это один из ключевых уровней интернета наравне с контентом и браузером. «Яндекс»-поисковик или аналогичные системы («Гугл», «Бинг», DuckDuckGo и другие) позволяют пользователю осуществлять поиск информации во Всемирной паутине, формулируя запрос.
Работа же поисковой системы заключается в том, чтобы найти по этому запросу (ключевому слову или фразе) все документы, страницы, видео, то есть весь контент.
Какой поисковик самый лучший? Есть ли альтернативные варианты, что-то кроме «Гугла» и «Яндекса»? Какой поисковик интернета больше подходит для сканирования англоязычных источников или, например, музыки? Именно об этом и пойдет речь в статье.
Рейтинг: лидеры рынка
Если говорить о мире в целом, то «Гугл»-поисковик является самой популярной поисковой системой. Корпорация занимает практически 70% рынка. Вторую позицию рейтинга занимает «Бинг» (доля - 12,26%). Борьбу за вторую строчку с ним ведет система Baidu (6,48% по состоянию на сентябрь 2015 года). Время от времени они меняются местами.
Так, например, в 2014 «силы» были распределены по-другому: первое место занимал «Гугл»-поисковик с 68,69%, второе - Baidu (17,7%), третье - «Бинг» с капитализацией рынка в 6,22%.
Но общемировые данные очень обобщенные. Какой поисковик самый лучший?
В Китае, к примеру, очень небольшой процент населения сканирует «Гуглом», большинство использует отечественную систему Soso. В Южной Корее большая часть жителей пользуется собственной разработкой - поисковиком интернета Naver. Правда, в последние несколько месяцев количество запросов в этой системе начало стремительно снижаться.
В Японии и Тайване пользователи чаще других используют Yahoo!
Рейтинг: русскоязычные системы
Какой поисковик самый лучший? В России рейтинг поисковых систем совсем не похож на общемировой. Лидер рынка в русскоязычном сегменте интернета - это «Яндекс», которым пользуются более 55% пользователей.
На втором месте «Гугл» с результатом 37,6%. Согласно данным сервиса LiveInternet, охват русскоязычных поисковых запросов во Всемирной паутине распределился следующим образом:
- Универсальные поисковики: «Гугл» (37,6%), «Бинг» (0,3%), Yahoo! (0,1%).
- Англоязычные и международные (AskJeeves, например).
- Русскоязычные системы поиска: «Яндекс» (56,2%), Mail (5,3%), «Рамблер» (0,5%).
DuckDuckGo
Разговор об альтернативных поисковых системах стоит начать с поисковика DuckDuckGo. Это достаточно известная и распространенная система с открытым исходным кодом. Серверы DuckDuckGo находятся в Соединенных Штатах Америки. Результаты поиска довольно обширные, так как система использует не только собственные алгоритмы, но и результаты некоторых других источников, например, "Википедии", поисковика «Бинг» и Yahoo!
Поисковик DuckDuckGo обеспечивает максимальную безопасность личной информации пользователя, приватность и конфиденциальность. Система не собирает никаких данных о пользователях, не хранит историю и максимально ограничивает использование файлов cookie.
Отличие DuckDuckGo в том, что эта система не персонализирует поисковую выдачу, как это делают другие системы. В «Гугле» или «Яндексе», например, пользователь видит только ту информацию, которая согласуется с его предпочтениями. А вот DuckDuckGo формирует реальную картину и позволяет избавиться от навязчивой конкретной рекламы. Поисковый сервис легко ищет информацию на иностранных языках, тогда как «Яндекс» и «Гугл» по умолчанию отдают предпочтение русскоязычным источникам, даже если запрос введен на английском, немецком или другом языке.
В системе можно настроить интерфейс: изменять можно цветовое оформление, шрифты, ссылки и другие параметры всего в несколько кликов.
Пока еще этой поисковой системе далеко до гиганта «Гугла», но утёнок развивается, так что вполне возможно, что в будущем DuckDuckGo займет одну из лидирующих позиций. Команда создала отличный продукт, который обеспечивает анонимный, быстрый и функциональный поиск, заслуживающий внимания пользователя.
NotEvil
Это система, которая осуществляет поиск по анонимной сети Tor. Поисковая система предустановлена в одноименном браузере. Чем лучше notEvil? Он «проходит» туда, куда не могут добраться «Гугл» или «Яндекс»-поисковик. Вообще, в сети Tor очень много ресурсов которые нельзя посетить в «обычном» (законопослушном) интернете. Это такая себе площадка внутри сети со своими социальными платформами, торрент-трекерами, СМИ, блогами, торговыми центрами, форумами, библиотеками и так далее.
Кстати, notEvil - это не единственный в своем роде поисковик. Еще есть Look, который по умолчанию доступен в том же браузере «Тор», и TORCH - одна из самых старых систем поиска в анонимной сети.
YaCy
Бесплатный поисковик YaCy - это совершенно другой подход к организации поиска во Всемирной паутине. Система работает по принципу Р2Р. Это значит, что каждый компьютер, на котором установлен модуль, самостоятельно сканирует интернет, а потом все полученные результаты собираются в единую базу, которой могут пользоваться все пользователи YaCy.
Система полностью независима, автономна, обеспечивает анонимность каждого пользователя. YaCy подойдет сторонникам открытого интернета, который не подвержен влиянию крупных корпораций и государственных органов.
В быту поисковик пока что не очень полезен, зато в перспективе является достойной альтернативой «Гуглу» даже с точки зрения организации процесса поиска информации.
Pipl
Pipl - система, предназначенная для поиска информации о каком-то определенном человеке. Разработчики утверждают, что алгоритмы поисковика ищут людей эффективнее, чем распространенные во всем мире «Гугл» или «Яндекс».
Приоритетными источниками являются профили в социальных сетях комментарии, списки участников, базы данных, где публикуются разнообразные данные о людях, например, базы судебных решений. Но есть и недостаток. Для Pipl недоступны российские базы данных, так что он будет полезен только для поиска информации о гражданах США.
FindSounds
Какой поисковик самый лучший? Если нужно найти музыку или звуки, то, конечно, самым лучшим будет именно FindSounds. Это специализированный поисковик, где есть список тегов. Тут можно выбрать нужный формат аудиофайла или его качество. Все результаты поиска доступны для скачивания.
Wolfram|Alpha
Эта система выдает не страницы, на которых есть нужная пользователю информация, а готовый результат. Например, карты, графики, таблицы, короткие ответы. Сервис как нельзя лучше подходит для вычисления данных и поиска конкретных фактов. Поисковик пока понимает не все запросы, но постоянно развивается.
С помощью Wolfram|Alpha удобно, например, сравнивать параметры для настройки фотоаппарата, смартфона или ноутбука. Также вычислять уровень алкоголя в крови (система запрашивает у пользователя вес и рост, количество выпитого, время, а затем сообщает, через сколько алкоголь полностью выведется из организма).
Инструмент может конвертировать размеры обуви и одежды, считать калории, смотреть курсы валют или настраивать музыкальный инструмент.
Dogpile
Dogpile выводит результаты из выдач всех распространенных поисковых систем сразу. Сервис использует улучшенный алгоритм и, как уверяют разработчики, формирует самую лучшую выдачу в интернете. Кроме того, здесь мало рекламы. Можно попробовать воспользоваться Dogpile, если нужная информация никак не находится в стандартных «Гугле» или «Яндексе».
BoardReader
Эта система ищет информацию на форумах, опросах, сервисах вопросов и ответов, социальным сообществам, сужая поле поиска до социальных площадок. Можно выставить фильтры: язык и дату публикации, название сайта и тому подобное.
Поисковик может пригодиться специалистам по рекламе, которых интересует мнение аудитории.
В заключение
Часто альтернативные поисковые системы скоротечны. Они появляются также быстро, как и умирают. Большинство альтернативных систем на сегодняшний день специализируются на какой-либо узкой нише или тестируют оригинальный алгоритм в формировании результатов поиска.
В контексте описания альтернативных поисковых систем, критерий «лучше» совсем не означает «лучше во всем». Каждый из перечисленных выше сервисов дает конкретному пользователю что-то такое, чего нет в «Гугле» или «Яндексе». В любом случае, ознакомиться с альтернативными вариантами (на фоне того, что система кажется практически монополизированной поисковыми гигантами) интересно и полезно каждому пользователю.