Почти все известные поисковые системы: Поиск информации в сети Интернет. Полезные и интересные ссылки в Интернет. Мытищинский филиал МГТУ им. Н. Э. Баумана (МГУЛ)

Содержание

Поисковики в прошлом — Реальное время

4 сентября 1998 года в США была зарегистрирована Google Incorporated — компания, впоследствии ставшая известной как самая популярная в мире поисковая система, а в дальнейшем — и вообще как одна из крупнейших IT-компаний. Прошло ровно 22 года, и мы решили вспомнить, какие существовали поисковые системы, которые сейчас уже или закрыты, или не пользуются популярностью.

Yahoo!

В 1994 году аспиранты Стэнфордского университета Дэвид Фило и Джерри Янг основали сайт-каталог других сайтов под названием «Путеводитель Джерри по Всемирной Паутине». Через три месяца сайт был переименован в Yahoo!. Создатели утверждают, что название связано с человекоподобными существами Еху из «Путешествий Гулливера» Джонатана Свифта (олицетворяют негативные стороны природы человека).

В 1997 году Yahoo! купила почтовый сервис, впоследствии появился игровой сервис и мессенджер. После кризиса доткомов начала 2000-х годов компания вышла на рынок телекоммуникаций, затем начала покупать другие поисковые системы. В 2008 году купить компанию попыталась Microsoft, а в 2016 году часть компании была куплена телекоммуникационной компанией Verizon. Непосредственно поисковик от Yahoo! сейчас не работает — поиск осуществляется с помощью Bing.

Altavista

Некогда самая быстрая поисковая система в мире — Altavista — была основана в конце 1995 года, почти в одно время с Yahoo!. Из особенностей Altavista можно отметить включение поиска естественного языка. В августе 1998 года поисковую систему выкупила компания Compaq за рекордную на тот момент сумму в 3,35 млн долларов (цифры эти по нынешним меркам кажутся смешными).

Однако прибыльной компания у Compaq не стала, и в 1999 года Altavista вновь была перепродана — корпорации CMGI. Не закончились перевоплощения поисковика и на этом — в 2003 году поисковик продали компании, которая спустя пять месяцев после сделки была куплена Yahoo!. Так что, по сути, два крупных поисковика того времени стали одной компанией — с 2011 года Altavista стала использовать поисковую технологию Yahoo!, а в 2013 году Altavista прекратила работу.

«Апорт»

Если пиковым годом в США в плане появления поисковых сетей стал 1995-й, то в России прогресс подзадержался на год. В феврале 1996 была продемонстрирована поисковая система «Апорт». Анонсировали ее в конце 1997 года — через пару месяцев после анонса «Яндекса». Изначально, в 1996 году, «Апорт» искал только по одному сайту, затем — по четырем, потом — по шести.

Компания занимала лидирующие позиции весь конец 1990-х. В 2000-е «Апорт» был перекуплен сервисом «Россия Он-Лайн», принадлежащим Golden Telecom. Сам Golden Telecom входил в «Альфа-Групп» и группу компаний «Вымпелком», работающую под торговой маркой «Билайн», в которой и «растворился» в 2010 году. Сам же «Апорт» стал резко сдавать позиции, с 2011 года стал использовать поисковую технологию «Яндекса». В 2012 году «Апорт» выкупил у «Вымпелкома» владелец сайта знакомств Mamba.ru. Сейчас «Апорт» работает как прайс-агрегатор, и о нем мало кто помнит.

Рамблер

Еще один пример растерявшего свои позиции поисковика — «Рамблер». Сама компания, конечно, живет и процветает, однако сейчас это — крупный медиапортал, и поисковая система, до сих пор работающая, находится, мягко говоря, не в топе Рунета.

Домен «Рамблера» зарегистрировали в сентябре 1996 года, заработала поисковая система в октябре. В первый год существования «Рамблер» стал лидером рынка и одним из первых поисковиков в стране. Популярность сохранялась до начала 2000-х годов — тогда создатели и перекупившие сервис инвесторы разделились. «Рамблер» стал делать упор на формат медиапортала. В 2001 году была запущена новая версия поисковой машины, но лидерство перехватил «Яндекс». Впоследствии у компании появились медиаактивы, а в 2006 году «Рамблером» стал владеть холдинг «Профмедиа», связанный с «Газпромом».

Спутник

Наконец, еще один российский поисковик, история которого, правда, сильно отличается, — «Спутник». Поисковая система позиционировалась как «национальная» и «государственная». Работу система и портал начали в мае 2014 года — объявлялось о формате «открытого бета-тестирования». Компания-владелец — ООО «Спутник» — является дочерним предприятием «Ростелекома».

В августе 2018 года «Ростелеком» обратился в Арбитражный суд Москвы с заявлением о признании банкротом «Спутника», доля поисковика не превышала 1%.

Максим Матвеев

ТехнологииITТелекоммуникацииМедиа

Mojeek: результаты поиска не зависят от Google, Microsoft и «Яндекс»

Mojeek — это не поисковый агрегатор

Колин Хейхерст (Colin Hayhurst) — новый генеральный директор конфиденциальной поисковой системы Mojeek. Был управляющим и одним из основателей стартапов в области высокопроизводительных вычислений, машинного обучения и веб-инфраструктуры. Одна из его компаний вошла в когорту известного акселератора Y Combinator в 2012 году.

Mojeek — это поисковой движок, а не поисковый агрегатор. Что это означает на практике и что именно необходимо для создания поисковой системы с нуля?

Это означает, что мы больше ориентированы на продукт, чем на маркетинг.

Это меняет многое и отличает нас от компаний, занимающихся метапоисковыми системами — от DuckDuckGo, Ecosia, Startpage или Qwant.

Мы непрерывно сканируем Интернет, обновляя наш собственный ссылочный граф, базу данных веб-страниц и алгоритм ранжирования. Код был написан с нуля на языке C, и до недавнего времени почти весь он был создан Марком Смитом, нашим основателем. На разработку у него ушло 16 лет.

Единственный открытый исходный код, который мы используем, — это cURL, совсем недавно мы тестировали LMDB. Все остальное, включая наши поисковые базы данных, было разработано с нуля, поэтому вы можете себе представить, какую невероятную работу проделал Марк.

Это означает, что мы можем предоставлять результаты поиска, не зависящие от Google, Microsoft и «Яндекс».

Какую технологию вы используете?

Наши собственные серверы на “голом” железе размещены в самом экологичном центре обработки данных Великобритании, Custodian. У нас есть собственный робот MojeekBot, который сканирует Интернет. Собранные нами просканированные страницы организуются в базу данных или индекс с возможностью поиска. С учетом того, что проиндексированы миллиарды страниц, нам пришлось написать нашу технологию баз данных, чтобы справиться с нестандартными запросами.

Наши веб-службы используют язык программирования PHP. Мы не отслеживаем пользователей, и, хотя мы используем JavaScript во внешнем интерфейсе, на нашем сайте он отключен. Это важно для людей, которые отключают JavaScript из соображений безопасности.

Используемые нами операционные инструменты в основном размещаются на собственном хостинге и включают Nextcloud, FastMail, Zulip и Gitlab.

Каков текущий размер вашего индекса? Какая цель на будущее?

В настоящее время наш индекс составляет 3,26 миллиарда страниц. У нас есть цель достичь 5,7 млрд к июню 2021 года.

Какие варианты конфигурации вы предлагаете? Как вы планируете их расширять?

Мы известны благодаря поисковой системе mojeek.com. Однако мы также предлагаем поиск по сайту.

Усовершенствования, внесенные в недавний проект с издателем, теперь доступны любой организации. Мы также предлагаем API, позволяющий разработчикам создавать собственные поисковые решения.

Благодаря недавним инвестициям и растущей команде мы планируем расширить услуги, например, добавить карты и данные о компаниях. Для нас большая краткосрочная задача — лучше понять, чего хотят пользователи. Мое участие позволит Марку, в частности, уделять больше времени созданию, и мы сможем оптимизировать нашу карту развития.

Как конфиденциальная поисковая система вы не отслеживаете своих пользователей. Поскольку вы не можете использовать сбор данных для определения вероятных потребностей пользователя, как вы справляетесь с трудностью предоставления точных результатов по запросу с неоднозначными условиями поиска?

Конечно, когда люди используют поисковую систему, они ищут информацию в различных вариациях. Таким образом, используемые поисковые запросы почти всегда имеют некий скрытый смысл.

Прогнозирование потребностей и желаний на основе собранных личных данных, на наш взгляд, носит манипулятивный характер. Этот механизм нужен компаниями, занимающимися рекламными технологиями и Big Data, не столько для улучшения своих услуг, сколько для оптимизации доходов от рекламы.

В некоторых случаях это помогает повысить релевантность, но может иметь последствия, наиболее заметным из которых является пузырь фильтров (предвзятый или персонализированный поиск). Направлять на релевантный контент с разных точек зрения также важно, как и использовать предположения о том, что ищет пользователь.

Вот почему мы считаем важным наличие независимого поискового индекса и алгоритма. Когда почти каждая поисковая система получает свои результаты из Google и Bing, именно Google и Bing формируют большую часть информации, которую может увидеть человек.

Как пользователи Mojeek могут самостоятельно убедиться, что их конфиденциальность действительно соблюдается?

Это отличный вопрос, и честный ответ — никак.

Все сводится к вопросу доверия. Даже с открытым исходным кодом или при проведении независимых аудитов проверка этих вопросов не является гарантией. На практике компания может использовать другую версию своего исходного кода, включать или отключать функции во время аудита.

Mojeek — официальная британская компания с четкой и краткой политикой конфиденциальности. Мы точно определяем, какую очень ограниченную информацию мы регистрируем. Например, мы не регистрируем IP-адреса. При этом мы открыты для изучения способов, позволяющих нашим пользователям быть более уверенными в этом вопросе.

Как вы видите Mojeek через пять лет?

Наша цель — сделать так, чтобы сервисы на базе Mojeek стали надежной альтернативой Google, Bing и «Яндекс». Эти три поисковые системы имеют индекс выше нашего. Наличие независимой технической базы означает, что мы и будущие партнеры можем предложить реальную альтернативу поиску, который предлагается крупными технологиями Китая, России и США. К тому времени мы также построим устойчивый бизнес.

Фото Nick Wessaert, Unsplash.

Поисковые системы

В Сети огромное количество разнообразной информации, и если бы не поисковые системы, то наверное, Вы толком никогда не смогли бы найти то, что Вам нужно. Первоначальная задача раскрутки сайта состоит в регистрации в поисковых системах, чтобы пользователи, вводя ключевые слова, соответсвующие теме вашего сайта в строке запроса, могли легко его найти. Но тут не все так просто, т.к. скорее всего сайтов на такую же тему, что и Ваш, уже большое количество.

Все поисковые системы хотят от Вашего сайта примерно одного и того же с небольшими различиями.

Главное — соответствие сайта заявленной теме, в противном случае, если у Вас получилось попасть на верхние позиции, Ваш сайт исключат из базы данных и все Ваши труды будут напрасны.

Нужно правильно написать заголовок страницы, мета — таги, ключевые слова и фразы.
В тексте обязательно должны встречаться слова и фразы заявленные в заголовке и мета — тагах.

Мы представляем Вашему вниманию почти все известные Российские и зарубежные поисковые системы. Вы можете проверить наличие Вашего сайта в поиске, а в случае его отсутствия, добавить Ваш сайт в ту поисковую систему, которая наиболее подходит тематике Вашего сайта.

Российские
http://www.nigma.ru Ищет однавременно на Google, Yahoo, MSN, Yandex, Rambler.
http://www.yandex.ru
http://narod.yandex.ru Ищет сайты расположенные на narod.ru
http://www.rambler.ru
http://www.google.ru
http://www.novoteka.ru Модификация google.
http://go.mail.ru
http://gogle.ru Ищет на Google, Яndex, Rambler, Aport, Filesearch. не одновременно используя переход.
http://www.punto.ru
http://www.aport.ru
http://www.world.ru
http://www.starting.ru
http://www.metabot.ru
http://webalta.ru
http://find.ru
http://www.6i.ru
http://www.ru/rus/index.html

Популярные иностранные

Англоязычные
http://www. google.com
http://www.yahoo.com
http://www.live.com Бывший http://search.msn.com
http://www.aport.com
http://www.aliweb.com
http://webcrawler.com
http://lycos.com
http://www.altavista.com
http://excite.com
http://www.excite.co.uk
http://www.ask.com Зеркало www.teeoma.com www.taoma.com
http://redtram.com Ищет на разных языках English Deutsch Español Français Italiano Русский Polski Українська
http://northernlight.com
http://alltheweb.com
http://webalta.com
http://aol.com
http://search.aol.com/aolcom/webhome
http://www.hotbot.com Ищет раздельно на msn, ask.com, google.
http://www.search.com
http://www.vivisimo.com
http://www.topsearch20.com
http://www.startnow.com
http://ez2find.com Ищет на многих языках в том числе на русском.
http://results.veoda.com
http://www.accoona.com
http://www.snap.com Показывает скриншоты найденных страниц.
http://wink.com
http://www. ru/eng/index.html
http://www.chacha.com

Франция
http://www.francite.com
http://nomade.aliceadsl.fr
http://www.voila.fr

Германия
http://www.abacho.de
http://de.ez2find.com

Украина
http://www.a.ua
http://www.meta.ua
http://www.bigmir.net
http://search.i.ua
http://www.sova.com.ua
http://search.com.ua

Китай
http://www.baidu.com

Эстония
http://www.ee
http://www.neti.ee

Литва
http://www.seklys.lt

Словения
http://www.najdi.si

Чехия
http://seznam.cz

Специализированные поисковые системы

Поиск изображения
http://www.picsearch.ru
http://www.ditto.com Язык English.

Поиск товаров
http://tyndex.ru
http://topcat.ru

Поиск по сайтам Российских компаний, производящих и продающих товары и оказывающих услуги
http://capel.ru

Поиск файлов на ftp
http://www. ffind.ru
http://www.filesearch.ru
http://www.files.lt
http://www.filewatcher.com
http://www.metaftp.com
http://ftpsearch.rambler.ru/db/ftpsearch
http://moresoft.ru Поиск программ и файлов
http://www.mmnt.ru
http://ru.findfile.net
http://www.proisk.ru Язык English.
http://www.filemirrors.com Язык English.

Поиск научной информации
http://bukinist.agava.ru Поисковая система «Букинист» предназначена для поиска книг и других электронных текстов, имеющихся в свободном доступе в Интернет.
http://www.scirus.com/srsapp
http://www.scholar.ru Поиск научных публикаций на русском языке
http://www.allreferats.narod.ru Поиск рефератов.
http://www.referat.ru Поиск рефератов.
http://megalib.com Поиск в эл. учебниках, исходниках, журналах, софте.
http://www.dialogus.ru Автоматический поиск прямых ответов на вопросы пользователей.

Поиск документации к различной бытовой технике
http://www.retrevo. com

Поиск электронных компонентов
http://www.einfo.ru
http://www.chipfind.ru
http://www.efind.ru

Поиск кода программ
http://www.Koders.com
http://www.Krugle.com
http://www.Codase.com
http://www.google.com/codesearch

Поиск Драйверов
http://www.drivers.ru

Поиск DLL файлов
http://www.dllworld.yaroslavl.ru/?lng=rus Поиск .dll .ocx .vxd.
http://www.dll-files.com Язык English.

Поиск паролей
http://www.cirt.net/cgi-bin/passwd.pl Поиск паролей по умолчанию, язык English.

Поиск по доменным именам
http://www.netcraft.com

Поиск вредоносных программ (вирусы, трояны и т.п.)
http://metasploit.com/research/misc/mwsearch/index.html

Поиск в сетях BitTorrent, EDonkey
http://www.btmon.com
http://www.torrent-search-bar.com
http://files.hotindex.ru
http://www.emoogle.com

Поиск MIDI
http://www. midisite.co.uk Язык English.

Поиск по рапиде
http://rapidshared.org

Поиск по форумам
http://forumsearch.ru

Поиск людей
http://wink.com

Статистика поисковых систем 2020 года. Исследование от тов. DrMax.

1. Общая статистика поисковых систем в 2020 году

1.1. Google — лидирующая поисковая система

В 2020 году Google является мировым лидером среди поисковых систем. Наибольшее преимущество он занимает в мобильной версии поиска, но и для десктопной версии, доля Google не имеет себе равных. Доля мирового рынка среди настольных компьютеров составляет 70,60%.

Доля иных поисковых систем на мировом рынке:

Bing — 13,2%
Baidu — 11,77%
Yahoo — 2,30% рынка.

В Google осуществляется более 2 триллионов запросов в год.

По сравнению с данными 1999 года (500 тыс запросов в день), Google крайне быстро вырос и смог опередить таких конкурентов как Yahoo, Alta Vista и AOL.

Последняя официальная статистика трафика из поисковых систем, которую мы получили от Google, показала 1,2 триллиона поисковых запросов в год, но это было в 2012 году. Исходя из этих цифр и прогнозов, сегодня количество запросов превысило 2 триллиона в год.

(по материалам Netshare и SearchEngineLand)

1.2. Bing на мировом рынке

Статистика трафика с поисковых систем показывает, что доля Bing в десктопном трафике выросла на 4,38% за три года.
В 2016 году Bing занимал только 8,11% доли рынка поисковых систем для настольных компьютеров, но данные за 2019 год показывают, что доля поисковой системы Bing выросла до 12,49%.

Возможно это связано с тем, что большинство настольных компьютеров работают под управлением Windows, а пользователи в возрасте достаточно консервативны и продолжают использовать Microsoft Edge в качестве основного браузера.

(по материалам CleverSolution)

1.3. Рост трафика у DuckDuckGo

В 2020 году доля мобильных запросов у DuckDuckGo всего лишь в два раза меньше, чем у Bing.

Несмотря на то, что DuckDuckGo все еще генерирует менее 1% всех поисковых запросов, поисковая система DuckDuckGo в два раза выросла в числе мобильных поисков за один год.

Прогнозы состоят в том, что DuckDuckGo обгонит Bing в мобильном поиске в начале 2021 года, так как количество запросов растет на 78% в год.

К сожалению, DuckDuckGo отыгрывает долю рынка не у лидера Google, а у более мелких конкурентов, таких как Yahoo и Bing.

(по материалам SearchEngineJournal)

1.4. Статистика Yahoo

С 2016 года доля поисковых запросов Yahoo на настольных компьютерах снизилась на 4,99%.

С 7,44% доли рынка США в 2016 году она упала до 2,45% в 2019 году. И, несмотря на этот результат, Yahoo по-прежнему остается одной из ведущих поисковых систем в США, занимая 4-е место по доле на рынке настольных поисковых систем.

В прошлом году мобильный трафик Yahoo упал на 1,59%.

(по материалам CleverSolution)

1.5. Поисковая система Baidu

Baidu в основном используется в Китае, где занимает 95% всего рынка. Статистика поисковых систем показывает, что платформа также используется в США, где она занимает 1,37% доли рынка. Другие страны, где Baidu популярен — это Тайвань (0,79%), Гонконг (0,64%) и Южная Корея (0,23%)

(по материалам CleverSolution)

1.6. Доля Yandex в Росcии по зарубежным материалам

Как считают зарубежные исследователи, доля Yandex.Ru составляет 44,23% поискового трафика рунета. Доля рынка поисковой системы Google в большинстве стран мира давно уже является доминирующей (кроме Китая), но в России Google столкнулся с серьезной конкуренцией.

И хотя динамика роста Google показывает, что эта поисковая система является лидером в России, тем не менее Yandex все еще занимает более 40 % рынка. Яндекс также используется в Украине, Казахстане, Китае, Белоруссии и Германии.

(по материалам StatCounter)

Интернет заработок для начинающих — Все известные Российские и зарубежные поисковые системы

Все поисковые системы хотят от Вашего сайта примерно одного и того же с небольшими различиями.

Поисковые системы

Российские
http://www.nigma.ru Ищет однавременно на Google, Yahoo, MSN, Yandex, Rambler.
http://www.

yandex.ru
http://narod.yandex.ru Ищет сайты расположенные на narod.ru
http://www.rambler.ru
http://www.google.ru
http://www.novoteka.ru Модификация google.
http://go.mail.ru
http://gogle.ru Ищет на Google, Яndex, Rambler, Aport, Filesearch. не одновременно используя переход.
http://www.punto.ru
http://www.aport.ru
http://www.world.ru
http://www.starting.ru
http://www.metabot.ru
http://webalta.ru
http://find.ru
http://www.6i.ru
http://www.ru/rus/index.html

Популярные иностранные

Англоязычные

http://www.google.com
http://www.yahoo.com
http://www.live.com Бывший http://search.msn.com
http://www.aport.com
http://www.aliweb.com
http://webcrawler.com
http://lycos.com
http://www.altavista.com
http://excite.com
http://www.excite.co.uk
http://www.ask.com Зеркало www.teeoma.comwww.taoma.com
http://redtram.com Ищет на разных языках English Deutsch Español Français Italiano Русский

http://northernlight.com
http://alltheweb.com
http://webalta.com
http://aol.com
http://search.aol.com/aolcom/webhome
http://www.hotbot.com Ищет раздельно на msn, ask.com, google.
http://www.search.com
http://www.vivisimo.com
http://www.topsearch20.com
http://www.startnow.com
http://ez2find.com Ищет на многих языках в том числе на русском.
http://results.veoda.com
http://www.accoona.com
http://www.snap.com Показывает скриншоты найденных страниц.
http://wink.com
http://www.ru/eng/index.html
http://www.chacha.com

Нас прослушивают не только телефоны, но и бытовая техника — Российская газета

Кто не знает «фокус»: стоит только «забить» в поисковик название какой-то вещи или услуги, как на ваш компьютер посыплется связанная с этим запросом реклама. А если у вас на работе сервер, и кто-то из коллег искал, предположим, кроссовки или нижнее белье, то готовьтесь и вы в ближайший час-два получать рекламу трусов и обуви.

Впрочем, к этому уже все привыкли, — удивление до сих пор вызывает реакция телефонов. Вроде бы, аппарат выключен, вы непринужденно болтаете с другом, например о машинах, или о том, какой бассейн можно выбрать на дачу. И вскоре вы начинаете получать рекламу автомобилей и всех разновидностей бассейнов, которые только есть в магазинах. Однажды после разговора о квартирах при выключенном телефоне (!) моей знакомой позвонили из агентства и предложили подобрать жилье.

Что это совпадение, паранойя? Или многочисленные гаджеты действительно слышат то, что мы говорим и при малейшей зацепке готовы выложить нам пакеты предложений товаров и услуг, которые нас могут заинтересовать?

«РГ» решила узнать мнение специалистов по информационным технологиям.

— Нет, мания преследования тут ни при чем, — говорит директор Института радиоэлектроники и информационных технологий УрФУ Илья Обабков. — Если экран вашего телефона не светится, это не значит, что он выключен, он отключится, только когда вы достанете из него аккумулятор (точнее все аккумуляторы). При этом теоретически любая умная техника, подключенная к интернету, в которой есть микрофон и камера, способна нас слышать, никаких технических сложностей в этом нет. С компьютерами, автоматически рассылающими нам рекламу, исходя из наших же запросов все еще проще. Серверы и программы анализа обрабатывают данные и дают результат в виде готовых предложений — что нам потенциально может понадобиться, что мы могли бы в итоге купить.

Как отмечают эксперты, ни для кого не секрет, что производители умной техники сегодня вовлечены в индустрию рекламы, контента, маркетинга и торговли данными пользователей. Конечно, это никем напрямую не афишируется, но часто пользователи на личном опыте убеждаются, что все, что они пишут и говорят, видят и слышат не только те, кому это адресовано.

— Если есть желание, чтобы проверить «слуховую реакцию» телефонов на сообщения извне, можно провести эксперимент, — говорит Илья Обабков, — положить в абсолютно пустую, не прослушиваемую комнату смартфон, и в течение нескольких часов или даже дней произносить три-четыре ключевых слова — предположим, «путевка», «акваланг», «билеты». Дальше попробуйте интерпретировать результаты, используя известные поисковые системы на этом смартфоне. Выводы сделайте сами.

Слушают ли нас все телефоны без исключения, как говорят специалисты, сказать сложно, но абсолютно точно, что покупая технику, очень редкий из нас читает пользовательское соглашение. Обычно мы подписываем его не глядя. А в нем может быть пункт о том, что пользователь согласен на сбор и отправку данных об использовании устройства, которое он покупает. Ну а если даже предположить, что покупатель не согласен, в магазине могут сказать, что других устройств они предложить не могут. Не оставаться же без телефона.

К слову, недавнее исследование, проведенное в США, доказало: умные телевизоры Samsung, LG, Vizio и TCL ежесекундно снимают «отпечатки» экрана и отправляют на сервер.

Четыре крупнейших производителя ТВ записывают по сути все, что смотрят американцы. Сетевой трафик телевизоров изучали программой IoT Inspector от Принстонского университета.

Средний американец проводит перед телевизором 3,5 часа в день. История просмотров ТВ не содержит конфиденциальных поисковых запросов или финансовых данных, но эта история позволяет составить подробный профиль потребителя. Это ценная информация для рекламодателей, за которую они готовы платить.

И производители телевизоров пользуются такой возможностью, потому что с юридической точки зрения десятки миллионов покупателей ТВ дали свое разрешение на сбор этих данных, не убрав галочки с соответствующих пунктов меню при установке.

Тест показал, что телевизоры активно отправляют данные на сервер не только при работе с приложениями, но даже во время просмотра телевидения в прямом эфире.

Телевизоры записывают и отправляют на сервер содержимое экрана, независимо от источника сигнала, будь это кабельное ТВ, приложение, DVD-плеер или потоковое вещание.

Результатом является посекундный журнал просмотра вами различного контента на ТВ, который Vizio продает примерно 30-ти различным компаниям.

Получается, что технически никаких проблем с «прослушкой и приглядкой» за всеми нами нет. Как говорит Илья Обабков, даже пылесос с голосовым управлением подключенный в систему умный дом, теоретически может стать инструментом сбора данных о нас. При этом любой специалист по электронике подтвердит, что динамики и наушники могут превратиться в микрофон, путем аппаратных или программных настроек.

Страшно ли вам после всего этого жить, каждый отвечает на этот вопрос для себя индивидуально. Одни считают, что это новая технологическая реальность и ничего страшного в этом нет. Все равно о нас практически все известно, ничего не скроешь в насквозь оцифрованном, умном мире. Другие считают, что это вопиющее упущение и вмешательство в нашу частную жизнь.

Удалось бы доказать в суде этот факт — разговор особой сложности. Юридические службы в компаниях-производителях техники прозорливые и очень сильные. Они утверждают, что собирают данные не о пользователях, а о том, как работает гаджет. И уж тем более речь не идет о сборе личных данных о пользователях.

В такой ситуации у крупных предприятий, стремящихся сохранять конфиденциальность внутренней информации, существуют системы охраны данных, так называемые периметры безопасности. Обычным пользователям, если у них возникают опасения, специалисты советуют установить специализированное программное обеспечение (например, антивирус) и проверить настройки доступа к функциям смартфона для всех приложений — далеко не всем им для работы нужно постоянно видеть ваше местоположение или изображение с камеры.

Кстати

Почти половину покупок россияне совершают в интернете — исследование Яндекса и Института маркетинговых исследований.

«Будьте проще, и система вас поймет»

Статистика утверждает, что российские руководители пользуются Интернетом редко. Чаще за них это делают секретари и референты. И неудивительно: поиск информации в Сети отнимает слишком много времени. В результате же вы далеко не всегда получаете то, что искали.

Однако дело не в том, что Интернет плох. Просто большинство из нас не умеют использовать возможности поисковых систем. Практикум ведет руководитель отдела поисковых систем известного поискового сайта Яндекс Илья Сегалович ([email protected]).

ПАУЧЬЯ РАБОТА

— Вероятно, чтобы более эффективно работать с поисковыми системами, пользователю желательно понимать логику, лежащую в основе их построения и функционирования. Почему, например, получается так, что на один и тот же запрос разные поисковые системы выдают разные выборки?

— Все более или менее популярные сайты представлены во всех поисковых системах.

Вообще любая такая система основана на работе робота-«паука», который исследует весь Интернет с целью сбора информации. И делает это не периодически по запросу пользователя, а постоянно, днем и ночью, в непрерывном режиме. Он собирает предварительную информацию, чтобы потом моментально реагировать на запросы.

Разница в выборках возникает потому, что у каждой поисковой системы свой «паук».

— Иными словами, хозяевам нового сайта не нужно самим регистрироваться в той или иной поисковой системе?

— Совершенно верно. За исключением тех случаев, когда речь идет о домашней страничке Васи Пупкина, мечтающего прославиться на весь мир. И при этом не имеющего ни единого друга в Сети, который поставит на него ссылку. Если же на сайте есть хотя бы одна ссылка, робот достаточно быстро сам его обнаружит.

— А зачем каждая поисковая система заводит собственного «паука»?

— При создании такой программы приходится решать сразу целый ряд задач: как сделать ее наиболее эффективной, что брать, что не брать… Ведь есть тысячи сайтов, выдающих массу крайне неинформативных страниц. Кроме того, в Интернете существуют моральные и этические проблемы, которые тоже приходится брать в расчет. И каждая поисковая система делает это на свой лад — поэтому «пауки» и отличаются друг от друга.

ТЕХНОЛОГИЯ ОБМАНА

— В чем заключаются упомянутые Вами моральные и этические проблемы Интернета?

— Простейший пример: владелец сайта хочет, чтобы все его знали. Но это стремление не сбалансировано — оно не учитывает желаний других людей, прежде всего тех, кто ищет в Сети информацию. Люди с амбициями стремятся любыми средствами — в том числе и «грязными» — попасть в выдачу
поисковой системы.

Они так настраивают свой сервер, что робот получает одну страничку, а приходящий на сайт по ссылке поисковой системы человек — уже совсем другую. Или создают специальные странички, которые с точки зрения робота представляют собой прекрасный информативный текст, но на самом деле содержат команды, перенаправляющие Ваш браузер на сайт совсем иного содержания.

Пару лет назад был судебный процесс против одного португальца. Он проанализировал запросы поисковой системы AltaVista, скопировал и положил к себе на сайт самые популярные странички, а с них сделал перенаправление на свою «порнуху».

— Может ли пользователь определить такие «подложные» странички при анализе выдачи поисковой системы?

— Если в выдаче «грязь» (например, беспорядочный набор слов), с вероятностью 10—20 процентов Вы столкнулись с одним из таких «умельцев». Особенно если пользователь мыслит стандартно: задает в строке поиска самые «ходовые» слова. Например, «работа» или «Москва». Поисковые системы стараются с этим бороться, но тем не менее в выборке почти наверняка будет присутствовать «спам» — странички, созданные специально для обмана поисковой системы.

— А как именно поисковые системы борются с этими «вредителями»?

— Отчасти с помощью анализа текста. Но не всегда это срабатывает. Можно, например, взять текст «Войны и мира», поменять Болконского на Путина. Поисковая система это «съест» как текст про Путина, потому что с точки зрения русского языка в нем все отлично. И будет приводить на сайт толпы пользователей, потому что сейчас запросов о Путине очень много.

— А почему случается так, что при использовании функции «Показать найденные слова» система выводит текст, где вместо искомых слов выделены совершенно другие, к теме отношения не имеющие? Это тоже результат чьих-то недобросовестных действий?

— Видимо, содержание сайта поменялось, а поисковая система выдала выборку, основанную на уже устаревшей информации. Ведь как действует робот: он запомнил, что слово «работа» — третье слово в пятом предложении, а «Москва» — первое слово в седьмом…

Но в этом случае внизу страницы должно быть указание на то, что сайт изменился с момента последнего захода «паука».

ВГЛУБЬ, ВДОЛЬ И ПОПЕРЕК

— Каким образом поисковая система определяет релевантность того или иного сайта запросу пользователя?

— Здесь играет роль частота употребления искомого слова на отдельных страницах сайта и то, где именно оно стоит (например, для нашего «паука» предпочтительнее, если оно в заголовке). Кроме того, вычисляется популярность каждой странички. Потом эта информация сводится воедино, и выбирается страница-«представитель», которая наиболее полно отражает содержание сайта с точки зрения интересов пользователя.

Еще один важный момент: расположение используемых в запросе слов относительно друг друга.

Предположим, пользователь вводит запрос: «управление кадрами на Украине утром рано». Он может восприниматься системой и как набор слов, и в качестве фразы. И если в Интернете будет найден сайт, где эти слова составляют предложение, именно он и будет выведен первым в результатах поиска.

— Нередко в выдаче системы содержится сразу несколько внешне одинаковых страниц. Почему так получается?

— Во-первых, на многих сайтах лежат страницы, скопированные с других ресурсов. Но это само по себе не страшно. Гораздо хуже то, что почти все страницы содержат активные элементы — программу, которая немного меняет их содержание. Например, впечатывает туда дату или счетчик посещений. А иногда на очередном сайте к исходному тексту делаются какие-то незначительные приписки: «Оцените этот текст. Я взял его на сайте у Васи Иванова. С приветом, Коля Петров».

Поисковые системы стараются с этим бороться. Но если система будет игнорировать частности, то она, например, не сможет распознавать страницы интернет-магазинов, так как они обычно отличаются друг от друга не более чем на 10 процентов: у них общая «шапка» и меню, а варьируется лишь товар.

— А какова логика построения рубрик, вывешенных на главной странице сайта?

— Во-первых, каталог разбит по тематическим рубрикам. Использование рубрикатора помогает в том случае, если выборка явно распадается на отдельные темы. К примеру, Вы делаете запрос на слово «мышь» и получаете в выдаче сайты по зоологии, по домашнему хозяйству (как бороться с грызунами) и по компьютерной тематике. Тогда Вы щелкаете по нужной Вам рубрике и отсекаете лишнюю информацию.

Во-вторых, у нас на «Яндексе» на каждый сайт «навешиваются» дополнительные характеристики: от кого исходит информация, кому она адресована, к какому региону относится.

Например, если указано, что источник информации анонимный, владелец сайта не несет никакой ответственности за его содержание. Если же сайт зарегистрирован на имя некой компании, то мы можем предполагать, что владелец подходит к формированию контента более ответственно.

Используя одновременно основные категории каталога и дополнительные рубрики, представленные у нас в левой колонке, пользователь оптимизирует поиск. Например, он ищет интернет-провайдеров в тематическом рубрикаторе. А потом «уходит» в географию: скажем, отбирает провайдеров, работающих в Смоленске. В этом случае система представит только те сайты из прежней выборки, которые относятся к заданному региону.

«ВОЛШЕБНЫЕ» ЗНАЧКИ

— Что такое расширенный поиск и зачем он нужен?

— Эта функция пригодится пользователю, если он ищет что-то специфическое. Например, фотографию. Однако для поиска картинок можно использовать и стандартную строку поиска. При условии, что Вы знаете язык запросов — умеете пользоваться «волшебными» значками.

— Я, признаюсь, про «волшебные» значки ничего не знаю. И, полагаю, многие наши читатели осведомлены не лучше. Может быть, просветите?

— Во-первых, есть универсальные значки, которые понимают все поисковые системы. (Вообще-то они перечислены в рубрике «Помощь», но туда заходят только около полупроцента пользователей.) Во-вторых, есть значки более или менее специфические.

Самый распространенный универсальный значок — кавычки. Если несколько слов взято в кавычки, поисковая система будет искать только те документы, в которых они идут подряд.

Использование кавычек позволяет значительно сократить выборку, поскольку автоматически отсеиваются «похожие» документы, которые отношения к теме не имеют.

Предположим, вы хотите узнать, что писали или говорили в Германии о «Черном квадрате» Малевича.

Задано: черный квадрат Германия. Найдено 57 страниц, причем первым номером в выборке идет страница, посвященная способам маркировки горнолыжных трасс в Германии.

Задано: «черный квадрат» Германия. Найдена всего одна страница, и она посвящена страховке и пребыванию картины Малевича в Германии.

Второй значок — плюс. Многие люди используют в запросе сразу несколько слов. И обнаруживается интересная вещь: система ищет, но не может обнаружить ни единого документа, в котором есть сразу все заданные пользователем слова.

А некоторые поисковые системы вообще отказываются делать какую-либо выборку. Другие же ищут документы, в которых встречаются самые важные из заданных слов. «Важность» слов машина определяет сама и, как правило, считает таковыми самые редкие (согласно статистике частоты употребления). Но у пользователя могут быть совсем другие приоритеты.

Чтобы избежать такого обидного оборота дела, перед самым ценным словом надо поставить «+». И наоборот, если слово вообще не нужно, перед ним нужно поставить «—».

Если же пользователь склонен к математическому мышлению, он может взять на вооружение и другие значки, которые различаются от системы к системе. Например, на англоязычных поисковых серверах в ходу значок AND (ставится между двумя словами) — он означает, что пользователь ищет документы, в которых встречаются оба слова. Российский аналог выглядит так — «&». Это, конечно, далеко не все «волшебные» значки.

Запрос с «волшебным» значком (малое|среднее) предприятие означает, что пользователь ищет информацию, касающуюся либо малых, либо средних предприятий. Во многих англоязычных поисковиках вместо значка | (или) надо писать слово OR.

— Вероятно, использование «волшебных» значков заметно повышает эффективность поиска?

— Я бы так сказал: знать эти значки необходимо, но пользоваться ими надо далеко не всегда. Только в тех случаях, когда найти нужный сайт по-другому не получается.

СИСТЕМА ЛЮБИТ ПРОСТОТУ

— Как же все-таки оптимально составить свой запрос поисковой системе?

— Моя рекомендация такая: будьте проще, и поисковая система Вас поймет.

Проще и специфичнее. Если Вы ищете определенную модель модема, не пишите в строке запроса «модем» — выборка будет необъятной. Сразу задавайте название самой модели.

Все поступающие в поисковую систему запросы можно типологически разделить на три вида.

Первый вид — информационный. То есть человек ищет конкретную информацию по данному вопросу или даже своего рода руководство к действию. Например, хочет узнать, может ли он для своего модема использовать имеющееся у него зарядное устройство от электробритвы. Или узнать, какие еще песни есть у любимой певицы. И таких запросов больше всего — примерно 40 процентов.

Второй вид — навигационные запросы (около 30 процентов). Человек знает, что существует сайт, принадлежащий некой компании, но не знает адреса. Или ищет сайт, где находится самый полный список ссылок на ресурсы по финансовой тематике. В данном случае нужна не столько конкретная информация, сколько полезная ссылка, которую можно будет, например, положить в папку «избранное».

Третий вид — транзакционный (тоже 30 процентов) — когда человеку нужно что-то купить, продать, воспользоваться какими-то услугами. Этот тип запросов характеризуется тем, что пользователь очень хорошо знает, чего именно хочет. Его не интересует, как устроены цветы. Он просто ищет того, кто может доставить букет его любимой девушке.

— А можно ли запросы из первой, информационной категории формулировать, что называется, в лоб? Например, спросить поисковую систему, как оптимизировать документооборот в компании? Или, как часто надо проводить аттестацию персонала?

— Можно. Более того, мы приветствуем такие запросы. И специально «учим» нашу систему реагировать на них.

Очень часто ответ на информационный запрос содержится уже в контексте документов, попавших в выборку.

— Но возможна ситуация, когда человек, скажем, хочет купить некое полезное устройство, но не знает, как именно оно называется. И использует в запросе слова, которые в искомом документе вообще не встречаются. Или встречаются еще в тысяче других документов, которые его совершенно не интересуют. Как быть в этом случае?

— Вот пример из жизни. Ко мне обратился товарищ; он владелец фирмы, которая занимается перевозками, и ему нужно было найти программу географического мониторинга движения транспорта. И я, совсем не зная этой темы, сделал запрос почти наугад. Условно говоря, я искал программу для транспортников, а она на самом деле называлась программой визуализации перевозок. В результате попал на какой-то форум по автомобильной теме, где узнал, как именно эта программа называется. Дальнейший поиск был делом техники.

То есть если Вы не знаете, как лучше составить запрос, надо сначала войти в «тусовку» и понять, какими словами там пользуются.

«ДОРОГАЯ ПОИСКОВАЯ СИСТЕМА!»

— Как часто совершенствуется интерфейс поисковой системы?

— Мы стараемся делать это не чаще чем раз в год. А изнутри она совершенствуется постоянно. Главная проблема: отранжировать выдачу, показать пользователю самое важное, ведь информации становится все больше.

— Может, нужен какой-то принципиально новый подход?

— Сейчас появилось несколько новых гениальных идей, и одну из них мы уже взяли на вооружение. Речь идет о том, чтобы использовать ссылки между страницами.

То есть каждая страница характеризуется не только с содержательной стороны. Принимается во внимание также то, сколько раз на нее ссылались на других сайтах. В научном мире это называется индексом цитирования.

Если на страницу сослались много раз, причем с авторитетных сайтов, то и ее авторитетность растет.

— А есть ли надежда, что в будущем пользователь сможет делать запросы, не утруждая себя необходимостью формулировать, что именно он хочет получить? Он, скажем, пишет: «Дорогая поисковая система! Пришли мне, пожалуйста, все самое интересное по теме «финансовое управление»! А система адекватно на такой запрос реагирует.

— Это уже и сейчас возможно. Есть, например, ребята из питерской компании «Интернет-Хэлп». Пишете им «Уважаемая поисковая система…», а они Вам отвечают.

А непосредственно на «Яндексе» есть форум, где можно спросить что угодно и получить ответ. Совершенно бесплатно.

Беседу вела

Анастасия РОМАШКЕВИЧ

ДВА ВАРИАНТА ПОИСКА ТОВАРОВ

Многие поисковые системы позволяют искать товар в Сети двумя способами.

Во-первых, можно просто ввести название нужного товара в стандартную строку поиска. Но надо иметь в виду, что система будет искать не товар, а слово. И в результате в выборку попадут в том числе и страницы, не имеющие к интернет-торговле никакого отношения.

Во-вторых, можно локализовать поиск, запросив систему искать только в секции «Товары» (или «Покупки»), которая представляет собой своего рода рекламный каталог. В этом случае отделять «зерна от плевел» не придется — в выдачу гарантированно попадут одни только товары. Однако за участие в этой секции поисковая система взимает с магазинов деньги. И далеко не все интернет-торговцы идут на такое сотрудничество. Поэтому выбор товаров будет меньше, чем при поиске на общих основаниях.

НЕ НЕРВНИЧАЙТЕ

Среднестатистический пользователь «Яндекса» тратит на поиск около 14 минут в день. Как правило, за это время он делает 3—4 запроса. То есть в среднем — по 4 минуты на запрос.

Между тем, считают в «Яндексе», оптимальное время поиска составляет всего 3 минуты. Пользователь, уложившийся в это время, испытывает от общения с системой исключительно положительные эмоции. Если же работать с выборкой приходится дольше, он начинает нервничать, испытывать душевный дискомфорт и прочие отрицательные эмоции.

Какие 10 самых популярных поисковых систем?

Вы знаете, помимо , это самая очевидная поисковая машина . И, возможно, второй по очевидности. На самом деле, я начну снова: какие восемь самых популярных поисковых систем после Google и Bing?

Первый список ниже содержит самые популярные поисковые системы, доступные в настоящее время, отсортированные от наиболее до наименее популярных в США.Рейтинг составлен по данным eBiz в порядке предполагаемого количества уникальных посетителей в месяц и точен по состоянию на август 2016 года.

Второй список представляет собой глобальный обзор наиболее популярных поисковых систем согласно Net Market Share, который ранжируется в порядке доли рынка и снова является точным по состоянию на август 2016 года.

В отличие от нашего предыдущего списка поисковых систем, альтернативных Google, этот список будет сосредоточен исключительно на информационном поиске, а не на… гифках или изображениях без авторских прав.