Как искать информацию в даркнете: Page not found — Global Investigative Journalism Network

Как искать сайты в сети тор?

Каждый день несколько миллиона людей заходят в так называемый Даркнет или его можно назвать глобокой поутиной. Многие просто не знают как найти сайт тор которые нужны.

Ссылки на популярные сайты в русском даркнете вы можете найти на godnotaba.top. Проект создан для ознакомительных целей. Все сделки на запрещенных сайтах сети тор являются незаконными и преследуются по закону. Проект носит исключительно ознакомительный характер и предназначен для общего понимания сети TOR.

Есть некоторые вещи которые усложняют поиск в данной сети:

1. Сайты с онион доменом не похожи на другие, обычные сайты. У них структура совершенно другая, это делает поиск трудным. Плюс сайты бывают не корректно написаны. То есть у них не бывают корректное название. В большинство случаях имина сайтов составляют буквы и цифры у которых нет единое значение.

2. Долгое время нужно ждать. Анонимность это делает тор сеть очень медленным это нужно еще один факт который делает поиск в тор сети трудным.

3. Онион сайты очень часто меняют свои доменные имена. Это нужно для дополнительной защиты и анонимности.

Нужно учитывать тот факт. Что сайты в онион сети  вполне может быть открыты спецслужбам, цель охота на людей которые занимаются не благополучным бизнесом в сети тор. Такие сайты можно назвать ловушкой. Таким способом они вычисляют пользователей тор сети и знают так скажем кто чем дышит.

Давайте уточним  как искать сайты в сети тор?  Для этого нужно использовать тор поисковики. Они вам облегчать поиск в сети тор.

Тор поисковики это действительно большая тема и сделать полный обзор очень трудно. Вся информация будет субъективно.

Первая система эта Tor поисковик Grams.

(http://s42qgnh5kesd5odo.onion/)

Как видите по названию данная система предназначена для поиска наркотических веществ.

Система не корректно работает, тут можете наткнуться на спам и много мусора.

Ресурс живёт, но повторюсь уже не так работает как раньше.

Вторая система not Evil

(http://hss3uro2hsxfogfq.onion/)

Данный поисковик можно сказать, мой любимый. Здесь нет рекламы и спама можете нормально поискать и найти что ищите.  Технология данного поисковика хороша и тут довольно просто найти нужную информацию. Быстро и надежно. Это значительно экономит ваше время.

Третий поисковик это Torch

(http://xmh57jrzrnw6insl.onion)

Данная система хранит значительно больше проиндексированных сайтов, чем другие поисковые системы. Здесь больше рекламы чем на других поисковых системах, так как прибыль системы составляет только добавленные баннеры.

Это рабочие поисковые системы на момент публикации данной статьи.

Погружение в даркнет

Что такое даркнет и глубокая сеть (deep web)? И что там можно найти?

«Глубокую паутину» часто путают с даркнетом. Хоть у них и много общего, но это не одно и то же. «Глубокую» и «темную» сети разделяет очень тонкая черта.

В чем отличие между глубокой сетью и даркнетом?

Под глубокой паутиной обычно понимают все страницы, форумы и интернет-магазины, которые недоступны для поисковых служб (например, Google и Bing). Поисковики их не индексируют, однако, они используют стандартный сетевой протокол HTTP/HTTPS, поэтому на них можно попасть используя обычный браузер.

Как и глубокая сеть, даpкнет включает все скрытые и недоступные для поисковых служб страницы, форумы и интернет-магазины. Но (в отличие от глубокой сети) для доступа к дapкнету необходимо специальное программное обеспечение, например браузер Tor.

Как и Deep Web, дaркнет часто обвиняют в противозаконной деятельности, например, в распространении незаконных товаров и услуг. В глубокой сети и даpкнете, помимо всего прочего, можно купить наркотические вещества, оружие, различное вредоносное ПО. К сожалению, там можно оплатить даже услуги заказных убийств. Даpкнет обеспечивает большую анонимность, чем глубокая сеть, что, вероятно, является причиной его популярности у киберпреступников. Он покрывается анонимной сетью виртуальных тоннелей со множеством узлов и шифрованием, но различные случаи утечек внутренней информации указывают на то, что в распоряжении Разведывательной службы АНБ США могут иметься способы отслеживания даже пользователей Tor.

Исследуя DarkNet

При посещении даpкнета впервые сразу же обращает на себя внимание более сложная навигация, чем в при использовании обычных интернет-страниц. Причина — отсутствие индексации и адреса, которые намного тяжелее запомнить.

В даpкнете нельзя просто ввести адрес вроде «google.com». Вместо этого для доступа к нужному сайту вам придется запомнить и ввести намного более длинный и сложный URL-адрес. Например, чтобы посетить «скрытую вики-энциклопедию» даркнета, для перехода на страницу нужно вручную ввести «kpvz7ki2v5agwt35.onion». Если вы застали первые дни работы интернета, до индексации страниц, принцип работы в нем был похожий.

Здесь можно найти несколько поисковых служб, которые позволяют более или менее точно найти то, что вам нужно. Но результат окажется несравнимым с поиском в Google или Bing. Скрытая вики-энциклопедия HiddenWiki полезна тем, что распределяет по категориям некоторые доступные службы.

Законно или нет?

Хотя в даркнете и можно найти множество незаконных вещей (включая оружие, пиратское программное обеспечение, наркотические вещества, поддельные документы и прочее), не все в нем является преступным. Он создавался, чтобы обеспечить доступ к информации при сохранении конфиденциальности, и в обход цензуры. Здесь можно найти вполне законные материалы, включая произведения искусства, книги, фотографии и видеозаписи, которые подпадают под цензуру или заблокированные материалы и порталы, запрет которых обусловлен введенными властями нормами и ограничениями. Кроме того, обеспечивается безопасное общение для различных осведомителей и, например, журналистов, занимающихся расследованиями.

При выходе в даpкнет важно помнить, что это дикий лес без каких-либо правил. Нет никаких гарантий безопасности покупаемых или скачиваемых материалов и даже их доставки. Количество случаев мошенничества и подделок очень велико. Загруженные материалы или купленные товары могут запросто оказаться запрещенными в вашей стране и сделать вас правонарушителем. В каждом уголке даркнета, также как и в интернете, можно столкнуться с вредоносным ПО. Однако антивирус может обеспечить вам защиту.

Даpкнет можно сравнить с неблагополучным районом, где с большой вероятностью можно встретиться со злоумышленниками. Будьте осторожны, если решите его посетить. Следите за нашими новостями в социальных сетях ВКонтакте, Одноклассники, Facebook и Twitter.

Maltego и поиск в DarkNet – Tom Hunter

Рассказываем, как искать информацию в даркнете в рамках OSINT с помощью всеми любимого (нами уж точно) Maltego.

DarkNet.

О, сколько в этом слове: и пафос, и ужас, и непонимание… и область полезных знаний. Основной негатив исходит от тех, кто не слишком в теме. По сути, Dark Net — это такой же интернет, но живет он в своем первозданном и незамутненном корпоративным и госрегулированием виде.

И сегодня мы поговорим о том, как искать информацию в рамках OSINT именно по этой части всемирной паутины.

Перед прочтением рекомендую ознакомиться с предыдущими статьями цикла о Maltego:

Часть 1 — Что такое Maltego и зачем оно вообще нужно
Часть 2 — Интерфейс и базовое устройство
Часть 3 — Maltego и OSINT в Facebook
Часть 4 — Maltego и OSINT в ВК, Instagram, LinkedIN и других соцсетях
Часть 5 — Применение системы распознавания лиц для OSINT в Maltego
Часть 6 — Поиск информации с применением геолокации

Там много полезной информации.

Disclaimer

Для корректной демонстрации механик я буду использовать уже известные мне рабочие примеры по поиску информации. Они не являются реальными в полной мере, однако являются крайне репрезентативными. Вся информация, представленная в данной статье, носит ознакомительный характер. Для повторения указанных методик Вам потребуется связка из Maltego с плагином Social Links. Ну и будем честны: OSINT по DarkNet-форумам, это не поиск своих бывших одноклассников в ВК и не то, чем вы станете заниматься в рамках стандартных кейсов по OSINT. В рамках данной статьи я постараюсь описать методы из личной практики, в которых я использовал поиск по DarkNet.

 

Проверка благонадежности сотрудников

Иногда у работодателя, особенно крупного, возникают резонные вопросы: «А не приторговывают ли мои сотрудники инсайдерской информацией?» или «А все ли чисто с нашим новым кандидатом на должность Х?». Надежный метод — проверка как биографии работника, так и его поведения в социальных сетях. Но иногда, чтобы ответить на упомянутые выше, да и многие другие вопросы, требуется копнуть еще глубже. И вот тут-то нам на помощь может прийти Maltego.

Проверять мы будем некую Тину Томсон (Tina Tomson) из Берлина на предмет незаконных делишек.

Для начала берем известную информацию о работнике и заполняем граф. Нам известна локация (Берлин), Имя и Фамилия (Тина Томсон) и e-mail ([email protected]).

Используя Entitie: Search Person мы запускаем Transform: [Facebook] Search Users. Получаем аккаунт Тины в Facebook.

Для Entitie: Email Address мы стартуем Transform: [Facebook] Lookup By Email. Малтиго добросовестно находит тот же аккаунт, чем подтверждает, что это нужный нам человек.

Продолжаем продвигаться и запрашиваем на граф все данные со страницы Facebook через Transform: [Facebook] Get User Details. Получаем дополнительную информацию о месте работы, учебы, проживания (если данная информация заполнена в профиле фейсбук). Бонусом получаем связанный Инстаграм-аккаунт.

Теперь будет финт, который я показывал ранее в статье №3 про Facebook. Нам потребуется выполнить для обоих аккаунтов Transform: [Convert] To Entities From Profile, чтобы получить предполагаемые Alias’ы человека (ну или если по-простому — предположительные никнеймы).

Теперь мы имеем первые 2 стартовые точки, через которые мы можем выполнить поиск по форумам в Dark Net — это пользователи с никнеймом tina.tomson.927 и tinkati87.

Запускаем Transform: [Darknet] Search User по обоим Alias и смотрим результат.

А вот и пользователь. На некоем Skynet Forum по адресу 5jloХХХХХХwk3.onion (изменено, ибо нефиг тут ссылками на даркнет-форумы кидаться) имеется пользователь с ником tinkati87. Вот это уже подозрительная информация!

Давайте проверим что пишет данный пользователь. Для этого запускаем Transform: [Darknet] User Posts.

А вот и доказательства. Пользователь под ником tinkati87 на форуме Skynet Forum продает ответы на экзаменационные тесты в Берлинском Университете. А как мы с Вами уже установили ранее — именно там она и работает. И именно под таким же ником она зарегистрирована в Instagram.

 

Также, при необходимости, мы можем выгрузить на граф топик форума и из него выгрузить аккаунты пользователей, которые принимают участие в обсуждении, чтобы в последующем попытаться выявить студентов, которые, возможно, купили у нее ответы на тест.

 

Еще одной интересной опцией является возможность выгрузки целиком веб-страницы форума прямо из Maltego.

И заметьте, все это расследование мы смогли провести, даже ни разу не посещая данный форум и сайты *.onion.

PGP ключ, который смог

Частой практикой в DarkNet является применение PGP-ключей для защиты переписки. Однако эти ключи могут сыграть злую шутку с владельцем, если попадут не в те руки.

— Как? — спросите вы? Очень просто! PGP-ключ частенько содержит в себе информацию о том, к какому E-mail он относится. Чуете, чем пахнет применительно к DarkNet? Специально для этого случая я сгенерировал такой ключ. Загрузив его в Entitie: PGP Open Key, мы запускаем магию посредством Transform: [Convert] PGP To Email.

Вуаля! Мы имеем адрес электронной почты.

Что делать дальше? А давайте поищем в Facebook такой аккаунт. Запускаем Transform: [Facebook] Lookup By Email.

И, как итог, получаем аккаунт в Facebook.

 

Поиск информации на форумах DarkNet по ключевым словам и фразам

Теперь давайте к более интересному — поиску информации по заданным ключевым фразам. Тут все, как с Google. Берем Entitie: Phrase и задаем ей значение искомого слова/предложения. Применяем Transform: [Darknet] Search Posts и получаем выборку по постам на различных форумах, где есть указанная нами фраза.

Помимо просто поиска по форумам есть еще возможность искать «товары» на тематических сайтах. В этом нам поможет все таже Entitie, только теперь мы запустим Transform: [Darknet] Search Products. В выдаче мы получим ссылки на «лоты» продуктов.

Еще поиск товаров можно выполнить от Entitie: Location. Тут нам доступны Transforms по поиску доставки в локацию и из нее: [Darknet] Search Products (shipping from) и [Darknet] Search Products (shipping to).

Как и всегда с Даркнетом — товары на любой вкус. От огнестрела до обнала. Шутка. Ну почти.

 

Вот и все на сегодня

Не забывайте — даркнет может быть таким же отличным источником информации, как и Google. Главное — уметь искать. Не пропустите следующие статьи! Если у Вас есть вопросы, то не стесняйтесь, задавайте в комментариях к статьям. Я постараюсь ответить и помочь.

09.11.2020 Публикации

Россияне держат валюту в даркнете – Газета Коммерсантъ № 61 (7023) от 08.04.2021

Россияне чаще других пользуются криптовалютными биржами, через которые проходят трансакции в даркнете, выяснили аналитики платформы Clain. По их мнению, это может быть связано с популярностью в стране запрещенных сервисов, в том числе площадки по продаже наркотиков Hydra. Эксперты отмечают, что пока «теневые биржи» находятся в серой зоне, то есть работают полулегально, но с развитием регулирования и приходом на криптовалютный рынок крупных игроков число таких площадок будет снижаться.

Доля России на глобальном рынке теневых криптоопераций составила в 2020 году 40%, подсчитали аналитики компании Clain. По их словам, страна стала основной юрисдикцией для площадок обмена и торговли криптовалютами с низким уровнем верификации.

Clain проанализировала более 200 подобных площадок, в числе которых LocalBitcoins, BitBits, BitZlato, WebMoney. Базирующаяся в Финляндии LocalBitcoins, например, облегчает торговлю валютой за биткойны. Пользователи размещают на сайте рекламу, где указывают курсы валют и способы оплаты для покупки или продажи биткойнов. В России LocalBitcoins заблокирована Роскомнадзором, но, по собственным данным платформы за 2020 год, 17,4% ее пользователей — из России.

По данным Clain, к концу 2020 года число пользователей высокорисковых бирж (с низким уровнем верификации пользователя) в мире насчитывало до 350 млн человек.

Рост доли России на рынке незаконных криптоопераций может быть связан с популярностью в стране запрещенных сервисов теневого сегмента интернета, считают в Clain. Так, главным контрагентом с наибольшим объемом нелегальных трансакций на подобных площадках в 2020 году стал сервис по продаже наркотиков Hydra, основанный в России, где находится большая часть его пользователей, следует из исследования компании.

Общий объем трансакций на криптовалютных биржах растет: в 2020 году он увеличился на 30%, превысив $19,7 млрд, говорится в исследовании. Объем незаконных трансакций вырос на 16%, до $4,2 млрд. Поток операций между сервисами теневого сегмента интернета и подобными биржами в 2020 году составил почти $800 млн. Но их доля в общем криптообороте всех бирж снижается и по итогам 2020 года составила 2%. Это происходит из-за ужесточения требований по верификации на криптовалютных платформах, отмечают в Clain.

Масштаб теневой деятельности, связанной с криптовалютой, сокращается, поскольку на этот рынок вышли крупные западные игроки, включая банки, инвестиционные фонды и публичные компании, отмечает сооснователь глобальной платежной сети Mercuryo Григорий Вайсман, и они работают строго в рамках законодательства. «В результате серая часть криптовалютной индустрии претерпела относительное сокращение»,— добавляет эксперт.

По его мнению, рост объема трансакций на биржах с низким уровнем верификации пользователей — следствие общего роста рынка криптовалют.

По мнению господина Вайсмана, Россия заняла заметную долю на рынке теневых трансакций из-за низкого уровня финансовой просвещенности отечественных пользователей: «Они не задаются вопросом о том, насколько защищены будут их денежные средства на бирже». Нередки случаи, подчеркивает эксперт, когда подобные площадки внезапно прекращают существование и пользователи теряют все деньги.

Теневые площадки для обмена криптовалют пока находятся в серой зоне с точки зрения российского законодательства, говорит председатель комиссии по правовому обеспечению цифровой экономики московского отделения Ассоциации юристов России Александр Журавлев. Но регулирование в этой сфере ужесточается. В январе 2021 года вступил силу закон о цифровых финансовых активах, поясняет юрист, по которому все биржи должны быть занесены в реестр. Также, уточняет господин Журавлев, на рассмотрении Госдумы находятся поправки к Налоговому кодексу, по которым владение цифровой валютой нужно декларировать.

Юлия Степанова

Как искать в даркнете

Мы давно привыкли к “поисковикам” и не представляем полноценную работу в интернете без них.

Мало кто помнит времена каталогов ресурсов, altavista и astalavista, с их скромными выдачами. Сейчас примерно такая же ситуация с сетью Tor. Сегодня мы будем разбираться как и где искать информацию в даркнете.

Каждый, кто ставил браузер тор – задавался вопросом, а что дальше? Конечно, те кто ставили его – делали это с определенной целью. Но давайте договоримся сразу: даркнет – это не только вещества и хардкор, это еще и свободный доступ к информации. Именно про это мы и поговорим сегодня.

ПОИСК В ТОР

Даркнет больше похож на интернет образца 90х, поисковики работают плохо, перекрестные ссылки между onion-сайтами редки, Tor работает медленно, Onion сайты довольно часто меняют адреса.

Начнём с поисковиков.

Ahmia 

http://msydqstlz2kzerdg.onion

Один из лучших поисковиков в даркнете, в индексе много ресурсов. Возможен поиск даже по i2p. Ahmia ищет как по отечественным, так и по зарубежным ресурсам. Является инициативой некоммерческой организации Hermes Center for Transparency and Digital Human Rights, поддерживающей Tor и развивающей сервисы анонимного общения Globaleaks и Tor2web. Наверное по этой причине в этом поисковике почти нет рекламы и резульаты волне релевантны.

HayStack

http://haystakvxad7wbk5.onion

Сравнительно новый, но неплохо показывающий себя поисковый движок. По их собственным заявлениям – самый крупный из существующих. Почему бы и не проверить их громкие заявления?

Torch

http://xmh57jrzrnw6insl. onion

Один из самых старых поисковых движков даркнета. На ресурсе очень много рекламы за счет которой он и существует. Результаты далеко не всегда релевантны и на один запрос в выдаче вам может показать совсем другое. Тем не менее, покопавшись в результатах можно обнаружить и полезное.

Not Evil

http://hss3uro2hsxfogfq.onion

По словам создателей, в базе поисковика более 28056215 индексов. И глядя на выдачу сложно с этим не согласиться. По своему функционалу и качеству абсолютно не уступает конкурентам. Благодаря продуманным и постоянно улучшающимся алгоритмам ранжирования найти нужную информацию довольно просто.

Candle

http://gjobqjj7wyczbqie.onion

Не самый продвинутый поисковик, но он тоже работает. А для сети Tor – это уже важно. Возможно здесь вы и найдёте что-то, чего нет на других ресурсах. По крайней мере, почему бы и не попробовать?

Duckduckgo

https://duckduckgo. com

Несмотря на слухи о возможной покупке этой платформы Apple, duckduckgo по прежнему работает неплохо как в клирнете, так и в даркнете. Попробуйте вбить в поиск то что вам нужно и добавить ,onion. Впрочем, такой же поиск можно осуществить и с помощью google. Думаю, что результаты не заставят себя ждать.

КАТАЛОГИ САЙТОВ

Runion Wiki

http://doe6ypf2fcyznaq5.onion

Каталог русскоязычных ресурсов от Runion.

The Uncensored Hidden Wiki

http://zqktlwi4fecvo6ri.onion/wiki/index.php/Main_Page

Самый большой каталог ссылок на ресурсы в темной сети. Здесь вы найдёте ссылки и ссылки на ссылки. Жаль, что на ресурсе представлены преимущественно зарубежные ресурсы. Тем не менее, это неплохое место для начала ознакомления с темной сетью.

И ЭТО ВСЁ?

Нет! На самом деле даркнет намного больше, чем кажется. И помимо очевидных (и запрещенных) вещей на просторах тёмной сети можно встретить множество уникальных и очень содержательных ресурсов, которые помогут вам не только отыскать информацию, которую никогда не найдёте в клирнете, но и узнать много нового, и не обязательно плохого.

 

Оригинал статьи

Apple разрешила искать сторонние устройства через приложение «Локатор» Статьи редакции

{«id»:231046,»url»:»https:\/\/vc.ru\/tech\/231046-apple-razreshila-iskat-storonnie-ustroystva-cherez-prilozhenie-lokator»,»title»:»Apple \u0440\u0430\u0437\u0440\u0435\u0448\u0438\u043b\u0430 \u0438\u0441\u043a\u0430\u0442\u044c \u0441\u0442\u043e\u0440\u043e\u043d\u043d\u0438\u0435 \u0443\u0441\u0442\u0440\u043e\u0439\u0441\u0442\u0432\u0430 \u0447\u0435\u0440\u0435\u0437 \u043f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u0435 \u00ab\u041b\u043e\u043a\u0430\u0442\u043e\u0440\u00bb»,»services»:{«facebook»:{«url»:»https:\/\/www.facebook.com\/sharer\/sharer.php?u=https:\/\/vc.ru\/tech\/231046-apple-razreshila-iskat-storonnie-ustroystva-cherez-prilozhenie-lokator»,»short_name»:»FB»,»title»:»Facebook»,»width»:600,»height»:450},»vkontakte»:{«url»:»https:\/\/vk.com\/share.php?url=https:\/\/vc.ru\/tech\/231046-apple-razreshila-iskat-storonnie-ustroystva-cherez-prilozhenie-lokator&title=Apple \u0440\u0430\u0437\u0440\u0435\u0448\u0438\u043b\u0430 \u0438\u0441\u043a\u0430\u0442\u044c \u0441\u0442\u043e\u0440\u043e\u043d\u043d\u0438\u0435 \u0443\u0441\u0442\u0440\u043e\u0439\u0441\u0442\u0432\u0430 \u0447\u0435\u0440\u0435\u0437 \u043f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u0435 \u00ab\u041b\u043e\u043a\u0430\u0442\u043e\u0440\u00bb»,»short_name»:»VK»,»title»:»\u0412\u041a\u043e\u043d\u0442\u0430\u043a\u0442\u0435″,»width»:600,»height»:450},»twitter»:{«url»:»https:\/\/twitter. com\/intent\/tweet?url=https:\/\/vc.ru\/tech\/231046-apple-razreshila-iskat-storonnie-ustroystva-cherez-prilozhenie-lokator&text=Apple \u0440\u0430\u0437\u0440\u0435\u0448\u0438\u043b\u0430 \u0438\u0441\u043a\u0430\u0442\u044c \u0441\u0442\u043e\u0440\u043e\u043d\u043d\u0438\u0435 \u0443\u0441\u0442\u0440\u043e\u0439\u0441\u0442\u0432\u0430 \u0447\u0435\u0440\u0435\u0437 \u043f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u0435 \u00ab\u041b\u043e\u043a\u0430\u0442\u043e\u0440\u00bb»,»short_name»:»TW»,»title»:»Twitter»,»width»:600,»height»:450},»telegram»:{«url»:»tg:\/\/msg_url?url=https:\/\/vc.ru\/tech\/231046-apple-razreshila-iskat-storonnie-ustroystva-cherez-prilozhenie-lokator&text=Apple \u0440\u0430\u0437\u0440\u0435\u0448\u0438\u043b\u0430 \u0438\u0441\u043a\u0430\u0442\u044c \u0441\u0442\u043e\u0440\u043e\u043d\u043d\u0438\u0435 \u0443\u0441\u0442\u0440\u043e\u0439\u0441\u0442\u0432\u0430 \u0447\u0435\u0440\u0435\u0437 \u043f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u0435 \u00ab\u041b\u043e\u043a\u0430\u0442\u043e\u0440\u00bb»,»short_name»:»TG»,»title»:»Telegram»,»width»:600,»height»:450},»odnoklassniki»:{«url»:»http:\/\/connect. ok.ru\/dk?st.cmd=WidgetSharePreview&service=odnoklassniki&st.shareUrl=https:\/\/vc.ru\/tech\/231046-apple-razreshila-iskat-storonnie-ustroystva-cherez-prilozhenie-lokator»,»short_name»:»OK»,»title»:»\u041e\u0434\u043d\u043e\u043a\u043b\u0430\u0441\u0441\u043d\u0438\u043a\u0438″,»width»:600,»height»:450},»email»:{«url»:»mailto:?subject=Apple \u0440\u0430\u0437\u0440\u0435\u0448\u0438\u043b\u0430 \u0438\u0441\u043a\u0430\u0442\u044c \u0441\u0442\u043e\u0440\u043e\u043d\u043d\u0438\u0435 \u0443\u0441\u0442\u0440\u043e\u0439\u0441\u0442\u0432\u0430 \u0447\u0435\u0440\u0435\u0437 \u043f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u0435 \u00ab\u041b\u043e\u043a\u0430\u0442\u043e\u0440\u00bb&body=https:\/\/vc.ru\/tech\/231046-apple-razreshila-iskat-storonnie-ustroystva-cherez-prilozhenie-lokator»,»short_name»:»Email»,»title»:»\u041e\u0442\u043f\u0440\u0430\u0432\u0438\u0442\u044c \u043d\u0430 \u043f\u043e\u0447\u0442\u0443″,»width»:600,»height»:450}},»isFavorited»:false}

8386 просмотров

ДеанонимизаTOR: где заканчивается анонимность в даркнете

В отличие от традиционных технологий World Wide Web, технологии «луковой маршрутизации» даркнета Tor дают пользователям реальный шанс остаться анонимными. Этим шансом воспользовались многие, но одни сделали это для самозащиты или из любопытства, тогда как другие ощутили ложное чувство безнаказанности и увидели возможность анонимно вести дела – торговать запрещенными товарами, распространять запрещенный контент и т.д. Однако дальнейшие события, например, арест создателя сайта Silk Road, убедительно доказали, что анонимный бизнес на самом деле не такой уж анонимный.

Тем не менее, операции спецслужб, направленные на поимку преступников, которые создавали в Tor сайты для распространения запрещенных товаров, не содержат технических деталей о деанонимизации преступников. Их отсутствие может означать, что реализация даркнета Tor содержит какие-либо уязвимости и недостатки конфигурации, которые позволяют деанонимизировать любого Tor-пользователя. В своем исследовании мы на практических примерах рассмотрим варианты деанонимизации пользователей Tor и сделаем соответствующие выводы.

Как вычисляют пользователей?

История развития даркнета Tor знает много теоретических способов и практических попыток деанонимизации пользователя. Все они условно делятся на две группы: атаки на клиентскую сторону (браузер) и атаки на соединение.

Проблемы браузеров

Из утекших документов NSA можно узнать, что спецслужбы не брезгуют использовать эксплойты к браузеру Firefox, на базе которого построен Tor Browser. Однако использование средств эксплуатации уязвимостей, как пишут в своей же презентации NSA, не позволяет осуществлять постоянную слежку за пользователями даркнета, так как жизненный цикл эксплойтов очень короткий, и существование разных версий браузера (содержащих конкретную уязвимость и не содержащих ее) ставит под удар очень узкий круг пользователей.

Утекшие материалы NSA с обзором различных вариантов деанонимизации пользователей Tor (Источник: www.theguardian.com)

Кроме псевдоофициальных документов Tor-сообщество знает о других, более интересных и хитрых атаках на клиентскую сторону. Так, например, исследователями из Массачусетского Технологического Института было установлено, что Flash создает выделенный канал коммуникации между специальным сервером злоумышленника, который фиксирует реальный IP-адрес клиента, и жертвой, что полностью ее дискредитирует. Однако разработчики Tor Browser оперативно отреагировали на данную проблему, исключив обработчики Flash-контента из своего детища.

Flash как способ узнать настоящий IP-адрес жертвы (Источник: http://web.mit.edu)

Для реализации другого, более свежего способа компрометации браузера используется библиотека WebRTC. Она предназначена для организации канала передачи видеопотока между браузерами с поддержкой HTML5, и по аналогии с вышеописанным Flash ранее позволяла установить реальный IP-адрес жертвы. Так называемые STUN-запросы WebRTC идут в незашифрованном виде в обход Tor со всеми вытекающими последствиями. Однако и это «недоразумение» также было оперативно исправлено разработчиками Tor Browser, который теперь по умолчанию блокирует WebRTC.

Атаки на канал

В отличие от атак на браузер, атаки на канал между Tor-клиентом и сервером внутри или вне даркнета выглядят не так убедительно – большинство концепций, представленных учеными в лабораторных условиях, пока еще не нашли своего PoC «в полях».

Среди множества теоретических работ стоит выделить фундаментальную работу, основанную на анализе трафика с использованием протокола NetFlow. Авторы исследования полагают, что у атакующей стороны есть возможность анализировать NetFlow-записи на маршрутизаторах, которые непосредственно являются узлами Tor или находятся недалеко от них. NetFlow-запись содержит следующую информацию:

• Номер версии протокола;
• Номер записи;
• Входящий и исходящий сетевой интерфейс;
• Время начала и конца потока;
• Количество байт и пакетов в потоке;
• Адрес источника и назначения;
• Порт источника и назначения;
• Номер протокола IP;
• Значение Type of Service;
• Для TCP-соединений — все наблюдаемые в течение соединения флаги;
• Адрес шлюза;
• Маски подсети источника и назначения.

Все это практически деанонимизирует клиента.

Деанонимизация Tor-клиента на основе анализа трафика (Источник: https://mice. cs.columbia.edu)

Подобные исследования, основанные на анализе трафика, требуют огромное количество точек присутствия внутри Tor для того, чтобы у атакующего была возможность деанонимизировать любого пользователя в любом промежутке времени. Именно по этой причине, данные исследования не представляют практической ценности для исследователей-одиночек, не обладающих огромным пулом вычислительных ресурсов. И именно по этой причине мы пойдем другим путем и рассмотрим методы анализа активности Tor-пользователя, интересные с практической точки зрения.

Пассивная система мониторинга

Каждый резидент сети может предоставить свои вычислительные ресурсы для организации Node-сервера – узлового элемента сети Tor, который выполняет роль посредника в информационном обмене клиента сети. Exit node являются последним звеном в операции расшифровки трафика, а значит, представляют собой точку, в которой информация проходит в открытом виде и может быть перехвачена.

Так, из расшифрованного трафика имеется возможность собирать различную информацию. Например, из HTTP-заголовков можно извлечь адреса onion-ресурсов, к которым следует HTTP-пакет отправителя. При этом можно обойтись без использования внутренних поисковиков и каталогов сайтов, ведь в них могут содержаться уже неактуальные данные о неработающих onion-сайтах.

Однако пассивная система мониторинга не позволяет провести деанонимизацию пользователя в полном смысле этого слова, потому что исследователь довольствуется только теми данными (сетевыми пакетами), с которыми юзер расстается самостоятельно «по доброй воле».

Активная система мониторинга

Для того чтобы узнать какую-либо информацию о резиденте даркнета, необходимо спровоцировать его отдать какие-либо данные о своем окружении. Другими словами, необходима активная система сбора данных.

Ярким примером активной системы мониторинга, развернутой в полевых условиях, является множество выходных узлов, которые были обнаружены экспертом компании Leviathan Security. Эти узлы отличались от прочих выходных узлов тем, что осуществляли инжект вредоносного кода в «пролетающие» бинарные файлы. Пока клиент скачивал какой-либо файл из интернета, используя Tor в качестве средства обеспечения анонимности, вредоносный exit node осуществлял MitM-атаку и внедрял вредоносный код в скачиваемый бинарный файл.

Данный инцидент хорошо иллюстрирует концепцию активной системы мониторинга, однако также демонстрирует ее обратную сторону – любая активность на выходном узле (манипуляция с трафиком) легко и оперативно определяется автоматизированными средствами, и узел заносится сообществом Tor в список запрещенных.

Начнем с «чистого листа»

HTML5 принес с собой не только WebRTC, но и интересный тег «canvas», который предназначен для создания растрового изображения при помощи JavaScript. У данного тега есть особенность отрисовки изображений, и их рендеринг каждый браузер осуществляет по-разному в зависимости от различных факторов, таких как:

• различные графические драйвера и аппаратная составляющая на стороне клиентов;
• различный набор программного обеспечения в операционной системе и различная конфигурация программной среды.

Параметры отрисованных изображений могут уникально идентифицировать браузер и его программно-аппаратное окружение. На данной особенности можно создать так называемый фингерпринт. Несмотря на то, что эта техника не нова и используется, например, некоторыми рекламными агентствами в интернете для отслеживания интересов пользователей, не все его методы реализуемы в Тоr Browser. Например, в TBB нельзя эксплуатировать supercookie, использование Flash и Java отключено по умолчанию, введено ограничение в использовании шрифтов, а при использовании некоторых других техник выводится нотификация, которая может насторожить пользователя.

Так, первые попытки canvas-фингерпринтинга с помощью функции getImageData(), которая получает данные о пикселях, были заблокированы Тоr Browser:

Однако в настоящий момент все еще остаются «лазейки» для фингерпринтинга в Тоr без нотификаций.

Я узнаю тебя по шрифтам

Для идентификации Тоr Browser можно воспользоваться функцией measureText(), которая измеряет ширину отрисованного в canvas текста:

Используем measureText() для получения размера шрифта, уникального для данной ОС

Если ширина получившихся шрифтов представляет собой уникальное значение (а иногда оно еще и с плавающей точкой), то мы можем идентифицировать браузер, в том числе Тоr Browser. Мы допускаем, что в некоторых случаях полученные значения ширины шрифтов могут совпадать у разных пользователей.

Следует отметить, что не одна эта функция позволяет получить уникальные значения. Пример другой функции – getBoundingClientRect(), с помощью которой можно получить высоту и ширину прямоугольника, обрамляющего текст.

После того как проблема фингерпринта пользователей, которая касается и пользователей Tor Browser, стала известна сообществу, была создана соответствующая заявка. Однако разработчики Tor Browser не спешат закрывать данный недостаток конфигурации, ссылаясь на неэффективность блэклистинга подобных функций.

Официальный ответ разработчиков Tor на проблему рендеринга шрифтов

Выходим в «поле»

Данный подход был реализован исследователем с никнеймом «KOLANICH». Используя обе функции – measureText() и getBoundingClientRect(), – он написал скрипт, протестировал его локально в различных браузерах и получил уникальные идентификаторы.

Используя ту же методику, мы организовали тестовый стенд. Задача стенда: осуществить фингерпринтинг Tor Browser в различном программно-аппаратном окружении.

Для решения данной задачи мы взяли блог одного из авторов и на его главную страницу внедрили JavaScript, который использует функции measureText() и getBoundingClientRect() для измерения полученных в результате рендеринга шрифтов в браузере посетителя веб-страницы. Скрипт отправляет полученные значения в виде POST-запроса веб-серверу, который, в свою очередь, сохраняет этот запрос в своих логах.

Фрагмент лога веб-сервера, в котором виден фингерпринт Tor Browser

В настоящее время мы собираем результаты работы данного скрипта. Пока все полученные значения уникальны. Мы сообщим о полученных результатах.

Чем это грозит на практике

Каким образом данная концепция может быть использована в реальных условиях для идентификации пользователей Tor Browser? Вышеописанный JS-код может быть установлен на нескольких объектах — участниках информационного обмена в даркнете:

• Exit node. Реализация MitM-атаки, в ходе которой JS-код внедряется во все веб-страницы, которые посещает во внешней Сети резидент даркнета.
• Внутренние onion-ресурсы и внешние веб-сайты, контролируемые атакующими. Например, атакующий поднимает свой «дорвей» – специально подготовленную веб-страницу под конкретную целевую аудиторию и осуществляет фингерпринт всех посетителей.
• Уязвимые к XSS (предпочтительно к «хранимым», но не обязательно) внутренние и внешние веб-сайты.

Объекты, которые могут фингерпринтить Tor-пользователя

Последний пункт является особенно интересным. Просканировав на веб-уязвимости примерно 100 onion-ресурсов (которые оказались в логах пассивной системы мониторинга) и отсеяв «false positive», мы выяснили, что примерно 30% всех проанализированных ресурсов даркнета подвержены атакам «межсайтового скриптинга».

Все это означает, что атакующий теперь может не ограничиваться поднятием фермы выходных узлов для того, чтобы деанонимизировать пользователя. Он может скомпрометировать веб-сайты и поднять дорвеи, разместить там JS-код и собирать базу данных уникальных фингерпринтов.

Процесс денонимизации Tor-юзера

Таким образом, для идентификации пользователей атакующие могут не ограничиваться размещением JS-кодов на легальных сайтах. Наличие дополнительных объектов внедрения JS-кода расширяет их возможные точки присутствия, в том числе внутри даркнета.

Теоретически, используя такой подход, атакующий может выяснить, сайтами каких тематик интересуется, например, пользователь с уникальным фингерпринтом «c2c91d5b3c4fecd9109afe0e», и на каких ресурсах он авторизуется. Результат: профиль пользователя на веб-ресурсе и история серфинга этого пользователя.

Вместо заключения

На официальном сайте проекта Tor размещен ответ разработчиков на вопрос о включенном по умолчанию JavaScript в Tor Browser:

Официальный ответ разработчиков Tor Browser на вопрос о JavaScript

Судя по этому ответу, отключения разработчиками JS-кода в Tor Browser ожидать не приходится.

Данное исследование является чисто теоретическим. Мы не устанавливали какие-либо сервера в инфраструктуру Tor. Все исследования были проведены в собственной инфраструктуре, имитирующей «даркнет» и отключенной от интернета

Что такое дарквеб? Как получить к нему доступ и что вы найдете

Определение темной сети

Темная сеть — это часть Интернета, которая не индексируется поисковыми системами. Вы, несомненно, слышали разговоры о «даркнете» как о рассаднике преступной деятельности — и это так. Исследователи Дэниел Мур и Томас Рид из Королевского колледжа в Лондоне классифицировали содержимое 2723 действующих темных веб-сайтов за пятинедельный период 2015 года и обнаружили, что 57% размещают незаконные материалы.

Исследование 2019 года «В паутину прибыли», проведенное доктором Майклом Макгуайресом из Университета Суррея, показывает, что ситуация стала еще хуже. С 2016 года количество темных веб-списков, которые могут нанести вред предприятию, увеличилось на 20%. Из всех списков (за исключением тех, которые продают наркотики) 60% потенциально могут нанести вред предприятиям.

Вы можете покупать номера кредитных карт, всевозможные лекарства, оружие, поддельные деньги, украденные учетные данные подписки, взломанные учетные записи Netflix и программное обеспечение, которое помогает вам взламывать чужие компьютеры.Купите учетные данные для входа на счет в Bank of America на сумму 50 000 долларов США за 500 долларов США. Получите 3000 долларов в виде фальшивых 20-долларовых банкнот за 600 долларов. Купите семь предоплаченных дебетовых карт с балансом 2500 долларов на каждой за 500 долларов (включая экспресс-доставку). «Пожизненный» премиум-аккаунт Netflix стоит 6 долларов. Вы можете нанять хакеров, которые будут атаковать компьютеры за вас. Вы можете купить логины и пароли.

Но не все незаконно, у даркнета есть и законная сторона. Например, вы можете вступить в шахматный клуб или BlackBook, социальную сеть, которую называют «Facebook Tor.”

Примечание. Этот пост содержит ссылки на темные веб-сайты, к которым можно получить доступ только с помощью браузера Tor, который можно бесплатно загрузить по адресу https://www.torproject.org.

Глубокая сеть и темная сеть: в чем разница?

Термины «глубокая сеть» и «темная сеть» иногда используются как синонимы, но это не одно и то же. Глубокая сеть относится ко всему в Интернете, что не индексируется и, следовательно, доступно через поисковую систему, такую ​​как Google.Контент в глубокой сети включает все, что находится за платным доступом, или требует учетных данных. Он также включает в себя любой контент, который его владельцы заблокировали индексирование веб-сканерами.

Медицинские записи, платный контент, членские веб-сайты и конфиденциальные корпоративные веб-страницы — это лишь несколько примеров того, что составляет глубокую сеть. По оценкам, размер глубокой сети составляет от 96% до 99% Интернета. Только крошечная часть Интернета доступна через стандартный веб-браузер, обычно известный как «чистый Интернет».

Темная сеть — это подмножество глубокой сети, которая намеренно скрыта, и для доступа к ней требуется определенный браузер — Tor, как описано ниже. Никто точно не знает размер даркнета, но по большинству оценок он составляет около 5% всего интернета. Опять же, не весь даркнет используется в незаконных целях, несмотря на его зловещее название.

Инструменты и службы даркнета, представляющие корпоративный риск

В отчете «В сеть прибыли прибыли» определены 12 категорий инструментов или услуг, которые могут представлять риск в виде нарушения сети или компрометации данных:

• Заражение или атаки, в том числе вредоносное ПО, распределенный отказ в обслуживании (DDoS) и ботнеты
• Доступ, включая троянские программы удаленного доступа (RAT), кейлоггеры и эксплойты
• Шпионаж, включая услуги, настройку и таргетинг
• Услуги поддержки, такие как учебные пособия
• Учетные данные
• Фишинг
• Возврат
• Данные клиента
• Эксплуатационные данные
• Финансовые данные
• Интеллектуальная собственность / коммерческая тайна
• Другие возникающие угрозы

В отчете также выделены три переменные риска для каждой категории:

• Обесценивание предприятия, которое может включать подрыв доверия к бренду, репутационный ущерб или уступку позиций конкуренту.
• Нарушение работы предприятия, которое может включать DDoS-атаки или другое вредоносное ПО, влияющее на бизнес-операции
• Обман предприятия, который может включать кражу интеллектуальной собственности или шпионаж, снижающий конкурентоспособность компании или приводящий к прямым финансовым убыткам

Наборы Ransomware-as-a-service (RaaS) были доступны в даркнете в течение нескольких лет, но эти предложения стали гораздо более опасными с появлением специализированных преступных группировок, таких как REvil или GandCrab.Эти группы разрабатывают свои собственные сложные вредоносные программы, иногда в сочетании с уже существующими инструментами, и распространяют их через «филиалов».

Филиалы распространяют пакеты программ-вымогателей через темную сеть. Эти атаки часто включают в себя кражу данных жертв и угрозы опубликовать их в даркнете, если выкуп не будет уплачен.

Эта бизнес-модель успешна и прибыльна. IBM Security X-Force, например, сообщила, что 29% ее программ-вымогателей в 2020 году были связаны с REvil.Преступные группы, разработавшие вредоносное ПО, получают долю доходов своих филиалов, как правило, от 20% до 30%. По оценкам IBM, прибыль REvil за последний год составила 81 миллион долларов.

Темный веб-браузер

Вся эта деятельность, это видение шумного рынка, может заставить вас думать, что перемещаться по темной сети легко. Это не так. Место настолько беспорядочное и хаотичное, как и следовало ожидать, когда все анонимны, а существенное меньшинство намерено обманывать других.

Доступ к даркнету требует использования анонимного браузера под названием Tor.Браузер Tor направляет запросы вашей веб-страницы через серию прокси-серверов, которыми управляют тысячи добровольцев по всему миру, делая ваш IP-адрес неидентифицируемым и неотслеживаемым. Tor работает как по волшебству, но в результате получается опыт, похожий на сам даркнет: непредсказуемый, ненадежный и безумно медленный.

Тем не менее, для тех, кто готов смириться с неудобствами, темная паутина дает незабываемый взгляд на изнанку человеческого опыта — без риска затаиться в темном переулке.

Поисковая система в темной сети

Поисковая система в темной паутине существует, но даже лучшие из них вынуждены не отставать от постоянно меняющегося ландшафта. Этот опыт напоминает поиск в Интернете в конце 1990-х годов. Даже одна из лучших поисковых систем, Grams, возвращает повторяющиеся результаты, которые часто не имеют отношения к запросу. Списки ссылок, такие как The Hidden Wiki, — еще один вариант, но даже индексы также возвращают разочаровывающее количество подключений с тайм-аутом и ошибок 404.

Темные веб-сайты

Темные веб-сайты выглядят почти так же, как и любой другой сайт, но есть важные отличия.Один из них — это структура именования. Вместо .com или .co, темные веб-сайты заканчиваются на .onion. Согласно Википедии, это «суффикс домена верхнего уровня специального использования, обозначающий анонимный скрытый сервис, доступный через сеть Tor». Браузеры с соответствующим прокси-сервером могут получить доступ к этим сайтам, а другие — нет.

Темные веб-сайты также используют зашифрованную структуру именования, которая создает URL-адреса, которые часто невозможно запомнить. Например, популярный коммерческий сайт Dream Market имеет неразборчивый адрес «eajwlvm3z2lcca76.лук.»

Многие темные сайты создаются мошенниками, которые постоянно перемещаются, чтобы избежать гнева своих жертв. Даже коммерческие сайты, которые, возможно, существовали год или больше, могут внезапно исчезнуть, если владельцы решат обналичить и сбежать с деньгами условного депонирования, которые они держат от имени клиентов.

Сотрудники правоохранительных органов все лучше умеют находить и преследовать владельцев сайтов, продающих незаконные товары и услуги. Летом 2017 года группа кибер-копов из трех стран успешно закрыла AlphaBay, крупнейший источник контрабанды в даркнете, вызвав содрогание по всей сети.Но многие торговцы просто мигрировали в другое место.

Анонимный характер сети Tor также делает ее особенно уязвимой для DDoS-атак, сказал Патрик Тике, директор по безопасности и архитектуре Keeper Security и постоянный эксперт компании по этой теме. «Сайты постоянно меняют адреса, чтобы избежать DDoS-атак, что создает очень динамичную среду», — сказал он. В результате: «Качество поиска сильно различается, а многие материалы устарели».

Торговля в темной сети

Темная сеть процветает благодаря биткойнам, криптовалюте, которая позволяет двум сторонам проводить доверенные транзакции, не зная друг друга.«Биткойн был основным фактором роста темной сети, а темная сеть — важным фактором роста биткойнов», — говорит Тике.

Практически все сайты дарквеб-торговли проводят транзакции в биткойнах или других вариантах, но это не означает, что вести там бизнес безопасно. Присущая этому месту анонимность привлекает мошенников и воров, но чего вы ожидаете, когда покупаете оружие или наркотики, чтобы стать вашей целью?

Сайты темной веб-коммерции имеют те же функции, что и любые операции электронной розничной торговли, включая рейтинги / обзоры, тележки для покупок и форумы, но есть важные различия.Один из них — это контроль качества. Когда и покупатели, и продавцы анонимны, надежность любой рейтинговой системы сомнительна. Рейтингами легко манипулировать, и даже продавцы с большим послужным списком, как известно, внезапно исчезают вместе с криптовалютными монетами своих клиентов, а позже открывают магазин под другим псевдонимом.

Большинство провайдеров электронной коммерции предлагают услугу условного депонирования, которая удерживает средства клиентов до тех пор, пока продукт не будет доставлен. Однако в случае спора не ожидайте обслуживания с улыбкой.В значительной степени покупатель и продавец должны решить эту проблему. Каждое сообщение зашифровано, поэтому даже для самой простой транзакции требуется ключ PGP.

Даже завершение транзакции не является гарантией того, что товар прибудет. Многим приходится пересекать международные границы, и таможенные службы принимают жесткие меры с подозрительными посылками. Темный новостной сайт Deep.Dot.Web изобилует рассказами о покупателях, которые были арестованы или заключены в тюрьму за попытку совершения покупки.

Является ли даркнет незаконным?

Мы не хотим, чтобы у вас сложилось впечатление, что все в даркнете является гнусным или незаконным.Сеть Tor начиналась как анонимный канал связи и до сих пор служит ценной цели, помогая людям общаться в среде, враждебной свободе слова. «Многие люди используют его в странах, где есть подслушивание или где доступ в Интернет криминализирован», — сказал Тике.

Если вы хотите узнать все о защите конфиденциальности или криптовалюте, темная сеть может многое предложить. Существует множество частных и зашифрованных почтовых сервисов, инструкции по установке анонимной операционной системы и расширенные советы для тех, кто заботится о конфиденциальности.

Есть также материалы, которые вы не удивитесь найти в общедоступной сети, такие как ссылки на полнотекстовые издания труднодоступных книг, сборники политических новостей с основных веб-сайтов и руководство по паровым туннелям под кампус Технологического института Вирджинии. Вы можете анонимно обсуждать текущие события на Intel Exchange. Существует несколько сайтов, информирующих о нарушениях, в том числе темная веб-версия Wikileaks. Pirate Bay, сайт BitTorrent, который сотрудники правоохранительных органов неоднократно закрывали, там жив и здоров.Даже у Facebook есть присутствие в темной сети.

«Все больше и больше легальных веб-компаний начинают там присутствовать», — сказал Тике. «Это показывает, что они осведомлены, они на передовой и все в курсе».

Это также имеет большое практическое значение для некоторых организаций. Правоохранительные органы пристально следят за темной сетью в поисках украденных данных в результате недавних нарушений безопасности, которые могут привести к обнаружению преступников. Многие ведущие средства массовой информации отслеживают сайты разоблачителей в поисках новостей.

Оставаться на вершине хакерского подполья

Патрик Тике из Keeper проверяет регулярно, потому что для него важно быть в курсе того, что происходит в хакерском подполье. «Я использую даркнет для ситуационной осведомленности, анализа угроз и слежения за происходящим», — сказал он. «Я хочу знать, какая информация доступна, и иметь внешнюю линзу для цифровых активов, которые монетизируются — это дает нам представление о том, на что нацелены хакеры».

Если вы найдете свою собственную информацию в даркнете, вы мало что сможете с этим поделать, но, по крайней мере, вы будете знать, что вас взломали.Итог: если вы можете мириться с плохой производительностью, непредсказуемой доступностью и случайным шоковым фактором даркнета, его стоит посетить. Только там ничего не покупайте.

Примечание редактора: эта статья, первоначально опубликованная в январе 2018 г., была обновлена ​​17 ноября 2020 г. и добавлена ​​информация о программах-вымогателях как услуге.

Copyright © 2020 IDG Communications, Inc.

Как выполнять поиск в «глубокой сети» — и почему вам это нужно

В Интернете миллионы веб-сайтов.Здесь вы найдете все, от CNN.com до кулинарных каналов YouTube. Но вы можете не осознавать, что то, что вы видите в Интернете, — это лишь часть того, что есть на самом деле. Огромные сети, называемые «глубокой паутиной» и «темной паутиной», скрываются под поверхностью.

Вероятно, вы слышали о дарквебе раньше, но есть большая вероятность, что термин «глубокая паутина» менее знаком. Это не так широко обсуждается, как даркнет, хотя и намного шире. И темная сеть иногда дает глубокой паутине плохую репутацию, потому что их часто принимают друг за друга.Щелкните здесь, чтобы увидеть пять распространенных мифов о даркнете.

Однако глубокая паутина — это все в Интернете, что не является легкодоступным для обычного пользователя Интернета. Во многих случаях для доступа к его содержимому требуется специальный веб-браузер. В других случаях контент скрыт за брандмауэром и защитой частных сетей — как правило, малых предприятий и корпораций.

Чего не хватает обычным поисковым системам

В девяти случаях из 10 обычного поиска в Google будет достаточно, и он принесет желаемые результаты; Тем не менее, поисковые системы, такие как Google, Yahoo и Bing, имеют доступ только к проиндексированной информации.Это означает, что любой сайт, помеченный как частный, может остаться незамеченным.

Подумайте обо всей информации, которой делятся прямо у нас под носом. Если вы хотите провести более глубокий поиск, эти веб-браузеры — то, что вам нужно.

Технические новости, которые важны для вас, ежедневно

Конфиденциальность, безопасность, последние тенденции и информация, необходимая для лучшей цифровой жизни.

DeeperWeb.com

Уйти от Google — непростая задача.Все мы хорошо знакомы с тем, как работает поисковая система и как она отображает наши результаты. Итак, одно из лучших мест для начала — это сайт под названием DeeperWeb.com. Эта поисковая система работает на базе Google, поэтому результаты упорядочиваются так же, как вы привыкли.

Dogpile

Эта мощная поисковая система извлекает результаты из Google, Yahoo и Yandex, специально копая через метапоисковую машину нужную информацию. Преимущество для вас в том, что каждая поисковая система имеет свои собственные методы и алгоритмы поиска, и Dogpile использует их все для получения наиболее обширных результатов.

DuckDuckGo

DuckDuckGo — надежная замена Google, и она не отслеживает и не нацеливается на ваш IP-адрес или историю поиска. Поскольку вам не нужно беспокоиться о таргетированной рекламе или попадании в пузырь поискового фильтра, это означает, что вы получите больше результатов. Вы также можете сделать DuckDuckGo расширением своего браузера и активировать дополнительные настройки конфиденциальности, чтобы максимально защитить историю поиска.

Yippy

Сайт Yippy типа Google выходит за рамки результатов поиска и блокирует контент для взрослых, включая сайты с порнографией и азартными играми.Кроме того, сайт защищает вашу конфиденциальность. Он не будет собирать личную информацию о вас, такую ​​как ваше имя, номер телефона, адрес или адрес электронной почты. То есть, пока вы находитесь в США. «Yippy не будет отслеживать гражданина США ни по какой причине», за исключением случаев, когда этого требует постановление суда, повестка в суд или закон. Йиппи сказал, что если вы находитесь за пределами США, вас будут отслеживать, чтобы оно соответствовало протоколам, установленным правительством.

Tor

Если вы рассматриваете Tor как вариант для просмотра веб-страниц, обязательно сделайте свою домашнюю работу.У этого бесплатного программного обеспечения есть темная сторона — не само программное обеспечение, а места, к которым оно предоставляет доступ в Интернете. Tor дает вам доступ к даркнету, части интернета, которая часто используется для незаконной деятельности; однако в даркнете также может быть информация, которой больше нигде не делится. Репортеры часто используют Tor для обнаружения новых потенциальных клиентов или личного общения со своими источниками.

Специальные поисковые системы

Когда вы ищете информацию, иногда вы точно знаете, что ищете, а иногда нет.Вышеуказанные сайты помогут вам найти широкий спектр информации; однако, если вам нужно сузить круг вопросов, вам стоит обратить внимание на эти удивительные специализированные базы данных.

• Archive.org: Некоммерческая библиотека с миллионами бесплатных книг, фильмов, программного обеспечения, музыки и многого другого
• Библиотека Конгресса: Просмотрите исторические архивы гражданской войны, Великой депрессии, Первой мировой войны, мировой войны II и другие монументальные события, сформировавшие нашу страну.
• Ости.gov: Хотите знать, чем занимается правительство со своими исследованиями? Эта полезная поисковая система предоставляет эту информацию у вас под рукой.
• Смитсоновские библиотеки: Коллекции, охватывающие все, от антропологии до зоологии
• Британская энциклопедия: Помните всю информацию, содержащуюся в Британской энциклопедии? Он все еще доступен. Вот где вы его найдете.
• Pipl.com: Хотите знать, что в Интернете связано с вашим именем или именем любимого человека? Этот сайт будет искать это в глубокой сети.

Предупреждение

Одним из самых больших преимуществ использования обычных поисковых систем, таких как Google, Yahoo и Bing, является то, что они обеспечивают определенный уровень защиты. Точно так же, как маловероятно, что ограбление произойдет среди бела дня, также менее вероятно, что кто-то разместит незаконные материалы в открытом доступе.

По этой причине даркнет стал домом для довольно ужасной онлайн-активности. Щелкните здесь и послушайте наш специальный подкаст, объясняющий темную сеть и то, чего вам следует избегать.

Dark Web Searching

Dark Web — это подмножество Интернета, доступ к которому осуществляется с помощью специальных средств, таких как браузер TOR, и который не сразу доступен из чистой сети. Термины даркнет и даркнет часто используются как синонимы. Для справки в этой статье мы будем называть темную сеть сетевой инфраструктурой, например сеть TOR или сеть I2P, а темную сеть — аспектом контента, к которому пользователи получают доступ и просматривают.

Есть много замечательных ресурсов, которые объясняют, что такое даркнет, откуда он возник и какие гнусные действия происходят там ежедневно. Эта статья ориентирована, , на определение вариантов безопасного доступа, а затем на несколько вариантов поиска, доступных с использованием свободно доступных поисковых систем темной сети, которые сканируют темную сеть.

Следователи, стремящиеся использовать традиционные методы поиска в даркнете, должны действовать безопасным образом и знать о вариациях результатов, предоставляемых различными поисковыми системами, а также участниками, которые активны в различных типах даркнетов.

Различные «Темные сети»

В большинстве статей о темной сети упоминается Луковый маршрутизатор (TOR), поскольку он является наиболее популярным и исследуемым. Однако важно отметить, что существует множество даркнетов и ниже приведен пример трех распространенных:

Другой распространенный даркнет — Zeronet. У каждого из них разные требования или методы доступа.

Различные сведения о даркнете:

Если говорить о TOR, пакет браузера для подключения можно скачать здесь: https: // www.torproject.org/download/

Простой доступ к TOR со стандартного компьютера не рекомендуется из-за возможных последствий для безопасности. Для многих пользователей они предпочтут простоту использования, а не безопасность, и подключение напрямую со своей стандартной рабочей станции, но это требует серьезных соображений безопасности. Браузер TOR построен на базе Firefox, поэтому он подвержен тем же уязвимостям, что и Firefox. Хотя команда Firefox может регулярно исправлять уязвимости, обновление до пакета TOR может задерживаться, что подвергает пользователей риску.Учитывая характер контента и хостов сайтов в темной сети, это должно быть критически важным соображением, чтобы не поставить под угрозу вашу машину как с точки зрения атрибуции, так и с точки зрения вредоносного ПО.

Рекомендуется применять безопасные методы подключения, чтобы защитить вашу атрибуцию и хост-машину от компрометации.

Параметры безопасного просмотра

Существует множество мнений и вариантов того, как получить доступ к темным сетям. Ниже приведена простая диаграмма с тремя вариантами, которые вы можете использовать при подключении к даркнете, чтобы обеспечить более безопасный уровень защиты.У каждого из них разные барьеры для входа, и пользователи будут иметь разные требования, бюджеты или соображения в рамках своего подхода к подключению.

Вариант 1:

Вариант 2:

• Установите и настройте локальную виртуальную машину с помощью такой платформы, как VirtualBox (https://www.virtualbox.org/) и загрузите предварительно настроенные виртуальные машины ( например, TL VM: https://www.tracelabs.org/initiatives/osint-vm) или установка операционной системы с нуля

• Установить доступ TOR / darknet на виртуальной машине

• Настроить VPN на стандартной рабочей станции

• Подключайтесь к даркнету из виртуальной машины

Вариант 3:

• Подготовьте автономный исследовательский ноутбук / компьютер (рассмотрите возможность использования загрузочных операционных систем, таких как Tails, для более низких уровней). атрибуция)

• Настройте VPN на своем исследовательском ноутбуке

• Установите TOR / даркнет-доступ на исследовательском ноутбуке изначально

• Подключите t o даркнет изначально из вашего исследовательского ноутбука

Заявление об отказе от ответственности: все, что вы просматриваете в даркнете, которое визуализируется локально, может по-прежнему храниться в локальных кэшах при любом из указанных выше параметров.Вы должны учитывать правовые аспекты того, что вы просматриваете, в контексте ваших соответствующих регулирующих законов. OSINT Combine не несет ответственности за просматриваемый контент или методы доступа, описанные выше.

Поиск в темной сети

Темная сеть сканируется и индексируется многочисленными нестандартными поставщиками, то есть ваши традиционные поисковые системы, такие как Google и Bing, не будут сканировать сайты .onion в сети TOR. Тем не менее, прокси-сайты TOR, которые используют службы типа TOR2WEB, чтобы позволить пользователям просматривать темные веб-сайты из своего стандартного открытого веб-браузера, регулярно индексируются в Google, хотя не рекомендуется получать к ним доступ через прокси по причинам атрибуции.

Поисковые системы регулярно меняют адреса .onion или идут вверх / вниз. Если какая-либо из следующих ссылок становится недоступной или вы ищете URL-адреса поисковых систем, отличным сайтом является https://onion.live/ — просто найдите здесь имя поисковой системы, чтобы найти ее URL.

Кроме того, существует множество «скрытых» вики-сайтов, которые предоставляют каталог ресурсов, который также включает URL-адреса активных поисковых систем. Ниже приведены некоторые из доступных поисковых систем.

Поисковые системы Dark Web: ( описаний, полученных с веб-сайтов хоста )

Не все поисковые системы созданы равными.Они значительно различаются в зависимости от результатов (из-за сайтов, которые сканируются на их платформах), расширенных параметров поиска (таких как логический или многоязычный поиск) и намерений. В идеале следователи будут просматривать несколько поисковых систем в рамках своего расследования и сравнивать результаты или нацеливать свой поиск на поисковые системы, которые предоставляют конкретную услугу.

Наблюдение за луком

Некоторые исследователи должны будут выявлять и отслеживать новые сайты .onion по мере их появления.Это может быть наблюдение за шаблонами, определение новых векторов или просто создание дополнительных конвейеров новых URL-адресов .onion для подачи в специальные механизмы сканирования для опытных пользователей.

Есть три хороших ресурса, которые могут удовлетворить это требование:

Ускользание информации

Расследование людей в темной сети обычно сводится к установлению связи между поверхностной и темной сетью посредством утечки информации. Здесь одни и те же атрибутные маркеры, например Имена пользователей, ключи PGP, адреса криптовалюты используются участниками как в поверхностной, так и в темной сети.

При попытке атрибутировать пользователей, участвующих в транзакциях или действиях в темной сети, утечка информации чаще связана с плохими привычками. Ниже приведена диаграмма, на которой показано, как информация, распространяемая и совместно используемая между поверхностной и темной сетью, может концептуально использоваться для проведения атрибуции:

Ключевым моментом является анализ социальной сети после того, как вы определили маркеры на поверхностной сети. Социальные группы группируются на основе интересов или прямых ассоциаций, составление схемы сетей, а затем анализ языка и изображений размещенного контента может дать ценные подсказки, которые помогут с установлением авторства.Здесь нет серебряной пули и большого количества ложных срабатываний, поэтому в вашем расследовании важно быть внимательным и внимательным.

При попытке деанонимизировать и идентифицировать хосты сайтов может потребоваться дополнительное техническое исследование сертификатов SSL. Вводное руководство по этому вопросу можно найти на сайте Hunchly ( https://www.hunch.ly/resources/Hunchly-Dark-Web-Setup.pdf )

Заключение

Эта статья была разработана, чтобы предоставить базовое введение в поиск в темной сети и некоторые из основных моментов для расследований в темной сети, которые вы можете использовать, когда доступны только бесплатные ресурсы.Ключевым выводом является требование использовать несколько вариантов поиска, чтобы максимально увеличить количество потенциальных клиентов и настроить эффективный рабочий процесс, чтобы вы не были перегружены вариантами, доступными вам для поиска.

Если вы заинтересованы в более подробном обучении по темной сети, посетите нашу интерактивную академию OSINT Combine Academy для самостоятельного обучения по адресу https://academy.osintcombine.com или свяжитесь с нами, чтобы узнать о наших предложениях по обучению на заказ.

Использование поисковых систем в глубокой сети для академических и научных исследований

Вы, возможно, уже слышали этот термин мимоходом, о теме «глубокой паутины», о которой ходят слухи, но о которой редко говорят.Сеть под Интернетом, заполненная петабайтами данных и информации, недоступных для стандартной панели поиска Google, Bing или Yahoo.

Но что такое глубокая паутина и какой цели она служит для большего исследовательского сообщества в целом? Прочтите наше руководство, чтобы узнать все, что вам нужно знать о глубокой сети, в том числе о том, что это значит, где он живет и как вы можете использовать его в своих интересах.

Глубокая паутина: правильное определение

Google использует так называемый «поисковый робот» для поиска в Интернете результатов статических веб-страниц, а затем возвращает их вам, когда вы вводите нужные слова в строку поиска.Это покрывает лишь очень небольшую часть фактической информации, доступной в Интернете.

Все результаты, которые вы получаете при обычном поиске в Google, поступают из так называемого «Surface Web». Surface Web охватывает ваши основы: социальные сети, новостные сайты, покупки, блоги и т. Д.

Затем есть Deep Web, который не следует путать с «Dark Web», часть Интернета, которая чаще всего ассоциируется со службами подключения для защиты конфиденциальности, такими как TOR, и онлайн-торговыми площадками, такими как ныне несуществующий Silk Road.

См. Также: Как получить доступ к глубокой сети и даркнету

Глубокая паутина содержит постоянно обновляемый поток необработанной, непроверенной информации, насыщенной сложными техническими терминами и таким количеством диаграмм, что этого достаточно, чтобы искусственный интеллект Google Deep Dream взорвал электрическую плату. Это документы, в которых хранятся записи о таких вещах, как данные переписи, данные миссий НАСА, патенты и академические бумажные базы данных.

По оценкам, вся поверхностная сеть составляет всего около 20 терабайт информации, или 5 процентов информации, доступной для открытого поиска.С другой стороны, глубокая сеть занимает около 7,5 пета байта информации, или около 95 процентов от общего объема.

Как искать в глубокой сети

Знание, куда смотреть при погружении в глубокий конец сети. В то время как глубокая сеть почти бесконечно обширна, когда дело доходит до объема информации, которую вы можете найти, в отличие от того, к чему большинство людей привыкло при поиске чего-либо в Google, все эти данные не централизованы в одном месте.

Это означает, что для любого количества различных предметов, которые вы только можете придумать (финансы, программное обеспечение, бизнес, экономика, научные круги и т. Д.), Существует равное количество поисковых систем, предназначенных для погружения в глубокие веб-архивы этих конкретных предметов.

Одна проблема, с которой сталкиваются некоторые исследователи, — это проблема платного доступа. От этого никуда не деться; для того, чтобы эти веб-сайты / базы данных работали и свет был включен, многие из упомянутых ниже сайтов будут скрывать свой контент за платным доступом, стоимость которого может достигать 50 долларов за чтение одного документа, или ежемесячные планы подписки, которые дают вам доступ ко всем контент за фиксированную плату.

Если для вас проблема с платным доступом, мы рекомендуем вам попробовать расширение Unpaywall для браузера Google Chrome. Unpaywall автоматически ищет в Интернете бесплатную версию любого контента, к которому вы пытаетесь получить доступ, в котором говорится, что он находится за платным доступом. Вы не всегда можете получить бесплатный результат для каждой статьи, которую вы ищите, но все же приятно знать, что есть опция, если она вам понадобится в крайнем случае.

Ниже мы включили список некоторых сервисов, которые, по нашему мнению, лучше всего справляются с каталогизацией всей информации, которая может вам понадобиться во время вашего следующего исследовательского проекта, с особым акцентом на те, которые облегчают поиск, чем большинство.

JSTOR — Первое и, вероятно, наиболее очевидное дополнение к этому списку — база данных JSTOR. Основанная в 1995 году, эта сокровищница исследований продолжает быть одной из первых остановок для любого академического исследователя на пути к кроличьей норе. Предлагая полнотекстовый поиск более чем 2 000 отдельных журналов и 15 000+ книг, JSTOR незаменим для тех, кто предпочитает подход «единого окна» при глубоком изучении данных. JSTOR позволяет вам получить доступ к трем книгам бесплатно, а подписка на сервис JPASS (19 долларов.50 в месяц / 199 долларов в год) даст вам неограниченное чтение и 10 загрузок PDF каждые 30 дней (до 120 в год). Если вы не можете себе этого позволить, многие университеты (а точнее, их преподаватели) должны иметь подписку, которую они могли бы позволить вам использовать, если вы достаточно вежливо попросите!

Archive.org — гигантская база данных медиа, которая стала общественным достоянием. Звукозаписи, старые видео, редкие книги — почти все, что вам может понадобиться для создания вашей следующей великолепной презентации в школе, на работе или и там, и там! Партнером компании Wayback Machine, которая имеет более 280 миллиардов веб-страниц, которые были проиндексированы почти с момента появления самого Интернета.

Библиотека Конгресса — Оцифрованные архивы всего, что попало в Библиотеку Конгресса. Более 200 лет исторической информации, а также современные тома

Osti.gov — Государственный исследовательский архив с историей всех исследований, проведенных правительством. За них уплачены ваши налоговые доллары, так почему же они не должны принадлежать вам? На 100% доступен поиск и может возвращать результаты из любого документа, который вы пытаетесь найти.

Общий

Каталог публикаций правительства США

GPO — Федеральная база данных публикаций.

Национальный архив — инструменты исследования и онлайн-база данных Национального архива. Если вам что-то нужно знать об истории Америки или нынешнем состоянии страны, то это то место, которое вам нужно.

HighWire Press — онлайн-каталог крупнейшего хранилища бесплатного полнотекстового и несвободного текста, рецензируемого контента из более чем 1000 различных журналов. В том, что скрывается за платным доступом, а что нет, все ясно. Единственный способ узнать это — отфильтровать условия поиска до такой степени, чтобы вы могли увидеть достаточно публикаций как на платной, так и на неоплачиваемой стороне прохода, чтобы решить, нужно ли вам вытаскивать этот кошелек.

Британская энциклопедия — оригинальный Google, теперь онлайн со всеми замечательными изображениями и текстом, которые вы еще помните из книг!

FRED — Актуальные финансовые данные, охватывающие 470 000 временных рядов из 85 различных источников, эта база данных предоставляется бесплатно благодаря помощи Федерального резервного банка Сент-Луиса. FRED ссылается на ряд других не менее впечатляющих источников экономических данных. Он должен быть основным ресурсом для всех, кто занимается исследованиями в области финансов и экономической теории в США.

Книги

Google Книги — самый очевидный выбор. Хотя другие списки ниже подходят для того, что они делают, но ни один из них не может в полной мере сравниться с мастерством Google в области сканирования книг. У некоторых книг будет частичный предварительный просмотр, у других — полный доступ, а в некоторых случаях вы вообще ничего не увидите. Весь текст оцифрован (и доступен для поиска), но то, сможете ли вы прочитать свои результаты, полностью зависит от состояния лицензии на авторское право на этот конкретный фрагмент текста.

Scribd — это может не совсем соответствовать роли вашей окончательной базы данных академических исследований, однако ежемесячная подписка по-прежнему является хорошим способом оставаться в курсе любых новых статей, которые могут быть опубликованы в ваших любимых журналах или иметь возможность выполнять поиск. книги, которые только что попали на полки. Раздел документов позволяет пользователям загружать практически все, что угодно, с небольшими ограничениями, поэтому он стал хранилищем для многих учебников и другого академического контента.

Project Gutenberg — 53 000 бесплатных электронных книг, доступных в Интернете, также являющихся частью архива.org доступная для поиска база данных.

Страница электронных книг — доступная для поиска база данных, содержащая более 28 000 английских книг с полным текстом, доступным в Интернете.

Исследовательский институт Гетти — Библиотечные фонды научно-исследовательского института Гетти включают более одного миллиона книг, исследовательских фотографий, периодических изданий и каталогов аукционов. Здесь также есть довольно большая коллекция редких или уникальных материалов, посвященных истории искусства и архитектуре.

Право и политика

Юридическая библиотека Конгресса — претендует на звание крупнейшего собрания юридических материалов в мире, доступно более 2 миллионов томов.

THOMAS (Библиотека Конгресса) — Законодательная информация из Библиотеки Конгресса. Здесь хранятся все текущие и прошлые законопроекты, которые когда-либо были представлены в зале Палаты представителей.

LexisNexis — надежный ресурс для любого начинающего студента-юриста или практикующего юриста. Ежедневно обновляемая база данных, но это не из дешевых. Цены на различные услуги, предлагаемые LexisNexis, будут варьироваться в зависимости от услуги и даже от того, в каком штате вы выполняете поиск, но ожидайте, что вы потратите более 125 долларов в месяц на такие услуги, как Lexis Advance, которые позволяют вам искать среди миллионов представленных судебных и юридических документов. в реальных случаях со всех концов Соединенных Штатов.В вашей местной библиотеке или университете может быть подписка, которую вы можете использовать.

Медицина и здравоохранение

Science.gov — портал научной информации, предоставленный правительственными агентствами США. Выполняет поиск в совокупной базе данных из 200 миллионов различных публикаций и журналов, что идеально подходит для тех, кто пытается проводить исследования по темам, которые конкретно относятся к категории «наука».

PubMed — Национальная медицинская библиотека США содержит более 16 миллионов ссылок из MEDLINE и других журналов по естественным наукам, начиная с 1950-х годов.Одна из первых и по-прежнему одна из лучших медицинских баз данных, доступных сегодня в Интернете.

Globalhealthfacts.org — индексированная база данных информации о мировом здравоохранении с возможностью поиска по типу заболевания, стране, состояниям, симптомам и т. Д. Отличный ресурс с сотнями инфографик, которые можно использовать для объяснения статистики определенных проблем со здоровьем в более широком масштабе.

New England Journal of Medicine — один из ведущих медицинских журналов с полными текстами прошлых выпусков, доступными в Интернете.Будьте готовы заплатить за некоторый контент, но немалая часть также доступна бесплатно.

Наука и наука

География и геология

Геологическая служба США — содержит столько карт и изображений, сколько вы можете переварить, охватывающих множество различных аспектов геологической топографии США.

Национальная карта США

от USGS — источник текущих геопространственных данных от USGS. Все предоставленные карты доступны как в интерактивном режиме в Интернете, так и в загружаемых форматах.

USGS Данные о воде в реальном времени — карта США, на которой в реальном времени показаны данные о качестве воды в реках и водохранилищах страны.

USGS Earthquake Hazards Program — Карты мира, показывающие данные о землетрясениях в реальном времени. Использует интерактивную карту, которую вы можете использовать, чтобы прыгать с места на место, развлечение для всех, кто хоть немного интересуется тем, что на самом деле происходит у нас под ногами.

Физика и астрономия

Система астрофизических данных SAO / NASA — Механизм обработки данных по физике и астрономии для академических статей.Каждую статью, которую вы хотите прочитать, необходимо запрашивать индивидуально, что может быть проблемой, но все же является одним из лучших способов получить необработанные данные, поступающие из телескопов и физических экспериментов со всего мира.

Academic Index — делится на два разных типа поиска: основной поиск, который в основном возвращает более точные результаты Google, и другой, который ищет академические находки в глубокой сети.

Техника и технологии

Цифровая библиотека IEEE Xplore — содержит более 1.4 миллиона документов от Института электроники и инженеров-электриков. База данных с возможностью поиска актуальных материалов практически обо всем, что связано с электротехникой и технологиями в целом.

TechXtra — бесплатный доступ к отчетам, электронным материалам, исследованиям, отраслевым новостям и даже спискам вакансий в области математики, естественных наук и инженерии.

Разное

Ядро — Самая большая в мире база данных исследований открытого доступа с возможностью поиска.Огромная база данных агрегированных статей и исследований с возможностью текстового поиска. Это должно быть вашей первой остановкой для любого раннего исследования, которое может не потребовать такого глубокого погружения, как где-либо еще.

Arxiv — репозиторий Корнельского университета. Доступ к более чем 700 000 технических статей по всем вопросам, от количественной биологии до информатики. Предлагает полный текст в нескольких форматах.

DeepDyve — DeepDyve — это коммерческий траулер, на котором собраны буквально миллионы статей из тысяч научных журналов.Если вы ищете что-нибудь в сфере STEM-проектов, это отличное место для начала (однако вам придется заплатить за эту привилегию).

Видеоресурсы

VideoLectures.net — Действительно мощный набор видеолекций из авторитетных источников, почти 20 000 лекций на выбор и более 22 000 информационных видео в целом.

---

Интернет — это гигантское, чудесное место, наполненное практически любой информацией, которую вы могли бы придумать, а затем и некоторой.Используя эти сайты и поисковые системы для изучения глубокой паутины, вы можете быть уверены, что ваша следующая научная работа, докторская диссертация или сочинение для поступления в колледж будет содержать самые богатые возможные источники.

«Библиотека» от Pixabay под лицензией CC BY 2.0

инструментов исследования для глубокой сети, невидимой сети или скрытой сети

“ Большой выбор академических и научных исследований инструменты для получения результатов, не отображаемых обычным поиском двигатели. ”

Поисковые системы работают путем индексации страниц. Они в основном сканируют Интернет с помощью инструмента «паук». и создать огромный указатель того, что там есть. Когда вы ищете, они выбирают то, что вы видите из этого индекса — часто называемого поверхностной сетью. Но многие страницы не видны пауку и так скрыты. Это то, что мы подразумеваем под «глубокой паутиной» (это отличается от «темной паутины», которая является намеренно скрытым содержанием).

Глубокая сеть по некоторым оценкам в 400-500 раз больше, чем поверхностный Интернет (www.worldwebsize.com), который значит там может быть более 1 800 МЛРД скрытых элементов контента.

В таком случае логично, что глубокая сеть — отличный потенциальный источник информации для тех, кто академические исследования и интеллектуальный анализ данных.

Что составляет Deep Web?

• Частные веб-сайты — , такие как VPN (виртуальные частные сети) и сайты что требовать пароли и логины.
• Контекстные веб-страницы — с разным содержанием для разного доступа контексты (е.g., диапазоны IP-адресов клиентов или предыдущая последовательность навигации).
• Сайты с ограниченным доступом — они ограничивают доступ технически, такой как использование Captcha, Robots Exclusion Standard или HTTP-заголовков без кеширования, которые запрещают поиск движки от их просмотра и создания кэшированных копий.
• Несвязанный контент — без гиперссылок на другие страницы, что предотвращает сеть поисковые роботы от доступа к информации.
• Не HTML / текстовое содержимое — часто закодировано в файлах изображений или видео или в определенные форматы файлов, не обрабатываемые поисковыми системами.
• Динамическое содержимое — создано для одной цели и не является частью больше сбор предметов. Эти страницы возвращаются в ответ на отправленный запрос или доступны Только через форму, особенно если используются элементы ввода открытого домена (например, текстовые поля); такой по полям сложно ориентироваться без знания предметной области.
• Контент со сценариями — страницы доступны только с использованием Java Script, а также контент, загруженный с помощью решений Flash и Ajax.
• Программное обеспечение — определенный контент намеренно скрыт от обычных Интернет, доступный только с помощью специального программного обеспечения, такого как Tor, I2P или другой даркнет программное обеспечение.Например, Tor позволяет пользователям получать доступ к веб-сайтам, используя адрес сервера .onion. анонимно, скрывая свой IP-адрес.
• Веб-архивы — веб-архивные службы, такие как Wayback Machine включить пользователи могут просматривать заархивированные версии веб-страниц с течением времени, включая веб-сайты, на которых стали недоступны и не индексируются такими поисковыми системами, как Google.

Что доступно для академических исследований?

В глубокой сети можно найти множество ценных коллекций.Некоторые из найденных материалов те, которые большинство людей узнают и потенциально могут найти полезными, включают:

• Академические исследования и статьи
• Блог платформы
• Страницы созданы, но еще не опубликованы
• Научные исследования
• Академические и корпоративные базы данных
• Государственные публикации
• Электронные книги
• Доска объявлений
• Списки рассылки
• Карточные онлайн-каталоги
• Справочники
• Множество журналов по подписке
• Архивные видео
• Изображения

Поиск в глубокой сети

Не принимайте только Paywall

Если вы обнаружите контент, который, по вашему мнению, может быть полезен, но за которым есть платный доступ, не просто предполагать что вы должны заплатить.Многие материалы публикуются в разных местах, и вы можете обнаружить, что контент доступен в формате открытого доступа в другом месте. Варианты платного доступа появляются первыми так как те, кто зарабатывает на платном доступе, прилагают усилия, чтобы их сайт лучше появлялся в поиске. двигатель полученные результаты.

Бесплатное расширение для Google Chrome «Google Расширение браузера Chrome — Unpaywall ищет в Интернете БЕСПЛАТНУЮ версию содержание защищен платным доступом.

Междисциплинарные веб-порталы и службы академического поиска, которые предоставляют доступ к глубине Интернет.

Академический индекс — a научный академический поиск механизм доступа только к веб-сайтам, ранее выбранным библиотекарями, учителями и библиотекой, и образовательные консорциумы.

Archive.org — Интернет Архив есть некоммерческая цифровая библиотека в Сан-Франциско с заявленной миссией «универсального доступ всем знаниям «. Он обеспечивает бесплатный публичный доступ к коллекциям оцифрованных материалов, в том числе веб-сайты, программные приложения / игры, музыка, фильмы / видео, движущиеся изображения и почти три миллион книги в общественном достоянии.Веб-архив Wayback Machine, содержит более 308 миллиард веб-захватов. Архив также курирует одну из крупнейших в мире книг. оцифровка проекты.

ArchiveGrid — включает более 5 миллионов записи, описывающие архивные материалы, объединяющие сведения об исторических документах, личные документы, семейные истории и многое другое. С более чем 1000 различных архивных учреждений представлена, ArchiveGrid помогает исследователям искать первоисточники, хранящиеся в архивы, библиотеки, музеи и исторические общества.

Archives Hub — найти лучшее из того, что Великобритания может предложить свои услуги в Archives Hub. Вы сможете искать в архивах почти 300 учреждения из Англии, Шотландии и Уэльса. Используйте Archives Hub, чтобы найти уникальные источники для ваш исследовать. Искать среди описаний архивов, включая ссылки на цифровой контент, которые хранятся на учреждения по всей Великобритании.

BASE — одна из мировых самый объемный поисковые системы, особенно для академических веб-ресурсов с открытым доступом. BASE предоставляет более 120 миллионов документов из более чем 6000 источников.BASE управляется Билефельдским университетом. Библиотека, Билефельд, Германия.

Шабо Колледж — Библиотекари Шабо создали систему пользовательского поиска, которая выполняет только поиск качественные сайты.

Цифровая библиотека общин Репозиторий (DLC) — это ворота в международную литературу об общем достоянии. DLC предоставляет бесплатные и открытые доступ к полнотекстовым статьям, рефератам и диссертациям. Этот сайт содержит материалы автора портал; ан База данных изображений; Всесторонняя библиография палаты общин; тезаурус ключевых слов и ссылки на соответствующие справочные источники по изучению общин..

Справочник журналов открытого доступа (DOAJ) — управляемый сообществом онлайн-каталог, который индексирует и обеспечивает доступ к качественному открытому доступу, рецензируемых журналов. Он ориентирован на предоставление доступа только к тем журналам, которые используют высочайшие стандарты качества для гарантии содержания. В настоящее время они являются хранилищем 9740 журналы с более чем 1,5 миллионами статей из 133 стран мира.

Образовательные ресурсы Информационный центр (ERIC) — это онлайн-библиотека исследования в области образования и информация, спонсируемая Институтом педагогических наук (IES) U.S. Отделение Образование.

FindArticles.com — есть статьи примерно от 500 периодические издания с охватом с 1998 года, причем совершенно бесплатно. Финансируется CBS.

FOIA Data — поиск США Свобода Информационная база данных.

Google Correlate — Поиск Google инструмент позволит вам находить запросы, которые коррелируют с реальными данными.

Google Scholar — это бесплатный доступный веб-поиск движок, который индексирует полный текст или метаданные научной литературы по массиву издательский форматы и дисциплины.

iSEEK Education — отличная цель поисковая система, разработанная специально для студентов, учителей, администраторов и воспитателей. Находить авторитетные, интеллектуальные и экономящие время ресурсы в безопасной среде, проверенной редактором с участием iSEEK.

GovInfo — предоставляет бесплатный онлайн-доступ к официальному публикации всех трех ветвей федерального правительства США.

Поиск журнала — (Genamics) позиционирует себя как « крупнейшая полностью категоризированная база данных свободно доступной журнальной информации, доступной на Интернет », на данный момент насчитывающий более 100 000 названий.Категории варьируются от искусства до Литература, через как естественные, так и мягкие науки, до спорта и отдыха.

JSTOR — (сокращение от Journal Storage) — это цифровой библиотека основана в 1995 году. Первоначально она содержала оцифрованные старые выпуски академических журналов. сейчас также включает книги и первоисточники, а также текущие выпуски журналов. Предоставляет полнотекстовый поиск почти в 2 000 журналов.

LibGuides — LibGuides ресурс ищет знания, полученные от библиотекарей в тысячах учреждений по всему миру, и являются ценным ресурсом для любой, кто занимается исследованиями.

Library Genesis / LibGen — поисковик для научные статьи и книги по различным темам, которые обеспечивают бесплатный доступ к контенту, который в противном случае является платным или нет оцифровано в другом месте. Базируясь в России, это самый крупный и продолжительный из открытых в настоящее время доступная коллекция. У LibGen есть несколько инициатив: i. более 1,5 миллионов файлов, в основном научно-популярные электронные книги, ii. эквивалентное количество электронных книг, в основном художественной, iii. +20 миллионов статей из журналы науки, истории, искусства и др., iv. комиксы, журналы и картины; полностью составляет в минимум 100 ТБ — легко Библиотека Конгресса цифрового мира.

Библиотека Конгресса — В библиотеке оцифровал все предметы, хранящиеся в нем. Библиотека собирает документы и книги последние 200 лет. годы. Отличный источник для академических исследований.

Microsoft Academic Search — это бесплатная общедоступная сеть система поиска академических публикаций и литературы, разработанная Microsoft Research. Перезапущен в 2016 году в инструменте появилась совершенно новая структура данных и поисковая система с использованием семантических поиск технологии.В настоящее время он индексирует более 375 миллионов организаций, 170 миллионов из которых являются академическими. документы. API академических знаний предлагает поиск информации из базовой базы данных. с использованием Конечные точки REST для расширенных исследовательских целей.

OAIster — это сводный каталог миллионы записей которые представляют ресурсы с открытым доступом. Сегодня в OAIster более 50 миллионов записей, представляют цифровые ресурсы от более чем 2000 участников.

Поисковая система журналов открытого доступа (OAJSE) — Служба поисковой системы журналов открытого доступа (OAJSE) охватывает бесплатные, полнотекстовые и качественные контролируемый журналы.Стремитесь освещать журналы по всем предметам, которые публикуются на английском языке. Там находятся в каталоге более 4500 журналов.

OpenDOAR — это авторитетный справочник академические репозитории с открытым доступом. Каждый репозиторий OpenDOAR посетили сотрудники проекта, чтобы проверьте информацию, которая записана здесь. Этот всесторонний подход не зависит от автоматизированных анализ и дает список репозиториев с контролем качества.

Справочный репозиторий — это исчерпывающий ресурс для ссылок на статьи и книги.Это цифровая платформа, на которой исследовать вывод и обеспечивает бесплатный, немедленный и постоянный доступ к результатам исследований для всех, скачивать и распространять.

RefSeek — академическая поисковая система для студенты и исследователи. Находит релевантные результаты академического поиска на веб-страницах, в книгах, энциклопедиях и журналы.

Публичная Интернет-библиотека — (ipl и ipl2) является некоммерческой, веб-сайт, управляемый студентами Университета Дрексел. Студенты добровольно выступают в роли библиотекарей и откликаются на вопросы посетителей.Категории данных включают те, которые предназначены для детей и подростков.

Библиотеки Смитсоновского института — 20 библиотек из музейные комплексы по всему миру.

Информация об исследованиях Смитсоновского института Система — дает доступ к значительным ресурсам Смитсоновского института через Исследования Информация System — отличный способ поиска в более чем 7,4 миллионах записей Смитсоновского института музеи, архивы и библиотеки.

SpringerLink — обеспечение исследователи с доступом к миллионы научных документов из журналов, книг, серий, протоколов и справочников.Ты также можно просматривать публикации по коллекции и типу контента.

Междисциплинарный цифровой Издательский институт — базируется в Швейцарии, является издателем более 110 рецензируемых журналов с открытым доступом. охватывает искусство, науку, технологию и медицину.

Библиотека Калифорнии в Санта-Барбаре — предложения доступ к разнообразным группа исследовательских баз данных, полезных для студентов, исследователей и случайных поисковиков. Должно быть отметил, что многие из этих ресурсов защищены паролем.

США.gov — предлагает доступ к огромному объему информации, включая все типы форм, баз данных и информационных сайтов, представляющих большинство правительственных агентства.

Virtual LRC — виртуальное обучение Ресурсный центр, помогает учащимся средних школ и колледжей в поиске качественной информации для академические проекты школ и колледжей. Virtual LRC InfoBot ищет отличные общие Информация Веб-сайты с одним поиском, включая About.com, InfoSeek Web Guide, индекс библиотекарей для в Интернет, Big Hub, Смитсоновский институт, LibrarySpot и растущее число университетских библиотек. Интернет-справочники.

Голос шаттла — (VoS) предлагает доступ к разнообразным ассортимент сайтов, включая литературу, теорию литературы, философию, историю и культуру исследования.

Wolfram | Alpha — уникальный двигатель для вычисление ответов и предоставление знаний. Используя базу данных экспертного уровня, этот поиск двигатель не просто находит ссылки; он отвечает на вопросы, проводит анализ и создает отчеты. Это работает используя свои обширные знания и алгоритмы для автоматического ответа на вопросы, анализ и формировать отчеты.

WorldCat — найдите предметы из 10,000 библиотеки по всему миру, с книгами, DVD, компакт-дисками и статьями. Вы даже можете найти ближайшую библиотеку с помощью WorldCat’s инструменты.

Веб-сайты, обеспечивающие доступ к исследованиям

ЦРУ Справочник — справочные материалы, содержащие информацию по каждой стране мира.

DataBank — Услуга от Всемирный банк. DataBank — это инструмент анализа и визуализации, содержащий коллекции времени. ряд данные по самым разным темам.Вы можете создавать свои собственные запросы; создавать таблицы, диаграммы и карты; а также легко сохранять, вставлять и делиться ими.

Британская энциклопедия — информация может быть найдено с помощью тем или функции поиска. Текущие новости предоставлены The New York Times, BBC, и SBS World News. Видео доступны для просмотра онлайн. Временные шкалы дают интерактивный поломки истории предметных областей. Данные и статистика доступны по каждой стране. Карты при условии. Цитаты доступны по автору или теме.

Каталог

GPO правительства США Публикации — База данных федеральных публикаций США. CGP — это инструмент для поиска федеральных публикаций, которые включает описательную информацию для исторических и текущих публикаций, а также прямые ссылки к полный документ, если таковой имеется. Пользователи могут искать по агентству-автору, названию, теме и Генеральная ключевые слова или нажмите «Расширенный поиск», чтобы увидеть дополнительные параметры.

Архив национальной безопасности — рассекреченные бумаги и прочее. Предоставлять онлайн-доступ к критически важным рассекреченным записям по проблемам в том числе U.С. национальная безопасность, внешняя политика, дипломатическая и военная история, разведка политика и многое другое. Часто обновляется.

Scholarpedia — a рецензируемый энциклопедия с открытым доступом, написанная и поддерживаемая учеными со всего мира. Scholarpedia вдохновлена ​​Википедией и стремится дополнить ее, предоставляя углубленные научные рассмотрение тем в области математики и естественных наук, включая физические, биологический поведенческие и социальные науки.

Каталоги Британской библиотеки и Коллекции — изучить каталоги Британской библиотеки, печатные материалы, электронные коллекции и даже коллекция блоги для множества ресурсов.

Национальный архив — США национальный Инструменты исследования архивов и онлайн-база данных. Это база данных с возможностью поиска, ориентированная на Америка. Это включает как историческую, так и текущую информацию.

Quotes.net — нужна правильная цитата? Зайдите на Quotes.net, чтобы ссылки на известные слова от известных людей.

Статистическое управление Великобритании — независимый, вневедомственный департамент стремится продвигать и защищать производство и публикацию официальная статистика, служащая общественному благу.

Веб-сайты, обеспечивающие доступ к оцифрованным версиям книг

Исследовательский институт Гетти — Гетти Коллекции научно-исследовательского института включают более 1 миллиона книг, периодических изданий, фотографий и каталогов. Институт также может похвастаться большой коллекцией редких или уникальных предметов, в основном сфокусированных на искусстве. история и архитектура.

Google Книги — это сервис от Google Inc., что выполняет поиск по полному тексту отсканированных Google книг и журналов, преобразованному в текст с помощью оптическое распознавание символов (OCR) и хранится в его цифровой базе данных.Книги предоставляются либо издателями и авторами, через Партнерскую программу Google Книг или из библиотеки Google партнеров через Библиотечный проект. Кроме того, Google сотрудничает с рядом журнал издатели оцифровывают свои архивы. Весь текст оцифрован (и доступен для поиска). Возможность читать результат зависит от лицензии на авторское право на этот отдельный фрагмент текста.

Hathi Trust –– a партнерство крупных научно-исследовательские институты и библиотеки, работающие над сохранением культурного наследия и доступны в далеком будущем.В HathiTrust более шестидесяти партнеров, и членство открыт для учреждений по всему миру.

InTech — первопроходец в мире самый большой многопрофильное издательство открытого доступа книг, охватывающих области науки, технологий и Медицина. Утверждает, что является ведущим в мире издателем книг открытого доступа. ученые, для ученых.

Открытая библиотека — найдите мир классическая литература, открытые электронные книги и другие отличные открытые и бесплатные ресурсы в Открытой библиотеке.Ты даже можешь вносить в библиотеку информацию, исправления в каталоге и тщательно отобранные списки.

Project Gutenberg — предложения более 57000 бесплатно электронные книги. Выбирайте среди бесплатных книг в формате epub, бесплатных книг по kindle, загружайте их или читайте в Интернете.

Scribd — Scribd — цифровой библиотека, электронная книга и услуга подписки на аудиокниги, включающая миллион наименований Scribd размещает 60 миллионов документы на своей открытой издательской платформе. Раздел документов позволяет пользователям загружать почти что-нибудь с очень небольшими ограничениями, поэтому он стал отличным хранилищем для очень большой суммы из учебники и другое академическое содержание.

Интернет-книги Страница — это указатель электронных учебников, доступных в Интернете. Он размещен в библиотеке Пенсильванский университет. На странице онлайн-книг представлено более 2 миллионов книг и несколько функции, такие как Праздник женщин-писателей и Запрещенные книги в Интернете.

Глубинные веб-ресурсы по предметам / дисциплинам

Искусство и дизайн

Artcyclopedia — Найдите, чтобы найти все, что есть чтобы узнать об искусстве: 160 000 ссылок, 9 000 художников в списке и 2 900 проиндексированных сайтов об искусстве.

ArtNet — занимается ценообразованием и поиск источников искусства рынок. Они также следят за последними новостями и артистами в отрасли.

Музей Лувра — известный музей, поддерживает сайт, заполненный навигационными разделами, охватывающими его коллекции.

Public Art Online — а детализация ресурсов источники, создатели, цены, проекты, юридические вопросы, истории успеха, ресурсы, образование и все другие аспекты создания паблик-арта.

Смитсоновский институт Инвентарь искусства Каталог — часть исследовательской информационной системы Смитсоновского института. (СИРИС).Доступная для просмотра база данных, содержащая более 400 000 предметов искусства, хранящихся в государственных и частных коллекциях.

Музей Метрополитен — сайт размещает впечатляюще интерактивный массив информации об их коллекциях, выставках, мероприятиях и исследовать.

Национальная художественная галерея — премьер Музей искусств также поддерживает сайт с подробным описанием основных моментов, выставок и образовательных мероприятий. в учреждение курирует.

Web Gallery of Art — доступна для поиска база данных европейских искусство, содержащее около 34 000 репродукций.Дополнительная информация в базе данных включает исполнителя биографии, музыкальные произведения и комментарии.

Бизнес

Better Business Bureau — (BBB) ​​США Информационная система Поиск позволяет потребителям найти подробную информацию о рейтингах, опыте потребителей, правительственных действие и многие другие компании, как аккредитованные, так и неаккредитованные BBB.

BPubs.com — деловые публикации поисковый движок. Они предлагает более 200 бесплатных подписок на деловые и отраслевые публикации.

BusinessUSA — отличный и полная база данных все, что должен знать новый или опытный владелец бизнеса или работодатель.

EDGAR: Ценные бумаги и биржа США Комиссия — содержит базу данных Комиссии по ценным бумагам и биржам. Размещает копии корпоративных документов от нас предприятия, пресс-релизы и публичные заявления.

FRED — Актуальные финансовые данные. Скачивайте, отображайте и отслеживайте 508 000 американских и международных временных рядов из 86 источников. Предоставлено Федеральным резервным банком Санкт-Петербурга.Луи. FRED ссылается на ряд других впечатляющие ресурсы для экономических данных. Это отличный первичный ресурс для всех делает исследования в области финансов и экономической теории. (АЛЬФРЕД ) — позволяет получить старые версии экономических данных, которые были доступны на конкретные даты в истории.

Global Edge — обеспечивает инструмент комплексного исследования для ученых, студентов и бизнесменов, которые ищут ответы на вопросы международного бизнеса вопросов.

Hoover’s — дочерняя компания Dun И Брэдстрит, это одна из самых известных баз данных американского и международного бизнеса.Полный источник Компания и отраслевая информация, особенно полезная для инвесторов.

Национальное бюро экономических исследований — возможно ведущая частная, беспристрастная исследовательская организация, занимающаяся беспристрастным анализом США. экономический политика. В этой базе данных хранятся архивы данных исследований, встреч, мероприятий, рабочих документов. а также публикации.

Министерство торговли США — Бюро Экономический анализ — это источник многих экономических статистических данных, которые мы слышим в новостях, включая национальный доход и продуктовые счета (NIPA), валовой внутренний продукт, потребительские расходы, платежный баланс и много более.

Право и политика

Федеральное бюро Статистика расследования (ФБР) & Services — организует статистику преступности в США, проверку криминального прошлого, секс Реестр правонарушителей, ресурсы для предприятий, сообществ, жертв преступлений, правоохранительных органов, работа соискатели, исследователи и студенты.

Глобальная сеть правовой информации — законы, постановления, судебные решения и другие правовые источники.

Цифровая библиотека внутренней безопасности — (HSDL) поддерживает базы данных, заявления о политике и стратегии, специальные коллекции и исследовательские инструменты.

Юридическая библиотека Конгресса — содержит в самая большая в мире коллекция юридических книг и юридических ресурсов, с сильным иностранным законодательством и всеобъемлющие юридические публикации США.

LexisNexis — это корпорация предоставление компьютерных юридических исследований, а также бизнес-исследований и управления рисками Сервисы. В 1970-х годах LexisNexis первой предложила электронную доступность юридических и журналистские документы. По состоянию на 2006 год компания имеет самую большую в мире электронную базу данных по юридическая информация и информация, связанная с публичными записями.Это платная услуга.

Национальная справочная служба уголовного правосудия — (NCJRS) является Ресурс, финансируемый из федерального бюджета США, предлагает обширные базы данных по вопросам правосудия и существа. жестокое обращение и информация о помощи жертвам преступлений, среди прочего.

Политическая информация — a поисковая система для политика, политика и политические новости с более чем 5000 тщательно отобранных веб-сайтов для политический Информация.

Quandi — собрание

00 экземпляров финансовый, экономический, и наборы социальных данных.Отличный источник финансовых, экономических и альтернативных наборы данных, обслуживающие профессионалов в области инвестиций.

Государство Каталог законодательных веб-сайтов (США) — используйте эту базу данных для поиска информации из в законодательные органы всех 50 штатов США, округ Колумбия и территорий. Вы можете найти счета, уставы, законодатели и многое другое с помощью этого отличного инструмента.

Политика социальной работы — The Политика социальной работы Институт (США) изучает вопросы, связанные с работой социальных работников, в том числе как обслуживать люди, у которых есть множественные или сложные потребности, и то, как государственные агентства и другие структуры выполняют здравоохранение и социальные услуги.

Ресурсы Министерства юстиции США — это всеобъемлющая база данных для Министерства юстиции, включая архивы, инициативы, новости, публикации и ресурсы.

Медицина и здравоохранение

Bioline International — Поиск Bioline International в получить доступ к различным научным журналам. Поиск осуществляется учеными и библиотекарями. как совместная инициатива Bioline Toronto и Справочного центра по окружающей среде. Информация.Это отличный инструмент для студентов, изучающих как естественные науки, так и экологию. управление классы.

BioMed Central — это Британский издатель из 258 рецензируемые журналы с открытым доступом. Их опубликованные работы охватывают науку, технологии и медицину. а также включать много уважаемых названий.

Globalhealthfacts.org — это проект Фонда семьи Генри Дж. Кайзера, предоставляет бесплатные, актуальные и легкодоступные данные страны по ВИЧ / СПИДу, туберкулезу, малярии и другим ключевым показателям здоровья и социально-экономическим показателям.Global Health Facts состоит из более чем 100 показателей и предоставляет пользователям возможность к отображать, оценивать и загружать данные для пользовательского анализа Эта индексированная база данных мира здоровье информация доступна для поиска по типу заболевания, стране, условиям, симптомам и т. д.

База данных

случаев — с возможностью поиска база данных более более 32000 рецензируемых медицинских отчетов из 270 журналов, охватывающих различные медицинские условия.

Центр контроля заболеваний — (CDC) ЧУДО онлайн базы данных позволяют получить доступ к значительным ресурсам данных общественного здравоохранения, которыми владеет CDC.

HCUPnet — система онлайн-запросов для тех, кто ищет доступ к статистическим данным Агентства США по исследованиям и качеству здравоохранения.

Национальный центр биотехнологии Информация — (NCBI) является ответвлением Национального института здоровья США (NIH). Этот сайт предоставляет доступ к около 65 баз данных из различных категорий проектов в настоящее время исследуются.

Национальный институт Исследования в области здравоохранения Архив — база данных текущих или завершенных проектов, финансируемых британцами. NHS.

Медицинский журнал Новой Англии — еженедельно медицинский журнал, издаваемый Медицинским обществом Массачусетса. Это один из ведущих медицинских журналы. Полный текст прошлых выпусков доступен в Интернете. Некоторые детали требуют оплаты но также многое доступно бесплатно.

OMIM — предлагает доступ к комбинированное исследование много десятилетий в генетике и генетических заболеваниях. С ежедневными обновлениями он, возможно, представляет собой наиболее полная единая база данных такого рода.

PubMed — бесплатный поиск доступ к двигателю прежде всего база данных MEDLINE, содержащая ссылки и рефераты по наукам о жизни и биомедицине. темы. PubMed содержит более 28 миллионов ссылок на биомедицинскую литературу из MEDLINE, life наука журналы и онлайн-книги.

TOXNET — портал доступа к Данные токсикологии США Сеть, ответвление Национальной медицинской библиотеки.

Национальная медицинская библиотека США — это база данных медицинские исследования, доступные гранты, доступные ресурсы. Сайт поддерживается Национальным Институты здоровья.

Vadlo — поисковая система по наукам о жизни. предлагая протоколы, инструменты и PowerPoint для научных исследований и открытий.Также есть отличные форумы.

Wiley Open Доступ — a дочерняя компания глобального издательства John Wiley & Sons, Inc., расположенного в Нью-Джерси, издает аналогичные проверил журналы открытого доступа, посвященные биологическим, химическим наукам и наукам о здоровье.

Всемирная организация здравоохранения — (ВОЗ) всеобъемлющий сайт охватывает множество инициатив, которыми ВОЗ занимается по всему миру.

Наука и технологии

АГРИС — (Международная информация Система сельскохозяйственных наук и технологий) — это глобальная база данных, находящаяся в открытом доступе. в на нескольких языках от Продовольственной и сельскохозяйственной организации Объединенных Наций.Они предоставляют бесплатно доступ к сельскохозяйственным исследованиям и информации.

Цифровая библиотека аналитических наук — отличное место для найти рецензируемые образовательные ресурсы в Интернете по аналитическим наукам, из форматы для техник и приложений.

arXiv e-Print Archive — Корнельский университет arXiv.org предлагает открытый доступ к хранилищу электронных препринтов (известных как электронные отпечатки), утвержденных для публикация после модерации, состоящая из научных статей в области математики, физика, астрономия, информатика, количественная биология, статистика и количественная финансы доступ к которым можно получить в Интернете.Во многих областях математики и физики почти все научные статьи самоархивируются в репозитории arXiv.

Поведенческие Мозг Научный архив — этот доступный для поиска архив имеет обширную психологию и мозг. наука статьи.

Сервер документов ЦЕРН — это организация по ядерной исследование служит отличным поиском и каталогом для экспериментов, архивов, статей, книг, презентации и многое другое в их документах.

CiteSeerX — с возможностью поиска доступ к научным Изучите цифровую библиотеку с помощью веб-сайта CiteSeerX.

Публикации Коперника — был научное издательство открытого доступа в Германии с 2001 года. исследователи, которые создают эти статьи, проводят экспертную оценку и продвигают свои Работа.

De Gruyter Open — (ранее Versita) один из ведущие мировые издатели научного контента с открытым доступом. Сегодня De Gruyter Open (DGO) издает около 600 собственных и сторонних научных журналов по всем основным дисциплинам.

Электронная библиотека по физике и Астрономия — Физика и Механизм астрономических данных для научных статей.

EDP Sciences — (Издание Диффузия Presse Sciences) — французское научное издательство с международной миссией. Они публиковать более 50 научных журналов с объемом публикации около 60 000 страниц в год.

Elsevier Амстердама — является мировым лидером в области развития знаний в области науки, технологий и здравоохранения. Они публиковать почти 2200 журналов, включая The Lancet and Cell, и более 25000 наименований книг, в том числе Грей Анатомия и педиатрия Нельсона.

Hindawi Publishing Corporation — базируется в Египте издает 434 рецензируемых журнала с открытым доступом, охватывающих все области науки, технологий и медицины, в виде а также различные общественные науки.

IEEE Xplore Digital Библиотека — содержит более 1,4 миллиона документов Института электроники и инженеров-электриков. База данных с возможностью поиска новейших материалов в области электротехники и технологий в виде целое.

Inspec — более 17 миллионов рефераты и специализированные индексации качественной исследовательской литературы по физике и технике.

НАСА Исторический Архив — изучить историю космоса в этом историческом архиве НАСА, освещая историю космоса а также пилотируемые миссии.

Национальная сельскохозяйственная библиотека — a служба США Министерство сельского хозяйства, вы можете найти глобальную информацию по сельскому хозяйству в Национальном Сельскохозяйственная библиотека.

Национальная научная цифровая библиотека — (NSDL) источник для данные об образовании в области науки, техники, инженерии и математики. Финансируется США. Национальный Научный фонд.

Сеть Компьютерные науки Технические Библиотека отчетов (NCSTRL) — была разработана совместно с НАСА. Лэнгли, Технологический институт Вирджинии, Университет Олд Доминион и Университет Вирджинии.

Справочник по открытой науке — содержит около 13 000 научных журналов, еще 7 000 названий специальных программ.

Osti.gov — веб-сайт правительства США. OSTI предоставляет доступ к энергетической, научной и технологической информации через общедоступные веб-системы, с участием вспомогательные инструменты и технологии для поиска, извлечения и повторного использования информации.

ResearchGate — социальный сетевой сайт для ученых и исследователей, чтобы делиться статьями, задавать вопросы и отвечать на них, а также находить соавторов.Согласно исследованию Nature и статья в Times Higher Education, это крупнейшая академическая социальная сеть с точки зрения активных пользователей.

SciCentral — это ворота в лучшие источники в наука. На этом сайте есть поиск по литературе, журналы, базы данных и другие отличные инструменты для находка что вам нужно.

SciELO (научная электроника Библиотека онлайн) — библиографическая база данных, цифровая библиотека и модель совместной электронной публикации открыто доступ к журналам. SciELO был создан для удовлетворения потребностей в научных коммуникациях развивающихся стран и обеспечивает эффективный способ повышения узнаваемости и доступа к научным литература Первоначально созданная в Бразилии в 1997 году, сегодня сеть SciELO состоит из 14 стран и это коллекции журналов: Аргентина, Боливия, Бразилия, Чили, Колумбия, Коста-Рика, Куба, Мексика, Перу, Португалия, Южная Африка, Испания, Уругвай и Венесуэла.Парагвай разрабатывает журнал коллекция.

Science-advisor.net — это бесплатно и онлайн-форум с открытым исходным кодом для научных дискуссий, адресованный исследователям и студенты.

ScienceHUβ — это глобальная наука и издатель технологий и предоставляет бесплатный доступ к исследовательским статьям и новейшей исследовательской информации без каких-либо барьер для научное сообщество.

Science.gov — Science.gov — это веб-портал и специализированная поисковая система. Используя технологию федеративного поиска, Science.правительство служит воротами к Научно-техническая информация и исследования правительства США. Ищет в базе данных из 200 миллионов различных публикаций и журналов, отлично подходящих для людей, проводящих исследования по темам, которые находятся охватываются в основном «научной» классификацией.

Научные исследования — это бесплатная, общедоступная поисковая система в глубокой сети, которая использует сложную технологию, которая разрешения запросы к более чем 300 научно-техническим сайтам одновременно с сопоставлением результатов, ранжировано и исключено дублирование.

SciSeek — в этой прекрасной науке поисковая система и каталог, вы можете найти лучшее из того, что может предложить научная сеть. Поиск по категории, искать по ключевое слово и даже добавлять новые сайты в списки.

Scopus — это самая крупная аннотация и база данных цитирования рецензируемая литература: научные журналы, книги и материалы конференций. Доставка всесторонний обзор результатов мировых исследований в области науки, технологий, медицины, социальных наук, искусства и гуманитарных наук, Scopus предлагает интеллектуальные инструменты для отслеживания, анализировать и визуализировать исследования.Scopus предлагает бесплатные функции для пользователей без подписки и доступен через Scopus Preview.

Springer Open — предлагает состав более чем 160 рецензируемых журналов с открытым доступом, а также недавнее добавление к ним бесплатного доступа книги охватывает все научные дисциплины.

Strategian — отличное место, чтобы найти информация о качестве во всех областях науки. Рекомендуемые ресурсы включают бесплатные полнотекстовые книги, патенты и отчеты, в виде а также полнотекстовые журнальные и журнальные статьи, а также специальный сборник Vintage Biology с участием важные статьи и книги по биологии.

TechXtra — для технологий, бесплатно доступ к отчетам, статьи, ключевые веб-сайты, книги, последние новости отрасли, объявления о вакансиях, электронные журналы, электронные печатные издания, технические отчеты, последние исследования, диссертации и многое другое. Он служит архив за представленные научные рефераты и другие исследовательские продукты.

Коллекция компьютеров Наука Библиографии: более 3 миллионов ссылок на журнальные статьи, конференции. статьи и технические отчеты по информатике с этим сборником библиографии..

Система астрофизических данных САО / НАСА — является онлайн-база данных, содержащая более восьми миллионов статей по астрономии и физике как из рецензируемых, так и источники, не прошедшие экспертную оценку. Рефераты доступны бесплатно в Интернете почти по всем статьям, а полные отсканированные статьи доступны в форматах (GIF) и (PDF) для старых статей. Он был разработан Национальное управление по аэронавтике и исследованию космического пространства (НАСА), управление которым осуществляет Гарвард-Смитсоновский институт. Центр астрофизики.

WebCASPAR — обеспечивает доступ к науке и инженерные данные из различных учебных заведений США.Он включает в себя конструктор таблиц, позволяя объединить результаты различных Национального научного фонда и Национального центра исследований Источники данных статистики образования.

World Wide Science.org — это глобальный научный шлюз, состоящий из американских и международных научных баз данных. Поскольку он многоязычный, он позволяет выполнять поиск и перевод отчетов в реальном времени из обширной группы баз данных.

Онлайн-база данных ZMATH — МАТЕМАТИКА онлайн-база данных, которая содержит миллионы записей из тысяч сериалов и журналов, датируемых 1826 годом.

Общественные науки

Цифровая история — Университет Хьюстон База данных цифровой истории предлагает множество ссылок на учебники, первоисточники и учебные материалы. материалы по цифровой истории. В базе есть мультимедиа, интерактивная шкала времени, активная обучение, и ресурсы для учителей.

EconLit — посетите EconLit, чтобы доступ к более чем 120 лет экономической литературы со всего мира в удобном для поиска формате. Найти журнал статьи, книги, книжные обзоры, статьи, рабочие документы и диссертации, а также исторические журнальные статьи с 1886 по 1968 год.

Энциклопедия психологии — искать или просматривать Энциклопедия психологии, чтобы найти основную информацию и даже переводы для информации о психология карьеры, организации, публикации, люди и история

Ethnologue — поиск по языкам мира с Ethnologue, предлагающий энциклопедический справочник по всем известным живым языкам мира. Ты будешь также сможете найти более 28 000 цитат в языковом исследовании Ethnologue Библиография.

Древний Интернет Справочник по истории — отличное место для изучения происхождения человека с полным текстом и поиском по темам, включая Месопотамию, Рим, эллинистический мир, поздняя античность и христианское происхождение.

Современный Интернет Справочник по истории — найти тысячи источников в современной истории. Просматривайте и ищите полные тексты, мультимедиа, а также более.

Литературная энциклопедия — большая источник ссылки материалы по литературе, истории и культуре.

Fold3 — содержит лучшие коллекции оригинальные военные записи. Эти записи включают рассказы, фотографии и личные документы мужчин и женщин. кто служил в армии. Многие записи поступают из США.S. Национальные архивы, Национальный Архивы Великобритании и другие международные записи.

Национальное бюро экономических исследований — на этом сайте вы можете узнать об экономических исследованиях и найти к ним доступ.

Женская библиотека — Женская библиотека @ LSE — главная библиотека и музей Англии. ресурс о женщинах и женском движении с упором на Великобританию 19-го и 20-го века. веков.

Psycline — найдите журнал с Журнал Psycline и поиск статей, инструмент, который предлагает доступ к более чем 2000 психологическим и социальным наукам. журналы онлайн.

RePEc (Research Papers in Economics) — это совместные усилия сотен добровольцев в 99 странах для расширения распространения исследований в области экономики а также смежные науки. Сердце проекта — децентрализованная библиографическая база данных рабочих документы, журнальные статьи, книги, главы книг и программные компоненты, все поддерживается волонтеры. Собранные данные затем используются в различных сервисах, которые обслуживают собранные метаданные пользователям или улучшить его.

Сеть исследований в области социальных наук — в это исследование сети, вы можете найти широкий спектр исследований в области социальных наук в ряде специализированных сети, включая когнитивную науку, лидерство, менеджмент и социальное страхование.

SocioSite — используйте этот сайт из Университет Амстердам, чтобы просмотреть социологические темы, включая активизм, культуру, мир и расизм.

The SocioWeb — независимый гид к социологическому Ресурсы в Интернете. Используйте это руководство, чтобы найти все социологические ресурсы, которые вы найдете нужно в интернете. SocioWeb предлагает ссылки на статьи, эссе, журналы, блоги и даже рынок.

Виртуальная библиотека истории труда — поддерживается Международный институт социальной истории, Амстердам, эта библиотека предлагает историкам отличные контент для изучения экономики, бизнеса и т. д.

Видео и аудио ресурсы

LibreVox.org — Огромный выбор аудиозаписи и Аудиокниги, прочитанные волонтерами озвучивания.

VideoLectures.net — The крупнейший в мире академический онлайн-хранилище видео с 14 251 видеолекцией от 10 763 докладчиков.

Как искать в глубокой сети

Не всегда легко осветить скрытый интернет.

Большая часть темной сети остается теневой, анонимной и сложной для навигации по дизайну.Стандартные поисковые системы раскрывают лишь часть происходящего. Итак, как лучше всего найти то, что вы ищете?

Но сначала вам нужно скачать браузер Tor. Если у вас его нет, перейдите на TorProject.com, загрузите браузер и установите его. Если у вас все еще есть вопросы об использовании Tor — программного обеспечения для анонимности, используемого для подключения к темной сети, — это видео представляет собой полезный обзор.

Первое, что вам нужно знать, прежде чем искать в даркнете, — это то, что вы находитесь на Диком Западе Интернета.Tor позволяет вам посещать сайты, недоступные в стандартном Интернете, с широким спектром контента, который включает в себя все, от подпольных рынков наркотиков до детской порнографии. Обратите внимание на ссылки, которые вы нажимаете, и внимательно прочтите описания поиска. Если вы просматриваете страницы случайно, вы можете получить доступ к компрометирующему контенту. (Кроме того, если вы настаиваете на поиске незаконных вещей, убедитесь, что вы используете VPN для дополнительной безопасности браузера.)

Второе, что вам нужно знать перед тем, как искать в даркнете, это то, что большая часть этого невероятно скучна.Ожидайте найти массу заброшенных веб-сайтов, мертвых ссылок и хлама, просматривая результаты поиска. Если вы не знаете, где ищете, придется много искать, прежде чем вы найдете что-то стоящее.

Решения для навигации в темной сети (также известной как темная сеть) менялись с годами по мере роста и падения сайтов. Но, к счастью, поиск в темной сети никогда не был таким простым. Поисковые системы стали лучшими из когда-либо существовавших, и все больше людей, чем когда-либо, используют технологии повышения конфиденциальности.

Мы изучили самые популярные поисковые системы, вики, форумы и источники, доступные в темной сети, так что вам не придется. Вот лучшие места для начала поиска в темной сети.

Как искать в даркнете

Ahmia.fi : Это ваша отправная точка для поиска в темной сети. Запущенный при поддержке Tor Project, он обеспечивает максимально простой опыт и самые точные результаты поиска.

Not Evil : это преемник TorSearch и Evil Wiki, которые ранее были двумя из лучших способов поиска в Dark Net.Not Evil предоставляет простую в использовании поисковую систему, которая довольно глубоко проникает в мир. Однако точность поисковой системы часто бывает низкой и требует двойной и тройной проверки с другими источниками.

Grams : Grams — это Google темных наркотиков. Это сравнение исходит из намеренно подобного логотипа сервиса и широты результатов, достигнутых со склонностью создателей Grams к созданию новых продуктов. Если есть наркотик, о котором вы мечтали найти, то Грэмс — лучший способ найти его (и, возможно, вас арестуют, когда вы отправите его домой по почте).

Onion.link : Onion.link предназначен для связи между скрытыми службами .onion и обычной сетью. Он также содержит довольно хорошую поисковую систему, которую можно использовать в обычном браузере.

Google : С помощью прокси-инструментов, таких как Onion.to, Google фактически сканирует большую часть глубокой сети окольными путями. Из-за своей повсеместной популярности Google Search — это первый инструмент, который практически любой, кто слышит о темной сети, использует для начала. К счастью, репутация компании как поставщика невероятных результатов поиска сохраняется даже в уголках Интернета.Но если вы используете Tor для обеспечения конфиденциальности, помните, что Google все еще отслеживает, что здесь происходит.

DuckDuckGo : Подобно Google, но с одним существенным отличием, DuckDuckGo предлагает анонимный поиск — функцию, соответствующую анонимности Tor. Неудивительно, что он популярен среди пользователей Tor.

Torch : Старая поисковая система в темной сети, Torch существует уже давно, но привлекает лишь небольшие фанфары.

/ r / Onions : 6-летнее сообщество Tor на Reddit остается ценным ресурсом для поиска ссылок, новостей и обсуждения скрытых сервисов Tor.

The Uncensored Hidden Wiki : The Hidden Wiki — относительно древнее учреждение, что касается темной сети. Он существует уже много лет и видел огромное количество ссылок. Однако по сей день он остается ярким и простым в использовании фонариком в темноте. Но будьте осторожны: здесь легко наткнуться на законно вызывающий беспокойство и злой контент.

Skunksworked : Есть кое-что, что нужно сказать для полноты. Skunks перечисляет более 6500 анонимных веб-сайтов для вашего прочтения.Вы можете просмотреть его по названию или по новейшему найденному сайту. Настоящей функции поиска нет, поэтому потребуется немного смазки для локтей и функция Ctrl + F. Это длинный список, многие сайты будут отключены, а еще больше будет мошенников или подделок. Но если вы готовы к тяжелой работе и исчерпывающему поиску, это оружие вам обязательно нужно иметь в своем арсенале.

---

Теперь, когда мы знаем инструменты, давайте проведем несколько тестов и посмотрим, какая служба поможет нам найти правильный ответ.

Поиск: «Как быть анонимным информатором»

Tor сыграл свою роль в нескольких самых значительных случаях разоблачения за все время, включая разоблачения массового слежения Эдварда Сноудена в 2013 году.Какая поисковая система может помочь мне узнать, как дать свисток, не выдавая себя?

Скрытая вики

Победитель: Hidden Wiki не является исчерпывающим, но в некоторых ключевых областях он непревзойден. На сайте есть целый раздел, посвященный изобличению, в то время как почти все остальные ресурсы будут отправлять вам циклы в поисках ответов.

Искать: «Alphabay»

Если вы уже знаете название нового рынка, вам все равно нужно найти адрес, чтобы выйти на него.Какая поисковая система может привести нас туда, куда мы хотим?

Победитель: Google выходит. Многие поисковые системы могут дать мне ссылку на сам AlphaBay. Но Google предоставляет такой объем информации, новостей и обсуждений, что другие ресурсы бледнеют по сравнению с ними. Как всегда говорили люди в Маунтин-Вью: мы организуем всю информацию в мире, в том числе о том, как получить сверхвысокий уровень.

Поиск: «Хостинг скрытых услуг»

Что делать, если вы действительно хотите создать и разместить скрытую службу Tor? Это непростая задача для большинства людей, поэтому они часто обращаются к поисковым системам в надежде найти ответы.

Google

Победитель: Google снова берет пирог, указывая путь к официальным инструкциям Tor, а также к надежным альтернативам (например, из такой операционной системы, как Whonix).

Поиск: «Tor Facebook»

Более 1 миллиона человек посетили социальную сеть через Tor за один месяц, и многие сделали это через анонимный скрытый сервис Facebook. Используя набирающий популярность сайт Facebook .onion, вы можете обойти цензуру и сохранить конфиденциальность даже при использовании самой популярной социальной сети в мире.

Победитель: Google и DuckDuckGo , две тяжелые поисковые машины обычного Интернета, доставляют сюда ссылки, которые указывают вам в правильном направлении. Кстати, вы можете посетить лук Facebook на facebookcorewwwi.onion.

Search: « Ужасный пират Робертс » Знаменитый создатель

Silk Road оказал неизгладимое влияние на анонимный Интернет. Как найти информацию об одной из самых известных фигур, когда-либо появлявшихся в даркнете?

Победитель: Google снова побеждает, предлагая звездную коллекцию новостных материалов о Dread Pirate Roberts в результатах поиска.

Поиск: «Сейф»

Победитель: Google выигрывает, имея прямую ссылку на инструмент Strongbox New Yorker , который позволяет любому анонимно давать чаевые журналистам издания. Любой другой движок отправлял меня либо на Evil Wiki, либо на страницу о ларце , но не на самом ларце.

---

Общие победители: Когда мы запускали эти тесты изначально, Google и Evil Wiki были двумя лучшими поисковыми инструментами.

Google сохраняет лидирующие позиции, предоставляя одни из самых полных результатов. Это немного иронично, учитывая одну из определяющих черт даркнета: он должен находиться вне досягаемости Google. Тем не менее, Google предоставляет огромное количество информации и даже косвенных, но полезных указателей.

DuckDuckGo почти так же хорош и заслуживает признания за их усилия, звездные результаты и значительное улучшение по сравнению с посредственными характеристиками во время последнего теста.

The Hidden Wiki, древняя по сравнению со многими скрытыми службами, профессионально организована.Это не исчерпывающий, не окончательный вариант, но все же это единственная лучшая отправная точка все эти годы спустя.

Ahmia.fi, Onion.link и Skunksworld предоставляют полезные инструменты на своей линии, но они попадают в ловушку, когда вам нужна точность.

Некоторые вещи никогда не меняются. Единственный способ по-настоящему познакомиться с этой стороной Интернета — это путешествовать по нему самостоятельно. Будьте умны, внимательны и избегайте незаконных действий. Даже осторожный путешественник может принести вам ценные знания.

Больше информации о Tor и Dark Net служит общественному благу. Скрытие этих мест, процессов и людей в тени означает, что они могут быть мифологизированы и сенсационны. В то время, когда законодательство, правоохранительные меры и политические дебаты яростно крутятся вокруг конфиденциальности в Интернете, очень важно, чтобы общественность могла отличить факты от вымысла. И что может быть лучше, чем исследовать самому?

Дополнительная отчетность Джона-Майкла Бонда

Примечание редактора. Эта статья регулярно обновляется для обеспечения актуальности.

Как безопасно искать в глубокой сети — Руководство для начинающих

Раскрытие информации: Ваша поддержка помогает поддерживать работу сайта! Мы зарабатываем реферальный сбор за некоторые услуги, которые мы рекомендуем на этой странице. Узнать больше

Хотя поисковые системы, такие как Yahoo !, Bing и Google, индексируют миллиарды веб-страниц и других электронных документов, это лишь малая часть всей информации, доступной во всемирной паутине. Чтобы раскопать клад, вы должны понимать, как добывать данные.

Два уровня данных

Думайте о паутине как о двух слоях: неглубокой поверхности и почти бездонном, глубоком уровне. В верхнем слое, Surface Web, вы найдете все веб-страницы, подобные той, которую вы сейчас читаете. Эта и другие страницы имеют фиксированные веб-адреса или URL-адреса (в данном случае https://websitebuilders.com/how-to/search-the-deep-web). Кроме того, информация, содержащаяся на странице, не меняется очень часто.

Deep Web содержит страницы с динамическим содержанием — данными, которые часто меняются и не могут быть легко проиндексированы поисковыми системами.Большая часть этой информации хранится в базах данных и собирается «на лету», когда вы запрашиваете базу данных. Например, когда вы ищете товар на eBay, информация берется из базы данных eBay и мгновенно собирается для вас на веб-странице. Эта страница не существовала, пока вы не выполнили свой поиск, что делает ее динамичной; он был настроен в ответ на ваш запрос. Из-за этого поисковые системы не могут легко индексировать эту информацию.

Другие типы «глубокой» информации включают:

• Мультимедиа (аудио, музыка и видео)
• Фото и графика
• Объявления о вакансиях
• Финансовые данные (цены акций и облигаций, курсы валют)
• Новости
• Данные о поездках (расписание авиалиний и поездов)
• Информация о сайтах, требующих пароля

Темная паутина

Когда люди говорят о «глубокой паутине», они часто думают о незаконной или незаконной деятельности.Это потому, что они ошибочно принимают всю Глубокую паутину за относительно небольшое подмножество, известное как темная паутина.

Так что же такое «темная паутина» и как она соотносится с «глубокой паутиной»?

Dark Web — это собрание информации, поиск по которой с помощью традиционных поисковых систем затруднен. Это может быть связано с тем, что информация содержится в защищенных паролем областях или в базах данных, как мы уже обсуждали для более обычного контента Deep Web. Чаще всего сайты в Dark Web используют специализированные программы, такие как Tor, для маскировки своих IP-адресов, что делает невозможным их обнаружение или индексирование обычными поисковыми системами.Чтобы получить доступ к этому типу контента, пользователи должны точно знать, где искать, и использовать ту же технологию IP-маскировки.

Знаете ли вы?

Темная паутина — анонимная сеть, которая обеспечивает свободу слова журналистов и незаконную торговлю — это лишь небольшая часть глубокой сети. Большая часть глубокой сети состоит из гораздо более приземленного контента, который просто недоступен для поисковых систем.

TOR или The Onion Project — это программа с открытым исходным кодом, предназначенная для обеспечения приватного просмотра и возможности для пользователей сети обходить законы онлайн-цензуры.Первоначально он спонсировался Лабораториями военно-морских исследований США для защиты конфиденциальной правительственной связи, а проект с открытым исходным кодом до сих пор частично финансируется правительством США. Как и во многих других проектах по обеспечению конфиденциальности, меры безопасности, которые делают TOR идеальным инструментом для обеспечения свободы слова и национальной безопасности, также делают его идеальным инструментом для незаконной деятельности. В настоящее время TOR является наиболее часто используемой технологией для доступа к Dark Web.

Темная паутина стала убежищем для незаконной деятельности, такой как проституция, торговля наркотиками, торговля оружием, детская порнография и почти все, что вы можете себе представить.Поскольку сайты Dark Web используют технологию IP-маскировки, их практически невозможно отследить. И, как и в случае с традиционным Интернетом, открытый характер Интернета означает, что даже если властям удастся закрыть один незаконный сайт, на его место быстро появятся несколько.

Здесь важно повторить, что Dark Web — это лишь небольшая часть Deep Web. Чтобы найти контент Dark Web, вам нужно использовать специализированное программное обеспечение и знать, где искать. Вы не попадете случайно в Dark Web при поиске в Google или в поисковике по базе данных в вашей библиотеке.С этого момента, когда мы говорим о поиске в глубокой сети, мы говорим о гораздо более заметном и совершенно легальном контенте.

Копаем под землей

Так как же найти страницы Deep Web? К счастью, вы можете раскрыть это богатство информации, используя специализированные инструменты, предназначенные для добычи данных из баз данных. Например, вы хотите купить подержанный экземпляр «Алисы в стране чудес». Как бы вы его нашли? Поиск на eBay или Amazon.com — по сути, запрос к их базам данных — будет более плодотворным, чем использование Yahoo! или Google.То же самое и с поиском работы. Поскольку объявления о вакансиях хранятся в базе данных, большинство поисковых систем не могут их найти; поиск на таких сайтах, как Craigslist или Monster, — лучший способ.

Секрет успешного поиска заключается в том, чтобы понять, что вы хотите узнать, и затем использовать правильный веб-ресурс для этого. Задайте себе следующие вопросы:

• Является ли информация чувствительной ко времени, например, котировки акций или газетные статьи?
• Ищете фото или видеоклип?
• Вы хотите найти музыкальный файл в формате MP3 или послушать подкаст?
• Вы ищете определенные типы контента, например блоги?
• Вы ищете специальный ресурс, который доступен только избранной группе (и, вероятно, требует пароля)?
• Вы ищете научный ресурс, например статью из журнала или журнала?

Начните с традиционного поиска

Если вы не знаете точный инструмент поиска, который вам нужно использовать, лучше всего начать с того же места, где вы начинаете поиск в Интернете, с вашей любимой поисковой системы.

Да, мы только что сказали, что контент Deep Web недоступен для поиска с использованием традиционных поисковых систем, но эти поисковые системы могут помочь двумя способами.

Во-первых, в последние годы все основные поисковые системы начали создавать свои собственные инструменты для поиска в этих ранее «недоступных для поиска» ресурсах. В свое время вам нужно было перейти в специальный раздел в Google или Yahoo! для поиска изображений. Теперь результаты изображений отображаются как часть стандартного поиска (хотя вы все равно получите более полные результаты, перейдя на соответствующую страницу поиска изображений).То же самое сейчас верно для большей части самого популярного динамического веб-контента.

Знаете ли вы?

В зависимости от того, кого вы спросите, Surface Web составляет от 1% до 5% сети, а оставшиеся 95-99% составляют Deep Web.

Когда вы вводите символ акции в поиске Google, информация об этой акции, включая ее текущую торговую цену, будет возвращена вместе со стандартными результатами поиска. Введите два города, и вы получите список цен на авиабилеты и форму ввода, чтобы сузить область поиска.Введите номер для отслеживания UPS в Bing, и они сообщат вам, где именно находится ваша посылка и когда она должна прибыть.

Как это возможно? Основные поисковые провайдеры пытаются упростить вашу работу в Интернете, поэтому теперь они включают результаты из специализированных поисковых систем. По сути, когда вы вводите поисковый запрос, они запускают традиционный поиск и отображают результаты для проиндексированных сайтов World Wide Web, и они выполняют поиск через специализированные поисковые системы по базам данных (иногда их собственная база данных, иногда база данных партнера) и показывая вам и те результаты.Они настолько близки к тому, чтобы раскрыть содержание глубокой паутины.

А что, если стандартный поиск не работает? Так бывает часто, но не расстраивайтесь. Попробуйте еще что-нибудь из этого поискового окна. Найдите определенный тип базы данных или поискового инструмента. Ищете статьи в научных журналах? Наберите «научные базы данных». Ищете подкасты? Введите «поиск подкастов». Хотя поисковая система не может найти конкретную базу данных, которую вы ищете, обычно она может сказать вам, что и где эти базы данных.

Если вы по-прежнему не можете найти то, что ищете, возможно, вам понадобится очень специализированный инструмент поиска. Мы перечислили некоторые из наиболее распространенных инструментов ниже, но это также хорошая идея, чтобы пойти по старой школе. Если вы ищете исследование или тему определенного типа, проконсультируйтесь с библиотекарем-исследователем в вашей местной библиотеке. Они могут знать, какой именно инструмент вам нужен.

И помните, когда вы найдете инструменты, которые вам нравятся, не забудьте добавить их в закладки для будущего использования.

Чтобы узнать больше, посетите блог Deep Web Research.

.

No related posts.