---
# System prepended metadata

title: Практическая работа №5

---

# Практическая работа №5

# Методы поиска

## Цели работы:
* Научиться разведывать максимальное количество информации в сети Интернет касаемо необходимого нам объекта
* Научиться анализировать информацию в рамках osint-исследований
* Научиться проверять информацию на достоверность
* Научиться визуализировать полученные данные


---
В данной работе объектом нашего исследования будет карта **Google Earth** - инструмент, используемый нами в рамках гео-osint исследованиях в прошлых практических работах.

Для анонимности я буду использовать в своей работе ОС Tails на виртуальной машине, на хосте будет стоять VPN.

В случае, если сервисы будут препятствовать нашему подключению из-за использования Tor, будем пользоваться связкой VPN(Host) - VirtualMachine + VPN



---
# Начало поиска - работа с Google Dorks
Для начала воспользуемся самой популярной в мире поисковой системой с добавлением специальных флажков, которые гарантируют эффективность поисков.

В данной практической работе мы проработаем все опции операторов поиска Google, но держу вас сразу в курсе, что многие из них не дадут никакой информации, поэтому я сразу составил план работы с теми операторами, которые однозначно выдадут нам хорошие результаты:
![](https://hackmd.io/_uploads/ByfotGAEn.jpg)


Поиск через синонимы:
![](https://hackmd.io/_uploads/S1pioNN4n.png)
Отсюда сразу же попадаем на информационную страничку по работе с нашим сервисом:
![](https://hackmd.io/_uploads/SkRQmj74h.png)

С помощью данного источника может узнать также и такую информацию как технические требования, новые обновления, способы установки pro-версии:
![](https://hackmd.io/_uploads/SkDmEsmN2.png)

Остальные предложенные нам источники поисковой системы Google представляют собой схожие сайты - по сути, help-странички.

## Поиск по точному совпадению
![](https://hackmd.io/_uploads/ryn13V4En.png)

Данный параметр дал нам фрагмент информации с википедии, отсюда мы и узнали язык программирования, на котором написан сервис, дату выхода, платформы, автора и интерфейс с лицензией.

## Поиск с помощью параметра OR
![](https://hackmd.io/_uploads/SyYh24E4h.png)
Отсюда видим разницу в двух сервисах.

## Поиск информации о домене:
![](https://hackmd.io/_uploads/SkKLzA442.png)

![](https://hackmd.io/_uploads/rJWRzAE43.png)

Отсюда узнали, что Google Earth предлагает и многие другие опции своих карт:
![](https://hackmd.io/_uploads/Hk6tmC4Nn.png)

![](https://hackmd.io/_uploads/S1gxrAN4h.png)

![](https://hackmd.io/_uploads/SJrcUA4V2.png)

![](https://hackmd.io/_uploads/S1b2IREV2.png)

![](https://hackmd.io/_uploads/Sy8kwANV2.png)

![](https://hackmd.io/_uploads/SJ9gPCVN3.png)

![](https://hackmd.io/_uploads/B1_FvRNN3.png)

![](https://hackmd.io/_uploads/rkq5vANN3.png)
## inposttile
Воспользовавшись этим параметром, мы смогли обнаружить специальные ключи для эффективного поиска как в системе Google Earth, так и в самой поисковой системе Google
![](https://hackmd.io/_uploads/H14NwVHEh.png)
## cache
![](https://hackmd.io/_uploads/ryIJ_4S4n.png)
Отсюда мы смогли обнаружить последний snapshot текущей версии Google Earth. Также мы можем просмотреть ее такие версии как "только для чтения" или просмотреть код текущей версии сервиса.

## filetype
С помощью поиска по pdf-файлам обнаружили информацию о всех гео-инструментах компании Google:
![](https://hackmd.io/_uploads/r1LdYEHV2.png)
Кроме того, смогли найти еще несколько интересных файлов:
![](https://hackmd.io/_uploads/B1SrqVSE3.png)

![](https://hackmd.io/_uploads/ryVO9ES42.png)

Проверим doc-файлы:
Сразу же нашли подробное руководство по работе
![](https://hackmd.io/_uploads/r1V-RNSN2.png)

В основном, поисковик выдает обучающие материалы в подобном формате

Попробуем поискать и другие типы файлов, например, поохотимся на логи искомого сервиса
![](https://hackmd.io/_uploads/HyTmbHBEn.png)

Также были найдены и такие логи, но это однозначно не принадлежит тому, что мы ищем: посмотрев на них, это легко понять
![](https://hackmd.io/_uploads/SJDO-SHV3.png)

## site
Поиск по домену не дает ничего особенного: все ссылки отправляют нас прямиком на искомый сервис.
![](https://hackmd.io/_uploads/ByPIDNTN3.png)

---
На этом поиск с помощью Google Dorks подходит к концу. С помощью этого метода мы смогли найти достаточно много различной информации по нашей искомой карте.

---
## Поиск с помощью поисковых систем, ориентирующихся на конфиденциальность

![](https://hackmd.io/_uploads/S1wQ2zANh.jpg)


## 1. DuckDuckGo
![](https://hackmd.io/_uploads/Bkin_IYV3.png)
Честно говоря, вывод информации этой поисковой системы мало чем отличается от того же самого Google. С одной стороны, это хорошо, так как алгоритмы Google достаточно сложны и эффективны, но в нашем случае мы не получили никакой полезной информации с запроса.

## 2. Qwant 
Результат схож с поисковой системой DuckDuckGo, но я наткнулся на один немецкий сервис, который четко описывает нашу карту:
![](https://hackmd.io/_uploads/rJqT5IFNh.png)

![](https://hackmd.io/_uploads/BJgzsUKVn.png)

На сайте четко описана суть нашей карты и расписаны ее основные характеристики, кроме того, также на данном сайте предусмотрен и показ аналогов искомого нами сервиса

Сама же поисковая система не так сильно отличилась своими результатами, но основная фишка рассматриваемых нами сейчас сервисов в том, что они ориентированы на конфиденциальность.
![](https://hackmd.io/_uploads/H1UosUKVh.png)

## 3. Oscobo
Данная поисковая система меня разочаровала, поскольку ссылается на другие сервисы и не выводит никакой информации:
![](https://hackmd.io/_uploads/Byz9T8FNn.png)
А в Tails и вовсе ссылается на Google:
![](https://hackmd.io/_uploads/HkShpItNn.png)

## 4. Swisscows
Данная поисковая система наш запрос вывела через все сервисы Google:
![](https://hackmd.io/_uploads/BJT2RIt4h.png)
Кроме того, не могу не подчеркнуть функцию данной системы, которая показывает превью страницы:
![](https://hackmd.io/_uploads/ryeCuyvY43.png)

## 5. Gigablast
Данная поисковая система очень резко отреагировала на нашу анонимность:
![](https://hackmd.io/_uploads/H1xCrbvKEh.png)

Доверять на слово данному сервису о его конфедициальности было бы плохой идеей,поэтому пойдем дальше

## 6. Gibiru
Данная поисковая система также прошлась по всем сервисам Google Earth
![](https://hackmd.io/_uploads/S1YSmvKV3.png)



---
# Поиск с помощью национальных поисковых систем других стран

![](https://hackmd.io/_uploads/rJr6gmRN2.jpg)


## 1. Search - Switzerland
![](https://hackmd.io/_uploads/HJa6rwK43.png)
Выдал нам довольно скудный вывод, по сути, обратив нас на официальную help-страничку Google

## 2. Alleba - Philippines
Данная поисковая система резко отреагировала на нашу анонимность и не дала нам поработать с ней
![](https://hackmd.io/_uploads/SyZJDDYNh.png)

## 3. Baidu - China
Данная поисковая система выдала нам весьма разнообразный результат: от сервисов Google до последних новостей, связанных с нашей картой
![](https://hackmd.io/_uploads/rkGScvt4n.png)

## 4. Eniro - Sweden
Данная поисковая система выдала нам результат на картах, но это вовсе не то, что нам нужно
![](https://hackmd.io/_uploads/rko9sDKEn.png)

## 5. Daum - South Korea
Весьма неплохая поисковая система с широким выводом информации:
![](https://hackmd.io/_uploads/r1DySv5Eh.png)

Кроме различных help-страничек система выдала нам различные форумы, последние новости, связанные с искомым нами сервисом и непосредственные ссылки на нашу карту

## 6. goo - Japan
Данная поисковая система выдала нам все страницы google, ссылающие на сервис Google Earth
![](https://hackmd.io/_uploads/ryxarD9Nn.png)


## 7. Yandex - Russia
Данная поисковая система также в большинстве своем ссылает нас на официальные странички Google и Google Earth, но также выводит и основную информацию о данном сервисе
![](https://hackmd.io/_uploads/H1VILP94h.png)


## 8. Onet - Poland
Данная поисковая система ссылается на Google, результат он выводит аналогичный популярной поисковой системы:
![](https://hackmd.io/_uploads/Bys2PPcV2.png)


## 9. Parseek - Iran
Поисковая система вовсе нам ничего не выдала:
![](https://hackmd.io/_uploads/HkaPuD9En.png)

## 10. SapO - Portugal
Данная поисковая система многофункциональна, но на наш запрос она выводит лишь ссылки на искомый нами сервис
![](https://hackmd.io/_uploads/SkCZKv9E2.png)

## 11. LableB - arabic-based search engine
Поисковая система даже не дала нам попытку попользоваться ею, поскольку мы не зарегистрированы (для регистрации как минимум нужен номер телефона - для того, чтобы скрыть свои следы, нужно иметь сторонний телефонный номер для подобных операций)
![](https://hackmd.io/_uploads/BkW6KD54n.png)


---
# Бизнес-поиск

![](https://hackmd.io/_uploads/HkesmXAN2.jpg)


1. www.annualreports.com - перечисляет тысячи годовых записей более 5000 разных компаний
![](https://hackmd.io/_uploads/BylZUc5N3.png)

2. https://www.reportlinker.com - содержит более 60 миллионов поисковых таблиц, цифр и наборов данных.
![](https://hackmd.io/_uploads/rkoKUq9V2.png)
Кажется, мы нашли достаточно много интересной информации по нашему сервису, давайте познакомимся с ней поближе
Тут мы столкнулись с одной проблемой, а именно - с платной версией данного сервиса:
![](https://hackmd.io/_uploads/rkXGw5cN2.png)
Подписка на месяц стоит 89 евро, что нельзя назвать маленькой суммой.
3. https://www.gov.uk/government/publications/overseasregistries/overseas-registries перечисляет все реестры
компаний, расположенные по всему миру, предлагаемые
правительством Великобритании.
![](https://hackmd.io/_uploads/H1_6D99E3.png)
Этот сайт также нашел некоторую информацию о нашей карте
4. https://www.sec.gov/edgar/searchedgar/companysearch.html
является Комиссией по ценным бумагам и биржам США
![](https://hackmd.io/_uploads/ByLiu9543.png)

5. www.sedar.com предоставляет доступ к документам и
информации, поданных всеми канадскими администраторами
ценных бумаг.
![](https://hackmd.io/_uploads/HyEdYccN3.png)

6. https://www.commercial-register.sg.ch/home/worldwide.html
дает список государственных и коммерческих регистров по
всему миру.
![](https://hackmd.io/_uploads/SkU39ccV3.png)

Как видим из сложившейся ситуации, бизнес-поиск смог действительно дать заметное количество нужной информации, и это с учетом того, что занимаемся мы далеко не изучением какой-либо бизнес-компании.



---
# Поиск по деловой информации

1. Open Corporates (https://opencorporates.com): Это крупнейшая открытая база данных компаний в мире.
![](https://hackmd.io/_uploads/HyM5iq5N2.png)

2. Crunchbase (https://www.crunchbase.com): Предоставляет информацию о бизнес-компаниях, от стартапов на ранних стадиях до Fortune 1000, необходим VPN
![](https://hackmd.io/_uploads/BJWb3q9En.png)
Вывел данный сервис явно не ту информацию, которая требовалась

3. Corporationwiki (https://www.corporationwiki.com): Это позволяет искать любую компанию и
визуализировать связь между людьми, работающими в ней. Вы также можете скачать файл Excel, содержащий подробную информацию (включая ссылку на страницу на сайте, содержащую известный адрес человека) о каждом человеке, который работает в компании.
![](https://hackmd.io/_uploads/Byxdn5542.png)

4. Zoom Info (https://www.zoominfo.com/company-directory/us) : На этом сайте перечислены компании
в Соединенных Штатах, классифицированные по отраслям, и содержится информация, включая контактные данные, для людей, работающих в этих компаниях. Услуга платная и предлагает
пробную версию для тестирования услуги.
В данном сервисе нужно оставить свою личную информацию, что напрягает нас, поскольку мы не должны оставить никаких следов в рамках нашей практической работы
![](https://hackmd.io/_uploads/SyQW6q5En.png)

5. Kompass (https://www.kompass.com/selectcountry/) : Это глобальный бизнес-портал с информацией о компаниях в более чем 60 странах.
![](https://hackmd.io/_uploads/H1seAc9Eh.png)

6. Infobel (www.infobel.com) : Вы можете искать компанию или человека в любой точке мира.
![](https://hackmd.io/_uploads/rJ7A0q943.png)

7. Orbisdirectory(https://orbisdirectory.bvdinfo.com/version-20171019/OrbisDirectory/Companies) : Это
дает информацию о частных компаниях по всему миру бесплатно. Платная услуга предлагает более подробные отчеты – необходим VPN.
![](https://hackmd.io/_uploads/Bk07kjqV3.png)

8. Canadian Importers Database (https://strategis.ic.gc.ca/eic/site/cid-dic.nsf/eng/home) : Это приводит списки компаний, импортирующих товары в Канаду, по продуктам, по городам и по странам происхождения.
![](https://hackmd.io/_uploads/BJhw1o5N2.png)

9. LittleSis (https://littlesis.org) : Это мощный сайт профилирования, который перечисляет огромное количество информации о 185000 человек и 67000 организаций на различных стадиях завершения.
Этот сайт ориентирован на влиятельных людей и организации в государственном и частном
секторах, таких как политики, бизнесмены, лоббисты, бизнес-корпорации и некоммерческие организации, такие как фонды, социальные клубы, художественные группы и политические организации.
![](https://hackmd.io/_uploads/rkM1li9N2.png)

10. Companies House (https://beta.companieshouse.gov.uk) : Это регистр предприятий Великобритании (также содержит информацию о лицах в различных отраслях промышленности в Соединенном Королевстве).
![](https://hackmd.io/_uploads/rJJwgj5N3.png)

11. EUROPAGES (https://www.europages.co.uk) : Это европейский бизнес-портал, вмещает 3 миллиона зарегистрированных предприятий на 26 языках.
![](https://hackmd.io/_uploads/BkVlbj54h.png)

12. Vault (www.vault.com) : Это информация о американских компаниях (более 5000 компаний в 120 отраслях). Отзывы и рейтинги сотрудников также доступны для каждой компании, включенной в перечень. Платные абоненты имеют доступ к подробной информации.
![](https://hackmd.io/_uploads/r1SL-i9Eh.png)

13. Owler (https://www.owler.com) : Это большое количество информации о более чем 15 миллионах компаний по всему миру.
![](https://hackmd.io/_uploads/r1GJQj9En.png)

![](https://hackmd.io/_uploads/B1Fl7oqNn.png)

14. The United Kingdom Limited Liability Company list (https://www.companiesintheuk.co.uk) :
Предоставляет бесплатную информацию и официальные документы о любой компании с ограниченной ответственностью в Великобритании.
![](https://hackmd.io/_uploads/S1SVmj9N2.png)

15. Kvk (www.kvk.nl) : Это Голландская торговая палата, которая является реестром немецких компаний.
![](https://hackmd.io/_uploads/r1xo7s9Nh.png)

16. International White and Yellow Pages (www.wayp.com) : Здесь содержатся имена, адреса, номера телефонов и факсов.
![](https://hackmd.io/_uploads/ryfuVicN3.png)

Данные сервисы тоже могут дать нам некоторую информацию о искомом объекте.


---
# Анализ с помощью поисковых систем метаданных

![](https://hackmd.io/_uploads/SJS5dQA43.jpg)

1. www.etools.ch/search.do собирает его результаты из крупных международных поисковых систем, сохраняя конфиденциальность пользователей, не собирая и не обмениваясь личной информацией
о своих пользователях. Эта поисковая система быстро показывает резюме для каждого поискового запроса

Данный сервис очень резко относится к различным подменам IP и всей анонимности пользователей в целом - сразу блокируются запросы
![](https://hackmd.io/_uploads/rkR33roE2.png)
Блокирует практически все:
![](https://hackmd.io/_uploads/BJdfTHiNh.png)

2. All the Internet (https://www.alltheInternet.com) запросы основных поисковых систем, включая торговые сайты, как Amazon и eBay
![](https://hackmd.io/_uploads/SkfqTBjN3.png)
Как видим, информация не так уж и сильно отличается от вывода того же самого Google: нам показывают основные сервисы Google, напрямую связанные с картой Google Earth

3. Fagan Finder (www.faganfinder.com/engines) запросы основных поисковых систем, а также ответы двигателей и вопросов и ответов сайтов и блогов.
![](https://hackmd.io/_uploads/SJQiRSoE2.png)
Выбираем нужный нам инструмент поиска и ищем:
![](https://hackmd.io/_uploads/S1plJLoEh.png)

4. www.izito.com агрегирует данные из нескольких источников (Yahoo, Bing, Wikipedia, YouTube и др.)
для получения оптимальных результатов, включающие изображения, видео, новости и статьи.
![](https://hackmd.io/_uploads/B1aU18iVh.png)
Данная поисковая система вывела нам привычный уже для нас ответ.

5. Metacrawler (www.metacrawler.com) агрегирует результаты от Google и Yahoo
![](https://hackmd.io/_uploads/B1zOlUjN2.png)

6. My All Search (https://www.myallsearch.com) агрегирует результаты через Bing, DuckDuckGo, AOL Search, Ask, Oscobo, Mojeek, ZapMeta и MetaCrawler.
![](https://hackmd.io/_uploads/BymlZIo4h.png)
Удивительный ответ

7. Carrot2 (http://search.carrot2.org/) агрегирует результаты от Google API, Bing API, eTools Meta Search, Lucene, SOLR и многое другое. Он организует результаты в тематические категории (круги и пены деревьев), помогая пользователям сузить их поиск визуально, разделив его на многие темы.

Данный сервис вовсе заблокировал наш IP из-за якобы частых и подозрительных запросов:
![](https://hackmd.io/_uploads/r1B1MIjNh.png)

8. elocalfinder (www.elocalfinder.com/HSearch.aspx) получает результаты от Google, Yahoo, Ask, и Bing и отображает их в таблице для сравнения вместе с общим рейтингом
Удобная поисковая система со структурированным выводом:
![](https://hackmd.io/_uploads/rJqUzLj42.png)

9. Opentext (https://searchopentext.com/) — это метапоисковый движок, основанный на Google, Yahoo!, Ask, Bing, Википедии и Open Directory. Он также предлагает поиск утилиты для поиска в социальных сайтах, как Facebook, Twitter, YouTube и LinkedIn в дополнение к новости поисковых систем (агрегирование результатов от Guardian, Reuters, Washington Post, BBC News, и ЛосАнджелес таймс ") и здоровья поисковые системы
![](https://hackmd.io/_uploads/SJy378oVn.png)

Как видим, система метапоиска действительно находит широкий спектр различной информации об искомом объекте.

---
# Code Searching
В этом разделе мы возьмем часть кода нашей карты и попробуем проанализировать его через специальные сервисы поиска по коду

1. Searchcode (https://searchcode.com) поиск по Google code, GitHub, Bitbucket, CodePlex, Sourceforge,
Fedora Project, and GitLab.
![](https://hackmd.io/_uploads/ryhprUiNh.png)

2. Nerdaydata (https://nerdydata.com/search) требует ежемесячную подписку, чтобы разблокировать все функции.

К сожалению, данный сервис даже не смог определить сайт, к которому относится этот код
![](https://hackmd.io/_uploads/rkDOL8o4h.png)

3. Codase (www.codase.com ) поиск по 250 миллионов строк кода.

Данный сервис вовсе не имеет даже поисковой строки для ввода, а весь функционал сайта отсутствует:
![](https://hackmd.io/_uploads/BJeEDLiE3.png)

4. The O’Reilly source code search (http://labs.oreilly.com) дает доступ ко всем фрагментам кода в книгах O'Reilly
![](https://hackmd.io/_uploads/S1G9DIsV2.png)

5. Merobase (http://merobase.com) поисковая система кода для компонентов программного обеспечения Java

Данный сервис сейчас не работает:
![](https://hackmd.io/_uploads/HkSPd8sN3.png)

Как видим, пусть немного, но какая-то информация о нашем сервисе была получена, что отражает полезность используемых нами инструментов в данном разделе.


---
# ftp-поиск

Google запрос для поиска ftp:
• **inurl:“ftp://www.” “Index of /”** - этот поисковый запрос может быть использован для поиска серверов Ftp онлайн.

С помощью данного запроса + Google Earth мы нашли ftp-сервер, в котором мы отыскали хранящуюся на нем информацию:
![](https://hackmd.io/_uploads/ByCZwvoVn.png)

**inurl:ftp -inurl:(http|https) “SEARCH QUERY”** - используйте это для поиска всех серверов Ftp, которые имеют указанный поисковый запрос.
![](https://hackmd.io/_uploads/Byy8OPsVh.png)

Также воспользуемся тремя сервисами для поиска ftp-серверов
1. Global file search (https://www.similarweb.com/website/globalfilesearch.com/#overview)
![](https://hackmd.io/_uploads/rJLqYvo4h.png)

![](https://hackmd.io/_uploads/H10ntPj42.png)

![](https://hackmd.io/_uploads/SJ0pKvo43.png)

![](https://hackmd.io/_uploads/r1R0tDjEh.png)

2. Filemare (https://www.topbestalternatives.com/filemare/)
Официальный сайт сейчас не работает:
![](https://hackmd.io/_uploads/ryyShwj42.png)
3. Archie (https://archive.is/archie.icm.edu.pl)
![](https://hackmd.io/_uploads/SJvYTPiN2.png)

Как видим, ftp-поиск - это весьма эффективный способ нахождения информации в интернете, он также принес нам некоторую о искомой нами карте.


---
# Поиск интернета-вещей
В данном разделе мы воспользуемся сервисами поиска интернета-вещей, которые потенциально могут помочь нам в нашем osint-исследовании

1. Shodan (https://www.shodan.io) : Shodan является первой в мире поисковой системой для подключенных к Интернету устройств.
![](https://hackmd.io/_uploads/S1idVOiE2.png)

2. Insecam (www.insecam.org) : Это каталог онлайн-камер наблюдения безопасности.
Результата нам этот сервис не дал:
![](https://hackmd.io/_uploads/ryVvr_jEh.png)

3. Lookr (https://www.lookr.com) : Это списки веб-камеры из разных мест по всему миру.
Пусть данный сервис никак нам не поможет в нашем исследовании, но я не могу не отметить широкий функционал данной карты:
![](https://hackmd.io/_uploads/HkSbLOiNn.png)

4. Open Street Cam (https://kartaview.org/map/@-6.407518221863476,107.04770438649952,8z) : В нем перечислены веб-камеры со всего мира.
Оказывается, на планете есть места, названные Google Earth:
![](https://hackmd.io/_uploads/BJiP8_jVh.png)

5. Pictimo (https://www.pictimo.com) : Это поиск для потокового веб-камеры со всего мира.
![](https://hackmd.io/_uploads/Bkt3L_jE3.png)

6. Thingful (https://umbrellium.co.uk/projects/thingful/) : Это поисковая система для Интернета вещей.
![](https://hackmd.io/_uploads/BkkBuOjV2.png)

Поиск интернета-вещей в данной работе не так эффективен, так как объектом нашего исследования является картографический сервис, а не устройство.


---
# Кэширование веб-сайта
1. Internet Archive (the Wayback Machine; https://archive.org/web/web.php) является самым популярным сайтом архива; он имеет более чем 308 миллиардов веб-страниц, сохраненных с течением времени, и каждый может захватить веб-страницу, чтобы использовать его в будущем в качестве ключа или ссылки.
![](https://hackmd.io/_uploads/S1Kl2uiN3.png)

2. Archive (https://archive.fo/) также доступна.
![](https://hackmd.io/_uploads/rkL43OiVn.png)

3. Cached pages (www.cachedpages.com/) показывает предыдущие веб-сайты, захваченные на трех различных сайтах архивов (Google кэш, Coral и Archive.org).
![](https://hackmd.io/_uploads/HyJ3huiV2.png)

4. Library of Congress (https://loc.gov/websites)
![](https://hackmd.io/_uploads/SJN56usV2.png)

5. UK Web Archive (www.webarchive.org.uk/ukwa)
![](https://hackmd.io/_uploads/HyEeCOjEh.png)

6. Stanford Web Archive Portal (https://swap.stanford.edu) это еще один.
![](https://hackmd.io/_uploads/HJg40uiE3.png)
 
7. Oldweb.today (http://oldweb.today) извлекает архивные веб-страницы из различных
общедоступных интернет-архивов. Вы также можете отображать архивные веб-сайты с помощью различных веб-браузеров.
![](https://hackmd.io/_uploads/SJeqAOiV3.png)

8. UK Government Web Archive (www.nationalarchives.gov.uk/webarchive/) содержит веб-архивы
правительства Великобритании, опубликованные в Интернете с 1996 года по настоящее время. Архивное содержимое включает видео, твиты и веб-страницы.
![](https://hackmd.io/_uploads/B1j6CdoNn.png)

Данная методика исследования очень эффективна при osint-расследованиях, так как с ее помощью можно найти различные вкладки и ресурсы, которые были когда-то убраны.

---
# Мониторинг веб-сайта
Есть много онлайн-сервисов, которые позволяют отслеживать неограниченное количество страниц. Это работает, отправив вам оповещение по электронной почте, как только изменение
обнаруживается в конкретной странице (выбранной вами). Некоторые платные услуги позволяют получать SMS-оповещения также. Ниже приведены основные бесплатные услуги мониторинга
веб-сайта в настоящее время:
1. Google Alerts (https://www.google.com/alerts) это обнаружение изменений веб-контента (на основе фразы поиска или ключевых слов) и службы уведомлений, предлагаемых Google. Чтобы установить оповещение, необходимо перейти на страницу Google Alerts (сначала необходимо войти в свой аккаунт Google)
![](https://hackmd.io/_uploads/rkuxPqs43.png)

2. Talk Walker (www.talkwalker.com/alerts) является альтернативой Google Alert.
![](https://hackmd.io/_uploads/SJ27DcjEn.png)

3. Visual Ping (https://visualping.io) отслеживает веб-страницы для любых обнаруженных изменений; бесплатный счет дает вам 62 проверки в месяц.
![](https://hackmd.io/_uploads/Syv2D5jEh.png)

4. Follow That Page (https://www.followthatpage.com) дает вам две ежедневные проверки с бесплатной учетной записью.
![](https://hackmd.io/_uploads/S1ypuqsE3.png)

5. Watch That Page (www.watchthatpage.com) дает вам 70 еженедельных проверок на всех ваших страницах.
![](https://hackmd.io/_uploads/rJAPY9oEn.png)

6. Update Scanner (https://addons.mozilla.org/en-US/firefox/addon/update-scanner) — это расширение Firefox, которое отслеживает веб-страницы для обновления.
![](https://hackmd.io/_uploads/B1gPxv33N3.png)

![](https://hackmd.io/_uploads/S17aUhnN3.png)

Данный раздел также оказался довольно полезным для нас, так как мониторинг нужных нам сайтов будет держать нас в курсе последних обновлений и изменений сайта, что может давать нам самую последнюю и актуальную информацию в рамках нашего исследования того или иного сервиса.


---
# Новостной поиск

![](https://hackmd.io/_uploads/ryw2R7AEn.png)


1. 1stHeadlines (https://www.1stheadlines.com) : Это списки последних новостей заголовок.
![](https://hackmd.io/_uploads/B1yEo3nN2.png)

2. News Now (www.newsnow.co.uk) : В этом списке последние новости со всего мира.
![](https://hackmd.io/_uploads/BJewoh2Eh.png)

3. All You Can Read (www.allyoucanread.com) : Этот веб-сайт перечисляет все основные газеты и средства массовой информации в каждой стране по всему миру (обычно список 30 лучших сайтов).
![](https://hackmd.io/_uploads/H1P92hnEh.png)
Как видим, в CNN ничего не писали про искомый нами сервис Google Earth

4. Daily Earth (http://dailyearth.com/index.html) : Это глобальный каталог газет.
![](https://hackmd.io/_uploads/ByWf6n342.png)

5. Chroniclingamerica (https://chroniclingamerica.loc.gov/search/titles) : Поиск в каталоге газет США.
![](https://hackmd.io/_uploads/HyULTnn4h.png)

6. Newspaper Map (http://newspapermap.com) : Это глобальная газетная карта.
Это не совсем то, что нам понадобится при нашем исследовании, но карта эта полезная:
![](https://hackmd.io/_uploads/B1MM032N3.png)


7. World News (https://wn.com) : Сборник мировых новостей, агрегированных из различных источников.
![](https://hackmd.io/_uploads/B1zOAnnE3.png)

8. The Paperboy (https://www.thepaperboy.com/index.cfm) : Это агрегирует новости от крупных информационных агентств, перечисляет все газеты со всего мира, и показывает, титульная страница крупных газет со всего мира.
![](https://hackmd.io/_uploads/SyPCAnhNn.png)

Новостной поиск - это, действительно, очень полезный способ узнать самую разную информацию и искомом объекте. Порой даже секретная информация того или иного объекта может быть выложена в СМИ, поэтому новостной поиск является неотъемлемой частью osint-исследования.


---
# Обнаружение поддельных новостей

1. Snopes (https://www.snopes.com) обнаруживает ложные новости, рассказы и городские легенды и исследования / проверяет слухи, чтобы увидеть, являются ли они истинными.

![](https://hackmd.io/_uploads/HktFET3V2.png)

![](https://hackmd.io/_uploads/B1DcQT3N3.png)

2. Hoaxy (https://hoaxy.iuni.iu.edu ) проверяет распространение ложных утверждений (например, мистификация, слухи, сатира или новостной отчет) через социальные сети. Сайт получает свои результаты от авторитетных организаций по проверке фактов, чтобы вернуть наиболее точные результаты.

![](https://hackmd.io/_uploads/H1XNSpnVn.png)

3. FactCheck (www.factcheck.org/fake-news) сотрудничает с Facebook, чтобы помочь определить и маркировать поддельные новости, о которых сообщают его пользователи. Он также отслеживает различные средства массовой информации для ложной информации, охватывающей широкий спектр тем, как здравоохранение, наука и мистификации распространяется через спам электронной почты.

![](https://hackmd.io/_uploads/Bk6lIT2V2.png)

4. https://reporterslab.org/fact-checking дает карту глобальных сайтов по проверке фактов.
![](https://hackmd.io/_uploads/BJU5U6nNh.png)

5. www.truthorfiction.com обнаруживает поддельные новости в различных темах, таких как политика, природа, здоровье, пространство, преступность, полиция и терроризм, и так далее.
![](https://hackmd.io/_uploads/SJbNwp2E2.png)

6. Verification Handbook (http://verificationhandbook.com) является окончательным руководством по проверке цифрового контента для быстрого освещения на разных языках.
![](https://hackmd.io/_uploads/SkzawahV2.png)
По сути, данный сайт ориентирован на продвижение в массы данного пособия для понимания того, как идентифицировать и работать с фейковой информацией.

7. Verification Junkie (http://verificationjunkie.com) — это каталог инструментов для проверки, проверки фактов и оценки достоверности отчетов очевидцев и самого опубликованного контента в Интернете.
![](https://hackmd.io/_uploads/HyxhOa34h.png)

8. https://citizenevidence.org есть инструменты и уроки, чтобы научить людей, проверки подлинности пользовательского контента содержимого в Интернете. Он управляется Amnesty International.
![](https://hackmd.io/_uploads/S1XzKan4n.png)

9. InVID Verification Plugin (www.invid-project.eu/tools-and-services/invid-verification-plugin) поддерживает как Mozilla Firefox, так и Chrome. Это инструмент, созданный европейским проектом InVID, чтобы помочь журналистам проверять контент в социальных сетях.
![](https://hackmd.io/_uploads/SyQRKThV2.png)

В рамках osint-исследований очень важно проверять информацию на достоверность, так как неверное решение или выбор недостоверного источника модет обернуть всю исследовательскую работу вспять.


---
# Поиск с помощью серой литературы

1. Academia (https://www.academia.edu) является платформой для ученых, чтобы поделиться научноисследовательских работ, более 19 миллионов работ в настоящее время загружены, охватывающих все академические предметы.
![](https://hackmd.io/_uploads/Sk-TnahEn.png)

2. Academic Index (www.academicindex.net) является научно-академической поисковой системы, которая перечисляет только выбранные наборы качественных веб-сайтов, выбранных учеными, библиотекарями, преподавателями и библиотечными консорциумами.
![](https://hackmd.io/_uploads/Hy8la6hNn.png)

3. Academic Torrents (http://academictorrents.com) является распределенным репозиторием для наборов данных и научных знаний, поддерживаемых сообществом. Здесь проводятся научные исследования, курсы, наборы данных, документы и коллекции с использованием технологии Torrent, где каждый пользователь системы может хранить исследовательскую работу и предлагать ее для скачивания, используя только домашний компьютер. Все, что вам нужно, это клиент Torrent, и вы готовы скачать и поделиться их содержанием.
![](https://hackmd.io/_uploads/H1MNpanVh.png)

4. American Doctoral Dissertations (www.opendissertations.com) предоставляет бесплатный доступ к более чем 172 000 диссертаций и диссертаций, принятых американскими университетами с 1902 года по настоящее время.
![](https://hackmd.io/_uploads/SygUAT3En.png)

5. ArchiveGrid (https://beta.worldcat.org/archivegrid) содержит более пяти миллионов архивных материалов, собранных из архивов, библиотек, музеев и исторических обществ. Основные темы включают исторические документы, а также личные и семейные документы и истории – нужен VPN.
![](https://hackmd.io/_uploads/H1PYRp3V3.png)

6. Google Scholar (https://scholar.google.com/schhp?hl=en) является поисковой системой Google, чтобы найти научные исследования. Результаты ранжируются на основе количества цитирований (рассчитанных на основе количества людей, которые ссылаются на исследование) и достоверности публикации.
![](https://hackmd.io/_uploads/S1YHk02Vn.png)

7. Вы также можете создавать оповещения (например, Google оповещения уже охвачены), так что вы получите информацию, когда новая научная исследовательская статья будет опубликована, что соответствует вашим критериям поиска.

8. The Bielefeld Academic Search Engine (https://www.base-search.net/Search/Advanced) содержит более 100 миллионов документов.
![](https://hackmd.io/_uploads/SygGeC3E2.png)

9. Archive Portal Europe (www.archivesportaleurope.net) предоставляет доступ к информации о архивных материалах из разных европейских стран, охватывающих многочисленные темы (такие как сельское хозяйство, здравоохранение, правосудие, политика и наука)
![](https://hackmd.io/_uploads/Hy6HlA3E2.png)

10. Social Science Research Network (https://www.ssrn.com/en) предоставляет более полумиллиона научных работ, охватывающих 30 тем.
![](https://hackmd.io/_uploads/rJjAeR3Vh.png)

11. The National Library of Australia (http://trove.nla.gov.au) имеет более 500 миллионов австралийских и онлайн-ресурсов, охватывающих книги, журналы, ежегодные отчеты, изображения, исторические газеты, карты, музыку, архивы и многое другое.
![](https://hackmd.io/_uploads/S1PVWC2N3.png)

12. ScienceDirect (www.sciencedirect.com) содержит более 250 000 статей открытого доступа (бесплатно для чтения и загрузки) в научных, технических и медицинских исследованиях.
![](https://hackmd.io/_uploads/SJenwbA3Nn.png)

13. PQDT Open (https://pqdtopen.proquest.com/search.html) предоставляет открытый доступ к диссертациям и диссертациям бесплатно – необходим VPN.
![](https://hackmd.io/_uploads/r1oiZCn4h.png)

14. The National Archive of the United Kingdom (http://discovery.nationalarchives.gov.uk) содержит более 32 миллионов описаний записей, хранятся в Национальном архиве и более 2500 архивов по всей Великобритании, многие из них доступны для скачивания.
![](https://hackmd.io/_uploads/SyUtM03Vn.png)

15. Oxford Academic (https://academic.oup.com/journals) содержит журналы в области права, бизнеса, науки, социальных наук, искусства и медицины.
![](https://hackmd.io/_uploads/r1glmRn43.png)

16. Page Press (www.pagepress.org) содержит научные журналы открытого доступа.
![](https://hackmd.io/_uploads/ryrF7Rh4h.png)

17. CERN Document Server (https://cdsweb.cern.ch) обеспечивает свободный доступ к тысячам статей, книг, перепечаток, презентаций и переговоров, мультимедиа и информационнопропагандистской деятельности, охватывающей в основном физическую науку.
![](https://hackmd.io/_uploads/rJRyEAh43.png)

18. High Wire (http://highwire.stanford.edu/lists/freeart.dtl) имеет бесплатные онлайн полнотекстовые статьи.
![](https://hackmd.io/_uploads/ByuENAnE3.png)

19. Gray Guide (http://greyguide.isti.cnr.it) имеет ресурсы серой литературы.

![](https://hackmd.io/_uploads/By3iNA242.png)

20. Beyond Citation (www.beyondcitation.org) предоставляет информацию о различных академических базах данных и других цифровых исследовательских коллекциях.
![](https://hackmd.io/_uploads/ry4pNAn4h.png)

21. Crossref (https://search.crossref.org) поиск метаданных (название, автор, DOI, ORCID ID, ISSN) более 92 миллионов журнальных статей, книг, стандартов и наборов данных.
![](https://hackmd.io/_uploads/rkHkS0nN3.png)

22. Databases (https://databases.today) — это каталог общедоступных баз данных для загрузки бесплатных ресурсов для исследователей безопасности и журналистов.
Хост недоступен
![](https://hackmd.io/_uploads/SJWLURn43.png)

Серая литература - это очень полезные материалы как при osint-исследовании, так и в жизни, так как, по сути, это платные материалы, которыми мы можем завладеть бесплатно.


---
# Проверка сервиса на разоблачения

1. WikiLeaks (https://wikileaks.org)
![](https://hackmd.io/_uploads/rJng5An42.png)
Сервис недоступен

2. Cryptome (https://cryptome.org)
Сервис предоставляет архивы со слитыми документами
![](https://hackmd.io/_uploads/HyIt3RnNn.png)

3. Offshore Leaks (https://offshoreleaks.icij.org)
![](https://hackmd.io/_uploads/Syn23RhN3.png)

Проверка информации на разоблачения и утечки - это важная составляющая информационной безопасности. Закрыв глаза на столь важную тематику, можно допустить огромное количество ошибок при работе в сети, что может привести к серьезным последствиям.


---
# Поиск по изображению
Следующие сайты предлагают услуги по поиску изображений:
1. Google Image Search (https://images.google.com)
![](https://hackmd.io/_uploads/rJh3eyaV3.png)

2. Bing image search (www.bing.com/images)
![](https://hackmd.io/_uploads/HJU8-y6E2.png)

3. Yandex (https://yandex.com/images)

![](https://hackmd.io/_uploads/H1NqGy642.png)

4. Baidu (http://image.baidu.com)
![](https://hackmd.io/_uploads/HysJXyT4h.png)

5. Photobucket (http://photobucket.com)
Данный сервис является платным

6. Picsearch (https://www.picsearch.com/)
![](https://hackmd.io/_uploads/HyHoX1aV3.png)

> В рамках нашего исследования один зарубежный сайт воспользовался логотипом Google Earth, выдав за свой.

Поиск по изображениям является неотъемлемой частью osint, в рамках наших исследований мы должны пользоваться или хотя бы помнить о таком шикарном способе поиска информации.

Изображения, опубликованные в социальных сетях, можно найти в следующих местах:
1. Flickr (https://www.flickr.com)
![](https://hackmd.io/_uploads/BJaYU1T42.png)

2. Instagram (https://www.instagram.com) необходим VPN.
3. Websta (https://websta.me/search) — расширенный поиск веб-сайта Instagram.
4. Pinterest

Есть специализированные сайты, которые содержат изображения, которые появились в прессе и средствах массовой информации. Для поиска такого типа изображений, попробуйте эти сайты:
1. Gettyimages (www.gettyimages.com)
![](https://hackmd.io/_uploads/HyAQMZ642.png)

2. News Press (https://www.news-press.com/media/latest/news)
![](https://hackmd.io/_uploads/SksVlMaN3.png)

3. Associated Press Images Portal (www.apimages.com)
![](https://hackmd.io/_uploads/Hk5YeMTV2.png)

4. PA Images (https://www.paimages.co.uk)
![](https://hackmd.io/_uploads/SJPvbf6En.png)

5. European Pressphoto Agency (www.epa.eu)
![](https://hackmd.io/_uploads/Byz57zp4n.png)

6. Canadian Press Images Archive (www.cpimages.com/fotoweb/index.fwx)
![](https://hackmd.io/_uploads/BkzyNM6Eh.png)

---
# Манипулирование изображениями

1. Forensically (https://29a.ch/photo-forensics/#forensic-magnifier) : Этот сайт предлагает бесплатные инструменты для анализа изображений судебно-медицинской экспертизы; она включает в себя обнаружение клонов, анализ уровня ошибок, извлечение метаданных и многое другое
![](https://hackmd.io/_uploads/B1NTrMTVh.png)

![](https://hackmd.io/_uploads/rJgkLz6V3.png)

2. Fotoforensics (http://fotoforensics.com) : Это предлагает анализ судебно-медицинской экспертизы файлов JPEG и PNG для проверки на наличие каких-либо манипуляций с использованием методов анализа уровня ошибок (ELA) – необходим VPN.
![](https://hackmd.io/_uploads/HkT5LGaNn.png)

3. ExifTool: Вы можете читать, писать и редактировать мета-информацию в самых разнообразных файлах. Он поддерживает различные форматы метаданных, такие как EXIF, GPS, IPTC, XMP, JFIF, GeoTIFF, ICC Profile, Photoshop IRB, FlashPix, AFCP и ID3.
![](https://hackmd.io/_uploads/BJuK5G6Eh.png)

4. GeoSetter (www.geosetter.de/en) : Вы можете манипулировать/просматривать геоданные и другую информацию о метаданных — другие изображения.
![](https://hackmd.io/_uploads/SkF2VQ6Vn.png)

5. Lets Enhance (https://letsenhance.io) : Вы можете увеличить размер фотографии, не теряя ее качества. Бесплатная учетная запись позволяет для 14 изображений. Тем не менее, вам все еще нужно загрузить целевое изображение на сервер, и это наложит проблемы конфиденциальности на загруженные файлы – необходим VPN.
![](https://hackmd.io/_uploads/HywZLQTVh.png)
Качество полученной фотографии в разы лучше исходной.

Проверка фото на манипуляции очень важно в нашей работе, так как простые механизмы стеганографии могут просачиваться в тех или иных файлах, что может дать нам возможность завладеть ценной информацией в наших расследованиях.


---
# Поиск видеоконтента
Основной поиск видео, самые популярные сайты:
1. YouTube (https://www.youtube.com)
![](https://hackmd.io/_uploads/BkpsvXTVn.png)

2. Google videos (https://www.google.com/videohp)
![](https://hackmd.io/_uploads/BJ56PmaNh.png)

3. Yahoo video search (https://video.search.yahoo.com)
![](https://hackmd.io/_uploads/SJfe_7pN3.png)

4. Bing videos (https://www.bing.com/videos)
![](https://hackmd.io/_uploads/SkQGO7aVn.png)

5. AOL (https://www.aol.com/video) – необходим VPN.
![](https://hackmd.io/_uploads/r1PUOX643.png)

6. StartPage video search (https://www.startpage.com/eng/video.html)
![](https://hackmd.io/_uploads/SkuduX6Vh.png)

7. Veoh (www.veoh.com)
![](https://hackmd.io/_uploads/HJicOmpE3.png)

8. 360daily (www.360daily.com)
![](https://hackmd.io/_uploads/rkaWKX6E2.png)

9. Internet archive open source movies (https://archive.org/details/opensource_movies)
![](https://hackmd.io/_uploads/SJJ5h7pEh.png)

10. Live Leak (https://www.liveleak.com)
![](https://hackmd.io/_uploads/SJGa2QTVh.png)

11. Facebook live video map (http://facebook.com/livemap) – необходим VPN.
![](https://hackmd.io/_uploads/H1aGpXTVn.png)

Данный способ нахождения информации об искомом объекте эффективен, поскольку с помощью такого рода информации можно либо заполучить какие-то ценные данные, либо разобраться с искомым объектом в целом.


---
С помощью расширения Mozila Firefox - Easy YouTube Video Downloader Express скачаем одно из видео на YouTube про Google Earth и проанализируем этот файл:
![](https://hackmd.io/_uploads/B1W67NaNn.png)

![](https://hackmd.io/_uploads/SkRpQVaEh.png)

![](https://hackmd.io/_uploads/SkoRXEpEh.png)

![](https://hackmd.io/_uploads/SyNyNNT4n.png)

---
Вывод: в данной практической работе мы опробовали огромное количество способов и сервисов для osint-исследования. Наши действия в сети все это время происходили при полной анонимности, и мы теперь понимаем, что многие сайты очень не любят таких скрытных пользователей. По сути, мы отработали с тем инструментарием, с которым можем успешно работать в своих будущих osint-исследования