03.12.2010 г.

«Секретные файлы» невидимого интернета

Рогачева Елена ЮрьевнаГенерального директора

ООО «ДьюМаркс»

ООО «ДьюМаркс»

Duemarx – первая маркетинговая компания на российском рынке объединившая в себе технологии due diligence и маркетинга.

Маркетинговая разведка:рыночные исследования;конкурентные исследования;моделирование потребительского опыта;оценка привлекательности отрасли;поиск деловых партнеров;ценообразование;брендинг.

ООО «ДьюМаркс» создано на основе группы компаний «Р-Техно»и является ее дочерней компанией.

В 2008 году компания «ДьюМаркс» была награждена дипломом - «Инновационным продуктом года» порталом безопасности SEC.RU

Что такое невидимый интернет

Невидимый интернет – информация, которая хранится в Сети и которая не была проиндексирована поисковыми системами типа «Гугл» и «Яндекс». Еще его называют: Скрытый Интернет (Hidden Web)Глубинный Интернет (Deep Web)

Термин Deep Web впервые использовал Джилл Эллсворт в 1994году для обозначения страниц, которые не были проиндексированы какой-либо поисковой системой. Сейчас невидимый интернет приобрел глобальные размеры. По данным ученых из Калифорнийского университета в Беркли в 2008 году поисковые системы индексировали лишь 0,2% страниц интернета, а 99,8% составляет информация, доступ к которому обычные поисковики получить не могут. Однако по оценкам других независимых экспертов, невидимый интернет составляет долю от 20% до 50%.

Причины возникновения невидимого интернета

Причина Разъяснение

Скрытая страница Ссылки на тот или иной документ не были опубликованы на известных поисковикам Страницах.

Закрытая страница Индексация сайта запрещена файлом robots.txt

Сайт содержит в основном фотографии, видео и аудио

Из-за отсутствия текста робот не может понять содержание страницы

Сайт содержит не известные поисковику форматы файлов

Из-за неизвестного формата поисковые машины файл не могут прочитать

Удаление документа Выложенные документы, быстро удаляются с сервера, так и не успев проиндексироваться

Страница формируется исходя из запроса к базе данных

Индексация не возможна т.к. роботы не умеет формировать запрос к базам данным

Основные государственные ресурсы для бизнес-разведки содержащие файлы невидимого интернета

ФНС РФ ВАС РФ ПФР ФССП

ФАС РФ МВД РФ ФССН РФ НК МФ Казахстана

Федеральная налоговая служба РФ (ФНС РФ) www.nalog.ru

На сайте ведомства содержится следующая информация которую можно отнести к невидимому интернету: Регистрационные данные на компанию Данные о ликвидации компаний Данные о перерегистрация юр.лица Компании указавшие адреса массовой регистрации

Информация попадает в зону невидимого интернета, т.к. страница формируется исходя из запроса к базе данных

Информация невидимого интернета:Задолженность по транспортному налогу физ. лицЗадолженность по земельному налогу физ.лицНачисленные пени по земельному и транспортному налогу.

Высший Арбитражный Суд РФ (ВАС РФ) www.arbitr.ru

На сайте ведомства содержится следующая информация которую можно отнести к невидимому интернету: История по арбитражным делам Решение арбитражных судов Информация по делам ВАС РФ

Информация входит зону невидимого интернета, т.к. страница формируется исходя из запроса к базе данных, а документы размещены в неизвестном поисковику формате

Пенсионный фонд РФ (ПФР) www.pfrf.ru

На сайте ведомства содержится следующая информация которую можно отнести к невидимому интернету: Неплательщики по страховым взносам Юридические и физические лица имеющие задолженность перед ПФ Численность сотрудников организаций

Информация размещена в неизвестном поисковику формате, а со временем удаляется

Информация которую можно было найти

Федеральная служба судебных приставов РФ (ФССП) www.fssprus.ru

На сайте ведомства содержится следующая информация которую можно отнести к невидимому интернету: Должники: организаций и индивидуальные предпринимателиИнформирование о лицах, находящихся в розыске в связи с неуплатой алиментовИнформация о наличии задолженности в рамках исполнительного производстваСведения о розыске автотранспортных средств должников

Информация входит зону невидимого интернета, т.к. страница формируется исходя из запроса к базе данных, а документы размещены в неизвестном поисковику формате

Федеральная антимонопольная служба (ФАС РФ)www.fas.gov.ru

На сайте ведомства содержится следующая информация которую можно отнести к невидимому интернету: Перечень лиц входящие в группу компаний Информация о недобросовестных поставщиках Структуры группы компаний

Информация входит зону невидимого интернета, т.к. страница формируется исходя из запроса к базе данных, а документы размещены в неизвестном поисковику формате или позже удаляется

Министерство внутренних дел РФ (МВД РФ)www.mvd.ru

На сайте ведомства содержится следующая информация которую можно отнести к невидимому интернету: Лица, находящиеся в розыске по подозрению в совершении преступленийЛица находящиеся в федеральном розыскеРозыск несовершеннолетних Розыск лиц причастных к наркоторговле Лица без вести пропавшие

Выложенные документы, быстро удаляются с сервера, так и не успев проиндексироваться

Федеральная служба страхового надзора (ФССН РФ)www.fssn.ru

На сайте ведомства содержится следующая информация которую можно отнести к невидимому интернету:Розыск руководителей страховых компанийРозыск страховых компанийДанные о ликвидации страховых компаний

Выложенные документы, быстро удаляются с сервера, так и не успев проиндексироваться

Налоговый комитет Министерства финансов Республики Казахстан

На сайте ведомства содержится следующая информация которую можно отнести к невидимому интернету:Перечень лжепредприятий Налогоплательщики, имеющие налоговую задолженность Налогоплательщики, признанные бездействующими Плательщики НДС, у которых приостановлено действие свидетельства о постановке на регистрационный учет по  НДС Налогоплательщики, снятые с регистрационного учета

Выложенные документы, быстро удаляются с сервера, так и не успев проиндексироваться

Web Insight http://r-techno.com

Web Insight – поисковый сервис по невидимой части сети Интернет, а именно, по документам:Федеральной налоговой службы (ФНС)Федеральной службы судебных приставов (ФССП)Пенсионного фондаФедеральной антимонопольной службы (ФАС)Трудовой инспекцииМинистерства чрезвычайных ситуация (МЧС)Арбитражного судаМинистерства внутренних дел (МВД)И других контрольных и надзорных органов стран СНГ: Украины, Узбекистана, Казахстана, Белоруссии, Молдовы, Приднестровья, Таджикистана, Азербайджана, Киргизии, Абхазии.

На данный период времени сервис насчитывает 26 780 документов

Контактное лицо

Рогачева Елена ЮрьевнаЗаместитель генерального директораМоб.: +7 (903) 550-28-88

E-mail: rogacheva [at] r-techno.com