Исследование рисков и поиск возможностей через Интернет. Кузнецов Сергей Валентинович
<<<<Кузнецов Сергей ВалентиновичИсследование рисков и поиск возможностей через Интернет. Введение Карта сайта ONLINECI.RU СловарьОбучение Консультирование>>>>

Кузнецов Сергей Валентинович

Исследование рисков и поиск возможностей через Интернет

(Risks & opportunities online research)

1. Положение вещей.

1.1. Наш мир развивается нелинейно.

1.2. Ужесточение конкуренции.

1.3. Конкурентная разведка.

1.4. Сфера компетенции аналитической службы

1.5. Безопасность бизнеса.

1.6. Отличие от промышленного шпионажа.

1.7. Разведка через Интернет.

2. Масштаб задачи.

2.1. В Интернет есть все.

2.2. Размеры Интернет.

2.3. Бесплатные ресурсы против платных.

3. Средства доступа к информации в Интернет и ее анализа.

3.1. Путешествие по ссылкам.

3.2. Поисковые каталоги.

3.3. Полнотекстовые поисковые системы.

3.4. Разрешение проблем через Интернет.

3.5. Вавилонское столпотворение.

3.6. Мониторинг конкурентов через Интернет.

3.7. Виртуальные базы знаний (корпоративная метапоисковая система).

3.8. Корпоративные базы знаний.

4. Разведка через Интернет.

4.1. Технология слежения с использованием поисковых систем.

4.2. Инструменты разведки через Интернет

4.3. Дезинформация.

4.4. За Вами следят!

5. Специфика исследования рисков и поиск возможностей через Интернет.

5.1. Реестр конкурентов.

5.2. Представительство конкурента в Интернет.

5.3. Профиль известного конкурента.

5.4. Профиль в виде поисковых запросов.

6. Вместо заключения.

7. Использованная литература

1. Положение вещей.

1.1. Наш мир развивается нелинейно. При повышенном темпе возникновения радикальных изменений ослабевает связь с прошлым. Традиционное мышление разрушается. Поток беспрецедентных изменений парализует корпоративное управление. В результате возникла и развивается новая парадигма управления - менеджмент, основанный на знаниях [1].

1.2. Ужесточение конкуренции. Значительное влияние на любой бизнес сейчас оказывает глобализация экономики и ужесточение конкуренции. Неважно, из какой страны появится конкурирующий товар, услуга, их заменитель или технология-убийца - важно, что угрозы жизнеспособности компаний приобрели глобальный характер. К сказанному заметим, что в России на настоящий момент отсутствует антидемпинговое законодательство. Иными словами, если иностранная фирма начинает поставлять на Ваш традиционный рынок большие партии конкурирующих товаров по ценам ниже себестоимости Ваших товаров, государство не может Вас защитить от недобросовестной конкуренции, и Вы неизбежно потеряете рынок и, возможно, свой бизнес (если он не диверсифицирован).

Различают следующие уровни готовности предприятия к глобальной конкуренции (т.н. степени зрелости бизнеса):

  1. Первичное производство товаров и предоставление услуг (непосредственно бизнес).

  2. Эпизодическое улучшение бизнеса – единственный ответ на неизбежное ужесточение конкуренции на зрелых рынках.

  3. Систематическое улучшение процесса управления бизнесом (внедрение менеджмента качества; переход на управление, основанное на знаниях).

1.3. Конкурентная разведка. Корпоративная информация неадекватно отражает состояние и тенденции изменения коммерческих и иных условий, поэтому принятие решений только на ее основе связано с высоким риском. В этой связи в конце сороковых годов в Японии возникло новое направление менеджмента под условным названием "конкурентная разведка" или «деловая разведка». Всемирное распространение это направление получило в шестидесятых годах, когда американцы и европейцы обеспокоились по поводу массового проникновения японских компаний на их рынки. По известным причинам Россия заметно отстала. Конкурентная разведка (competitive intelligence) – система мероприятий и процесс постоянного выявления, доставки из любых источников (открытых, корпоративных и иных ограниченного доступа) и накопления информации в машиночитаемой форме об изменениях коммерческих условий, ее анализа с целью своевременной подготовки отчетов о положении вещей и прогнозов развития ситуации и представления их руководству. Основой конкурентной разведки является систематический анализ изменений условий бизнеса (в частности, прогноз) и понятное своевременное представление результатов такого анализа. Получаемое таким образом информационное превосходство обеспечивает устойчивое конкурентное преимущество Корпорации[6].

1.4. Сфера компетенции аналитической службы корпорации - это все, что создает настоящие и будущие угрозы и возможности для бизнеса и власти. В частности, указанная служба должна регулярно собирать, готовить и систематизировать глобальную информацию о конкурентах настоящих и будущих (т.н. профили / истории компаний), кредиторах, заемщиках, контрагентах, партнерах и акционерах Корпорации, политической обстановке, властях всех уровней, криминальной обстановке, правых рисках, потребителях и общественности, лучших бизнес-практиках (бенчмаркинг), отраслевых провалах, банкротствах и скандалах (антибенчмаркинг), корпоративных и прочих клиентах, госзакупках и тендерах, рынках, крупных сделках, поглощениях и слияниях отраслевых компаний, финансовых рисках и возможностях, нематериальных активах (вкл. т.н. патентную разведку), опасных и перспективных технологиях (вкл. технологии-заменители и технологии-убийцы), репутации компании (связи с общественностью); ключевых персонах и кадровых рисках (менеджеры конкурирующих организаций, собственный персонал, политики, ученые и иные секретоносители и лица, принимающие решения), подразделениях (филиалы, представительства, дочерние фирмы...) и иных объектах слежения. Кроме того, постоянного внимания требует расширение спектра открытых источников, методик сбора и анализа различных типов информации (тексты, числа, изображения, звуки ...) и средств автоматизации (прикладные компьютерные программы). Служба конкурентной разведки работает на первых лиц компании в режиме отрицательной обратной связи, т.е. обязана быстро учитывать изменение приоритетов и решать вопросы стратегического менеджмента [6].

1.5. Безопасность бизнеса. Помимо наступательной функции конкурентной разведки можно и должно использовать ее оборонительные возможности. Конкурентная контрразведка обеспечивает корпоративную безопасность и защиту критических инфраструктур компании - контроль утечки конфиденциальной информации и техдокументации Корпорации, изучение практики работы и возможностей разведывательных подразделений, аналитических служб и ситуационных центров конкурентов, органов власти и криминальных структур.

1.6. Отличие от промышленного шпионажа. Конкурентная разведка ведется этичными методами по открытым источникам. К открытым источникам относятся источники информации, доступ к которым возможен на законных основаниях. Законность рассматривается только в контексте юрисдикции (действующего законодательства) территории, на которой ведутся или планируются хозяйственные и иные операции. К открытым источникам относятся ресурсы, к которым возможен неограниченный или ограниченный публичный доступ, а также источники, доступ к которым технически возможен (например, из-за некомпетентности или халатности персонала службы защиты информации или системного администратора бывает возможно зайти на закрытую часть корпоративного сервера).

Этические ограничения разведывательной деятельности разумно фиксировать в виде корпоративного стандарта и строить с учетом деловых обычаев конкретной территории и заповеди: «Не сделай другому того, что ты бы не пожелал себе». Четкое соблюдение этических ограничений позволяет при любом раскладе сохранить лицо компании и избежать ущерба ее репутации в случае огласки данных о неэтичных действиях. В качестве примера свода таких ограничений можно привести Кодекс профессиональной этики «Общества профессионалов конкурентной разведки» [2].

Ценность разведки по открытым источникам отмечают и специалисты по промышленному шпионажу: нет риска провала агента и ущерба репутации, кроме того, достигается существенная экономия ресурсов при планировании и проведении секретных и специальных операций – воровать остается лишь то, чего никак нельзя достать законными способами.

1.7. Разведка через Интернет. Открытые источники деловой информации весьма многообразны. Однако для доступа или повышения отдачи открытого источника любого типа Интернет не заменим как среда доступа. Сеть замечательна своим масштабом, высокой технологичностью, прозрачностью и дешевизной опубликования материалов. И гражданские, и военные специалисты отмечают возрастание роли Интернет при подготовке и проведении разведывательных операций.

Являются ли открытые источники, доступные через Интернет, панацеей от всех проблем? Конечно же, нет. В ряде случаев выручают работа агентов на местах, внешние эксперты, корпоративный персонал, специализированные базы данных на компакт-дисках, библиотеки, выставки, презентации, семинары, конференции и иные способы доступа к информации. Однако можно уверено утверждать, что грамотное использование ресурсов Интернет всегда полезно. Часто это позволяет заметно выиграть по скорости, стоимости и качестве подготовки решений. Некоторые аналитические работы при ограниченном бюджете и времени без Интернет выполнить крайне затруднительно. Отдельные исследования без применения информационных технологий и ресурсов Интернет провести просто невозможно. Перечислим слабости технологий Исследование рисков и поиск возможностей через Интернет:

  1. Требуемая информация в открытых источниках в машиночитаемой форме отсутствует.

  2. Требуется организовать слежение за нетекстовыми объектами, не имеющими ни метаданных (библиографическое описание), ни текстового описания.

  3. Открытая коллекция, содержащая нужную информацию или объекты, не имеет поисковой системы (мониторинг возможен, но сильно затруднена его автоматизация).

  4. Открытая коллекция, содержащая нужную информацию или объекты, имеет т.н. сеансовую поисковую систему (например, <http://www.public.ru>, мониторинг возможен, но удорожается и усложняется его автоматизация).

2. Масштаб задачи.

2.1. В Интернет есть все. Более 80% необходимой для профессиональной деятельности сообщества по интересам, компании, органа власти, государства, международной организации или иной структуры управления (далее - "Корпорация") оперативной и стратегической информации может быть получена через Интернет.

Что же полезного есть в Интернет? Покажем это на примерах запросов конкретных поисковых систем и баз данных Интернет (формулы поисковых запросов даны с подчеркиванием, рекомендуется их выполнить и оценить результаты).

Проблема: найти существующие классификаторы предпринимательских рисков.

Запрос русскоязычной поисковой системы общего назначения Рамблер <http://www.rambler.ru/doc/advanced.shtml>:

(классификатор OR классификация OR классифицировать) AND (финансовые OR экономические OR информационные OR банковский) AND (риск OR рисковый OR угроза)Ограничивать расстояние между словами!

Проблема: нет времени бегать по магазинам и искать новые книги по защите информации.

Запрос русскоязычной книжной метапоисковой системы <http://findbook.ru/search/d1>:

защит информац (комментарий: в этом запросе даются начальные части слов)

Проблема: как оценить и повысить уровень лояльности сотрудников предприятия?

Запрос для публичной Интернет-библиотеки <http://www.public.ru>

(определение OR определять OR оценивать OR оценка OR повышать OR повышение OR развивать OR развитие)(степень OR уровень OR алгоритм OR метод OR методика OR модель OR подход OR практика OR принцип OR процедура OR система OR способ)((благонадежность OR благонадежный OR лояльность OR лояльный OR преданность)(директор OR наемный OR персонал OR работник OR руководитель OR служащий OR сотрудник) adj 4) within 15

Проблема: кому поручить проверку безопасности корпоративного сайта?

Запрос русскоязычной поисковой системы общего назначения Яндекс <http://www.yandex.ru>:

(услуги | вызывать | оплатить | нанять) /3 (взлом | взломать) /4 (сайт | сервер | сервак)

Проблема: мониторинг специализированных источников информации о профилях конкурентов.

Запрос глобальной поисковой системы общего назначения Google <http://www.google.com>:

competitor OR competitors profile OR profiles OR profiling CI OR competitive-intelligence

Проблема: найти бесплатные почтовые программы, запускаемые с командной строки.

Запрос глобальной поисковой системы общего назначения AltaVista <http://www.altavista.com/web/adv>:

(free OR freeware) AND("command line" OR console) AND (email OR mail) AND (client OR utilities OR tools)

Есть и противоположная точка зрения: 80% информации для принятия конкретного решения есть в самой компании (на компьютерах, в столах и головах настоящих и бывших сотрудников). Документирование и использованием скрытых (латентных) знаний персонала и внутренней информации – одна из критически важных задач аналитической службы.

2.2. Размеры Интернет. По оценкам 2001 года ресурсы Всемирной Паутины составляют 550 млрд. индивидуальных документов [3], из которых 35% доступно бесплатно [16]. Навигацию в этом многообразии обеспечивают более 43 миллиона ресурсов Интернет [4]. По различным оценкам объем ресурсов, доступных через Интернет, удваивается каждые 2-4 года. Последние годы темпы роста Сети начали замедляться.

2.3. Бесплатные ресурсы против платных. Парадокс состоит в том, что при грамотном использовании совокупные возможности бесплатных ресурсов Интернет существенно больше любой отдельно взятой коммерческой службы. В частности, крупнейшая [5] платная система «Lexis-Nexis» <http://www.lexisnexis.com> содержит 4 млрд. документов в 35 тысячах баз данных. Можно перечислить ряд бесплатных поисковых систем Интернет, позволяющих искать информацию в 2-8 млрд. документов каждая: <http://www.google.com>, <http://www.bing.com>. В русском сегменте Интернет бесплатные ресурсы также составляют серьезную конкуренцию платным услугам. Коммерческая служба «Интегрум» <http://www.integrum.ru> обеспечивает доступ к 4700 журналов и газет (более 85 млн. документов). «Публичная Интернет-библиотека» <http://www.public.ru> позволяет бесплатно искать в текстах из 1800 журналов с полным библиографическим описанием каждой статьи, а крупнейшие русскоязычные поисковые системы <http://www.yandex.ru> и <http://www.rambler.ru> предоставляют доступ к полумиллиарду документов каждая. Привлекательность платных ресурсов Интернет падает, как и цены на доступ. Однако это не исключает возможности нахождения уникальной информации только в коммерческих базах данных, например, «Национального кредитного бюро» <http://creditnet.ru/>.

3. Средства доступа к информации в Интернет и ее анализа.

3.1. Путешествие по ссылкам. Исторически Интернет развивался как клиент-серверная гипертекстовая среда, основанная на стандартных протоколах. Попробуем оценить, каковы возможности найти нужный документ, путешествуя по гипертекстовым ссылкам (hypertext links). Менее 5% информации доступной через Интернет находится в стандартном для Интернет формате HTML, содержащем гипертекстовые ссылки. Остальную часть составляет т.н. «Невидимый Интернет» (Invisible Web), где информация либо лежит в иных, нестандартных форматах, либо доступна только через единственные точки входа (пользовательские интерфейсы, шлюзы) в многочисленные базы данных, либо недоступна по иным причинам. В условно «старой» части Интернет (США, Канада, Швейцария и некоторые другие страны Европы) от одного произвольно выбранного документа до любого другого можно пройти в среднем по 4-5 гипертекстовым ссылкам. В «новой» (бурно растущей) части Интернет (Китай, Япония, Германия, иные страны мира) этот показатель возрастает до 14-18 ссылок. Есть территории (развивающиеся страны, островные государства...), где доступ к ресурсам которых осуществляется только по одному нерегулярно работающему каналу. Очевидно, что даже в старой части Интернет с его относительно развитой инфрастуктурой ссылок вероятность найти по гипертекстовым связям нужный материал ничтожно мала.

3.2. Поисковые каталоги. Аналогично систематическим каталогам библиотек в Сети существуют масса серверов, предлагающих упорядоченные коллекции ресурсов Интернет на все случаи жизни. Это поисковые каталоги, которые ведутся редакторами-людьми. Крупнейший сервер Интернет этого класса – Проект «Открытый каталог» / «Open directory project» <http://www.dmoz.org/>. В нем с использованием иерархического классификатора на 460 тыс. рубрик учтено более 3.8 млн. ресурсов Интернет. Эту титаническую работу на общественных началах ведут 58 тысяч редакторов. Понятно, что систематизированная таким образом часть открытых ресурсов Интернет – это капля в море и собрать с использованием поисковых каталогов всю информацию по конкретному вопросу совершенно нереально.

3.3. Полнотекстовые поисковые системы. В отличие от каталогов обновление полнотекстовых поисковых систем Интернет выполняют программные роботы (spiders, robots, crawlers, bots). Идя по ссылкам из т.н. полнотекстового индекса базы данных или по заявкам web-администраторов на регистрацию серверов в поисковой системе, они проверяют, не изменилась (появилась) ли конкретная страница Интернет. Если обнаружены изменения или страница новая, робот копирует ее на поисковый сервер, после чего автоматически проводится ее полный разбор. В процессе обработки нового или измененного текста в полнотекстовом индексе поисковой системы учитываются все слова обрабатываемого документа, возможно, с указанием на каком языке, в какой словоформе и каком контексте они встретились.

Поисковые системы обеспечивают доступ по всему многообразию открытых источников Интернет (включая поисковые каталоги). Это полноценное и единственное средство компьютерной разведки [7] с использованием ресурсов Интернет. Однако, во-первых, их слишком много (всего более 40 млн., и не менее 800 тыс. русскоязычных), во-вторых, они все разные и каждая из них работает по своим правилам и ей нужно уметь воспользоваться.

3.4. Разрешение проблем через Интернет. Нами разработан комплекс из десятка методов поиска проблемно-ориентированных баз данных для решения конкретной проблемы. В частности, для нахождения подходящих поисковых систем могут быть использованы специализированные каталоги, например, крупнейший в своем роде проект BrightPlanet Corp. <http://www.completeplanet.com/index.jsp> содержит описания свыше 70 тыс. поисковых систем (из 40 млн.).

Вопрос о том, как писать поисковые запросы, вести исследования и готовить аналитику с использованием полнотекстовых поисковых систем (Интернет, любые локальные базы данных), корректно решен в рамках авторского комплекса «Технологии познания» [8,9] следующего состава:

3.5.Вавилонское столпотворение. В разных странах мира говорят на 6800 языках [10]. И только 2261 язык имеет письменную систему, все остальные являются чисто устными. 260 письменных языков представлены в Интернет соответствующими словарями (толковые, тезаурусы, энциклопедии, переводчики ...) [10]. Не более 72% из доступных через Интернет документов - на английском языке и около 1% - на русском [17]. Онлайновыми текстами представлены практически все письменные языки народов мира.

Очень частой является ситуация, когда информации по конкретной проблеме на родном языке совсем нет или явно недостаточно. Прозрачность Интернет обострила проблему языкового барьера. Для этого случая нами разработаны технологии программирования запросов для поиска текстов на незнакомом языке и интерпретации найденных иностранных материалов. Таким способом, русскоязычному пользователю обеспечивается комфортная работа с текстами на следующих 36 языках: английский, болгарский, венгерский, голландский, греческий, датский, исландский, испанский, испанский (Европа), испанский (Латинская Америка), итальянский, немецкий, норвежский, польский, португальский, португальский (Бразилия), румынский, сербский, словацкий, уэльсский, филиппинский, финский, французский, хорватский, чешский, шведский и японский. Если Вы знаете английский язык, то через Интернет Вам доступны для поиска и понимания тексты на 260 языках.

3.6. Мониторинг конкурентов через Интернет. Можно, конечно, пытаться отслеживать весь Интернет или только известные сервера. В первом случае будут очень высоки расходы (нужно качать многие терабайты, что мало реально и очень накладно). Во втором случае мы становимся заложниками своего неизбежного незнания вновь появляющихся открытых источников, конкурентов, технологий, товаров ... Если использовать внешние поисковые системы, нужно каждый раз открывать конкретную базу данных, записывать запрос и проверять, получены ли новые материалы. Вручную просто делать нереально. Если в Сети найти поисковые системы и базы данных, где публикуется или индексируется т.н. критическая информация о конкурентах и рынках, и поручить собственным роботам регулярно выполнять на таких поисковых системах специфичные запросы, получается малозатратная система слежения за изменениями условий бизнеса на неопределенной базе открытых источников. Иными словами, практически решается задача контроля появления критически важной информации в заранее неизвестных источниках (где попало, в том числе и по неизвестным нам подходящим источникам ходят роботы используемых нами поисковых систем, соответственно, трафик оплачивает владелец поискового сервиса). Персональный или корпоративный web-агент обходит любое число поисковых систем, проверяет, не появились ли новые материалы по интересующей теме (по конкретному запросу), и если они появились, автоматически или дает нам уведомление, или посылает письмо по электронной почте или сохраняет новый материал на жесткий диск, в корпоративное хранилище или базу знаний. Контроль Интернет через поисковые системы никак не исключает детального мониторинга конкретных серверов, например, известных конкурентов.

3.7. Виртуальные базы знаний (корпоративная метапоисковая система). Поскольку промышленные разведывательные проекты используют сотни поисковых систем, встает задача программирования запросов для многих поисковых систем одновременно. Для решения этой задачи разработана оригинальная технология «универсальная поисковая спецификация», позволяющая за 2-5 минут определить возможности конкретной поисковой системы Интернет, написать для нее запрос по теме постоянного интереса (рубрике корпоративного классификатора) и сформировать для робота задание на регулярный тематический мониторинг этого открытого источника. В основе этой разработки лежит авторская классификация возможностей поисковых систем Интернет, протокол оперативного выявления недокументированных возможностей поисковых систем Интернет и группа прикладных методов компьютерной лингвистики. Кроме всего прочего, развитие этой технологии позволяет решить проблему невозможности закачки в корпоративное хранилище или покупки всей информации из некоторых уникальных источников. Можно автоматически формировать запрос по произвольной теме из корпоративного классификатора для любых поисковых систем известной функциональности, затем консолидировать найденные в различных уникальных базах данных материалы в едином отчете, перекачивать нужные данные в хранилище, проводить их предварительный анализ, систематизацию и т.п. Иными словами робот, отрабатывая конкретную проблему корпоративного пользователя, формирует и адресует специфичные поисковые запросы к сотням внешних баз данных, после чего собирает полученные результаты в единый отчет. Число внешних баз данных, в принципе, не ограничено, однако, каждая из них должна быть предварительно оттестирована и синтаксис ее поисковых запросов должен быть формально описан. Нечто подобное (в сильно упрощенном варианте и часто некорректно) делают метапоисковые системы Интернет, например, IxQuick <http://www.ixquick.com/>.

3.8. Корпоративные базы знаний. Как только отслеживание информации о конкурентах через Интернет становится систематическим (это и есть разведка, как процесс, а не эпизод поиска), наступает информационная перегрузка. Слишком много поступает в компанию новостей. Своевременно их обработать вручную не получается. На основе корпоративной информационной системы с развитой функцией полнотекстового поиска и уже подготовленной документации к малозатратным системам слежения через Интернет создается систематизированное хранилище (база знаний) [1]. Примеры высокофункциональных поисковых систем: AltaVista <http://www.altavista.com>, Convera <http://www.public.ru>, Яндекс <http://ya.ru>, «Oracle Text» <http://www.oracle.com/technology/products/text/index.html> и др.

Корпоративная база знаний проводит сбор информации об изменениях внешнего мира и классификацию полученных данных (наполнение систематизированного корпоративного хранилища текстов и иных объектов) с целью обеспечить регулярную доставку информации по компетенции или требованию персоналу корпорации, рассылку, визуализацию тенденций, многофакторный анализ и прогнозирование.

Изучавшийся нами [8] альтернативный (в отношении нашей технологии программирования поисковых систем) статистический подход к выявлению смысла сообщений и классифицированию текстов не обеспечивает достаточной полноты (не выше 30%) и точности (не выше 65%) выборки из хранилища материалов по конкретной проблеме. Смысловой (семантический) анализ массивов и потоков текстов с использованием такого подхода предлагается в ряде российских программных комплексов «Galaktika-Zoom» <http://zoom.galaktika.ru>, «Semantic Explorer» <http://soft.neurok.ru>, «Russian Context Optimizer» <http://www.rco.ru>, «TextAnalyst» <http://www.analyst.ru> и многих зарубежных аналогах. Некорректное решение проблемы «смысл-текст» не позволяет строить на основе этих продуктов заслуживающие доверие пользователей корпоративные базы знаний.

4. Разведка через Интернет.

4.1. Технология слежения с использованием поисковых систем. Результаты работы 90% поисковых систем Интернет, как правило, однозначно отображают результаты сеанса работы пользователя в строке «Адрес» (URL). Параметры запроса передаются поисковому серверу в виде пар параметров формата {имя параметра}={значение параметра}, разделенных знаком амперсанд “&”. Список параметров отделяется от адреса исполняемой страницы такого поискового сервера вопросительным знаком “?”. Например,

Одного этого свойства поисковых систем Интернет оказывается достаточно, чтобы организовать систему разведки через Интернет на неопределенной базе открытых источников. При условии, что Вы умеете подобрать подходящие для решения конкретной проблемы поисковые системы и программировать для них корректно работающие запросы.

4.2. Инструменты разведки через Интернет весьма разнообразны.

Авторские средства слежения за внешним миром с использованием неопределенной источниковой базы (технология их подготовки и использования передается на открытых и корпоративных тренингах, при разработке указанных средств используются авторская технология программирования поисковых систем Интернет и комплект методов поиска и мониторинга наилучших для сбора информации по конкретной проблеме открытых источников Интернет):

Общедоступные средства мониторинга конкурентной среды:

4.3. Дезинформация. Любая информация из открытых источников должна проверяться и перепроверяться. Вообще, задача проверки достоверности информации очень сложна. При разведке через Интернет задачу облегчает множественность каналов циркуляции сообщений (срабатывает закон больших чисел). Для начала полезно изучить одно из базовых руководств по оценке качества информации из Интернет «Internet Detective» <http://www.webdetective.nl>.

4.4. За Вами следят! Незнание возможностей новейших технических средств съема информации через Интернет не оправдывает финансовых и иных потерь от сетевого шпионажа. Появились услуги размещения представительств компаний (хостинг): Вашим клиентам предлагается показывать одну версию корпоративного сайта, а Вашим конкурентам – другую. По неясной мне причине некоторые российские поисковые системы (с иностранными владельцами) собирают детальную информацию о том, кто и что ищет. Напомним, что по уникальному IP-адресу пользователя в сети Интернет можно вычислить, чем в Сети занимается персонал конкретной компании.

Специалисты военной разведки отмечают, что запрос на поиск информации обнаруживает направление интереса и является малозаметным каналом утечки массы конфиденциальной информации. Короче говоря, нужно предохраняться. Подмена реального IP-адреса при работе в Интернет корпоративного персонала (анонимизация) обеспечивает защиту от бдительного ока родных спецслужб, иностранных разведок, специалистов по краже коммерческих секретов, разведки конкурентов, хакеров, криминальных элементов и пр. Постоянная смена IP-адресов корпоративных пользователей и следящих роботов при выполнении операций в Интернет должна быть реализована на уровне корпоративной технологической политики. Это обеспечивает должную скрытность разведывательных и иных операций, проводимых через Интернет.

5. Специфика исследования рисков и поиск возможностей через Интернет.

5.1.Реестр конкурентов. За кем стоит следить? С чего начинать конкурентную разведку? Нами разработаны методы раннего выявления и мониторинга неизвестных конкурентов по открытым источникам. Сложившиеся в зарубежной практике подходы к планированию процесса конкурентной разведки можно посмотреть в статье Яна Херринга в лучшем русскоязычном издании по конкурентной разведке и информационному менеджменту [11].

Можно сформулировать и более общий подход к планированию деловой разведки и контрразведки. С использованием многомерного классификатора предпринимательских рисков [15], характерных для Вашего бизнеса, территории, рынка систематически изучается фактическое положение вещей. Из всех выявленных по открытым и внутренним источникам угроз Вашему бизнесу выделяют:

Ранжирование рисков по экономическим последствиям (степени ущерба) позволяет сосредоточиться на ликвидации «слабых звеньев» и предотвращении серьезных потерь. В разведывательную и контрразведывательную программы включаются наиболее существенные источники угроз. Такой подход к планированию обуславливает высокую эффективность деятельности подразделений деловой и конкурентной разведки и службы безопасности. С использованием аналогичного подхода строится и ежегодно обновляется корпоративный реестр сведений, отнесенных к коммерческой тайне.

5.2.Представительство конкурента в Интернет. Изучение соперника всегда начинается с создания копии его представительства (сайта) в сети Интернет. Для формирования локального зеркала (в виде системы файлов на жестком диске) можно использовать настольные программы копирования сайтов типа «Teleport Pro» <http://www.tenmax.com/teleport/pro/home.htm>. После создания копии сайта выполняется ее полный анализ. Для исследования можно использовать настольные программы поиска на локальных дисках (в конкретной папке), например, AVSearch <http://www.avtlab.ru/avsearch.htm>. В том случае, если сервер конкурента загружается в корпоративное хранилище, его анализ проводится подсистемой полнотекстового поиска самого хранилища.

5.3. Профиль известного конкурента. Результаты изучения конкретного конкурента обычно оформляются и организуются в виде его профиля (досье, истории ...). Профиль конкурента – систематизированное представление различных характеристик конкурирующей компании (до 500 параметров). Профиль конкурента учитывает специфику отрасли промышленности, постоянно обновляется с использованием открытых источников и содержит достаточную информацию для расчетов с использованием всех применяемых методик анализа конкурентов, рынков, выбора конкурентных стратегий и т.п (SWOT-анализ, матрица БКГ, сценарный анализ...). Первое представление о профиле конкурента можно составить по 68 уроку Харви Маккея [12]. Образцы и фрагменты профилей на разные объекты конкурентной разведки можно посмотреть у «Национального кредитного бюро» <http://creditnet.ru/products/failures/> или «World Markets Research Centre» <http://www.globalinsight.com/internal/WMRC-redirect.htm>. Очевидно, что своевременно обновлять профиль из 500 параметров невозможно без автоматизированного сбора и предварительной систематизации новостей из открытых и иных источников. Иными словами, требуется разворачивание корпоративной базы знаний.

5.4. Профиль в виде поисковых запросов. Слежение за любым известным или неизвестным объектом (конкурент, товар, услуга, рынок, территория, «черный список», программа, метод ...) или проблемной ситуацией (слияния компаний, крупные сделки, невозврат кредита, дефолт, демпинг, контрафактная поставка ...) можно организовать с использованием уникальных признаков из его профиля (досье), оформленных в виде запросов поисковых систем и баз данных Интернет. Это позволяет поддерживать профили (досье) в актуальном состоянии. Например, приведем некоторые запросы для слежения за «Егорьевским заводом асбестовых технических изделий».

Запрос Яндекс <http://www.yandex.ru>:

((Егорьевский | Егорьевск) /3 (!АТИ | (асбестовых-технических-изделий))) | !ЕзАТИ | ((Egorievsk | Egorievsky) /3 "asbestos technical goods") | (телетайп /2 КОЛЬЦО /2 +"346486")| (((Аксенов /2 Игорь-Михайлович)|(Казаков /2 Александр-Петрович)) && (Егорьевский | Егорьевск | !АТИ))

Запрос Convera <http://www.public.ru>:

((Егорьевский OR Егорьевск) (АТИ OR (асбестовых технических изделий within 4)) within 7) OR ЕзАТИ OR ((Egorievsk OR Egorievsky) (asbestos technical goods within 3) within 7) OR (телетайп КОЛЬЦО 346486 within 3) OR (((Аксенов "Игорь Михайлович" within 3) OR (Казаков "Александр Петрович" within 3) OR (Кустов "Юрий Алексеевич" within 3)) AND (Егорьевский OR Егорьевск OR АТИ)) OR ezati OR ((096-40 OR 09640 OR 240) (3-14-74 OR 3-16-28 OR 4-34-80) within 7)

6. Вместо заключения.

Предлагаемые малозатратные технологии Исследование рисков и поиск возможностей через Интернет на неопределенной базе открытых источников [13,14] позволяют автоматизировать сбор и предварительную систематизацию нужной информации:

7. Использованная литература

  1. Кузнецов С. Технологии управления, основанного на знаниях // Проблемы теории и практики управления (Москва).- 24.12.2004.- 006.- C.85-89 (можно заказать по э.почте).
  2. SCIP Code of Ethics for CI Professionals <http://www.scip.org/About/content.cfm?ItemNumber=578>.
  3. The Deep Web: Surfacing Hidden Value <http://www.press.umich.edu/jep/07-01/bergman.html>.
  4. The Netcraft Web Server Survey <http://news.netcraft.com/archives/web_server_survey.html>.
  5. Largest Deep-Web™ Sites <http://www.brightplanet.com/infocenter/largest_deepweb_sites.asp>.
  6. Кузнецов С. Компьютерная конкурентная разведка, PC Week RE № 42(312), 13-19.11.2001. <http://www.pcweek.ru/themes/detail.php?ID=59780>.
  7. Кузнецов С. «Доступ к текстовой информации», Владивосток, 1998, <http://www.knowbase.ru/access.htm>.
  8. Кузнецов С. «Технологии познания» 2001, <http://www.u-learning.ru/techknow.htm>.
  9. Кузнецов С. «Бесплатное разрешение проблем с использованием ИНТЕРНЕТ», 2001 <http://www.5186364.ru/yandwork.htm>.
  10. Language Dictionaries <http://www.yourdictionary.com/languages.html>.
  11. "Конкурентная разведка: Уроки из окопов", М.: Альпина Паблишер, 2003. под ред. Джона Е. Прескотта, Стивена Х. Миллера.
  12. Маккей Харви «Как уцелеть среди акул» М.: Экономика, 1993. <http://dere.com.ua/library/mackay/soderzhanie.shtml>.
  13. Кузнецов С. Программа обучения «Конкурентная разведка на основе интернет» <http://www.onlineci.ru/16cit.htm>.
  14. Кузнецов С. Презентация "Компьютерная конкурентная разведка" (MS Power Point, 7.9 Мб) <http://www.onlineci.ru/oci-slides.zip>.
  15. Светлова Е.С., Забияко С.В. «НОВЫЙ ПОДХОД К КЛАССИФИКАЦИИ ПРЕДПРИНИМАТЕЛЬСКИХ РИСКОВ» Сборник научных трудов (вып.3) Института Менеджмента, Маркетинга и Финансов <http://www.immf.ru/>.
  16. OCLC Web Characterization Project Size and Growth <http://wcp.oclc.org/stats/size.html>.
  17. OCLC Web Characterization Project Country and Language <http://www.oclc.org/research/projects/archive/wcp/stats/intnl.htm>.

Об авторе. Кузнецов Сергей Валентинович, независимый консультант по базам правовой информации, испытатель систем поиска в текстах, член Экспертного совета по кодификации и систематизации законодательства при Председателе Государственной Думы РФ, разработчик ряда технологий, автор более ста публикаций и монографий по вопросам правовой информатики, технологиям управления знаниями, системам поддержки принятия решений и поиску в Интернет.


<<<<Кузнецов Сергей ВалентиновичИсследование рисков и поиск возможностей через Интернет. Введение Карта сайта ONLINECI.RU СловарьОбучение Консультирование>>>>

Опубликовано по адресу: http://www.onlineci.ru/online-competitive-intelligence.htm
Дата последнего редактирования 10.04.2017
© Кузнецов Сергей Валентинович


Сайты (Сергей Кузнецов / Кузнецов С.В.):
Всепроникающее обучение
Невидимый Интернет для бизнеса
Технологии производства баз знаний
Юридические исследования через Интернет
Средства автоматизации вэб-поиска:
Мастер поиска НТИ
Поиск по шаблону на основе Мастера
Классификационный поиск по шаблонам на основе Мастера
Сценарий: Поиск рыночных ниш через Яндекс
Сценарий: Выявление проблем через Яндекс
Сценарий: Поиск определений через Яндекс
Услуги (Сергей Кузнецов / Кузнецов С.В.):
Тематический мониторинг открытых источников
Профессиональный поиск информации
Поиск и мониторинг ниш на рынках
Технологические исследования через Интернет
Очные компьютерные тренинги
Дистанционное обучение
Об авторе: Резюме Сергея Кузнецова
Фотогалерея Сергея Кузнецова
Публикации и работы Сергея Кузнецова
Правила Сергея Кузнецова
Мифы о Сергее Кузнецове
Технологические работы Сергея Кузнецова
В разработке