Система мониторинга новостей InfoStream

        

А.Н. Григорьев, Д.В. Ландэ

Система мониторинга новостей InfoStream - информационное пространство из одних рук

Построение информационного общества: ресурсы и технологии// тезисы докладов и информационные материалы XI международной научно-практической конференции. -К:УкрИНТЭИ, 2005. С. 17-20

Среди широкого спектра задач, стоящих перед информационно-аналитическими и PR- подразделениями, пресс-службами современных компаний, банков, изданий, государственных органов, можно выделить такие, которые требуют постоянного и оперативного мониторинга информационного пространства, а именно:
- анализ актуальных событий;
- выявление тенденций развития и состояния рынков товаров и услуг;
- прогноз, оценка и выявление потенциальных источников рисков;
- оценка кредитного и инвестиционного рисков;
- выявление сфер влияния конфликтных или кризисных ситуаций;
- анализ деятельности конкурентов, партнеров и клиентов;
- поиск потенциальных клиентов.

В Информационном центре "ЭЛВИСТИ" создана система InfoStream, с помощью которой охватываются новости из более тысячи отечественных и зарубежных Web-сайтов, осуществляется их обработка и обобщение. Система InfoStream предназначена для нахождения в сети Интернет новостной информации по интересующим пользователя тематикам, оперативной доставки результатов поиска, предоставления пользователю одновременного доступа в режиме поиска к информации с многих Web-сайтов, смысловой обработки и, вследствие этого, минимизации усилий пользователя на отсеивание дублирующейся информации, шума. Система InfoStream обеспечивает:
- доступ к оперативной информации с единого интерфейса (по мере ее появления в Сети) в поисковом режиме с учетом возможного дублирования и семантической близости документов, языковых версий, размеров документов их цифровой насыщенности и т. д.;
- доступ к уникальному ретроспективному фонду, превышающему 20 млн. записей;
- поддержку аналитической работы в режиме реального времени: построение сюжетных цепочек, дайджестов, диаграмм встречаемости и таблиц взаимосвязей понятий, медиа- рейтингов.

Сегодня ни у кого не вызывает сомнения необходимость использования в информационно- аналитической работе такого источника как Интернет. Информационное наполнение Сети интенсивно развивается во всем мире и в Украине, что обусловливает появление ряда проблем, в частности, нахождение актуальной информации по необходимой пользователю тематике. Современные средства поиска новостной информации в Интернет, находящиеся в бесплатном доступе, не настолько совершенны, чтобы в полной мере обеспечить решение приведенных выше задач. Именно специализированная система мониторинга новостей может предоставить необходимый пользователям сервис.

Главные преимущества системы InfoStream по сравнению с традиционными сетевыми информационно-поисковыми системами следующие:
- Оперативность - базы данных системы пополняются каждые 15 минут, источники сканируются в Сети по мере их обновления, в то время как период индексации традиционных информационно-поисковых систем может измеряться неделями.
- Доступность ретроспективного фонда - даже если информация удалена с Web-сайта источника, она сохранена в информационном хранилище.
- Наличие аналитического инструментария - пользователь может в режиме реального времени не только получать результаты поиска, но и формировать дайджесты, строить сюжетные цепочки, анализировать взаимосвязь рубрик, динамику понятий и т.д.
- Возможность селекции "дублей" - система осуществляет автоматическую маркировку идентичной по содержанию новостной информации.
- Наличие инструментария многоуровневого уточнения запроса.

По сравнению с обычными новостными Web-сайтами система InfoStream обеспечивает такие преимущества:
- Охват источников - пользователь имеет доступ к новостям по интересующей его тематике одновременно с большого числа Web-сайтов, включая и те избранные, которые он привык просматривать ежедневно.
- Принцип "одних рук" - пользователь системы мониторинга имеет доступ к информации с многих Web-сайтов из одного интуитивного интерфейса.
- Поисковые возможности - новостные Web-сайты, в отличие от системы InfoStream, не всегда обладают развитыми поисковыми возможностями.
- Доступность ретроспективного фонда.

В последнее время в Интернет появились в свободном доступе и, так называемые, интеграторы новостей. По сравнению с этими службами система InfoStream обладает такими преимуществами:
- Непрерывно развивающийся список источников - системой InfoStream сканируется свыше 1000 источников - все основные информационные сайты Украины и СНГ, а также ведущие зарубежные Интернет-ресурсы.
- Учет местных ресурсов - даже крупнейшие платные зарубежные интеграторы новостей лишь частично охватывают, например, украинские Web-ресурсы. В систему InfoStream возможно включение новых источников по заявкам пользователей.
- Расширенный доступ к информации - пользователям системы InfoStream доступны не только заголовки или анонсы, но и полные тексты новостных сообщений, ссылки на подобные документы и др.
- Аналитический инструментарий.
- Развитая служба поддержки абонентов - пользователи системы при необходимости могут обращаться с вопросами в службу поддержки и получать исчерпывающие ответы и консультации.

Существует целый ряд вариантов использования системы InfoStream - сервисов, доступных пользователям. В рамках простейшего сервисного пакета пользователь может подписаться на получение по электронной почте ленты новостей по своей тематике, выраженной запросом на информационно-поисковом языке. Для работы пользователей, нуждающихся в постоянном варьировании запросов, предусмотрен режим он-лайн доступа к базам данных новостей.

В настоящее время существуют семь вариантов подписки на получение по электронной почте результатов поиска по запросам пользователей - от простейшего пакета MiniStream - рассылки информации по одному запросу один или два раза в сутки по одному электронному адресу - до MainStream - рассылки в режиме реального времени по нескольким адресам. В режиме рассылки по электронной почте пользователи могут получать информацию в виде сюжетов, каждый из которых представлен наиболее характерной для него новостью и пятью заголовками близких по тематике публикаций со ссылками на первоисточники (пакет InfoStream Topics), а также медиа-рейтинги по заданным предметным областям.

Для пользователей, информационные потребности которых не являются постоянными, предусмотрен режим InfoStream Online, обеспечивающий диалоговый доступ к базам данных системы:
- оперативной - содержащей документы, поступившие за последние несколько дней. Эта база данных обновляется в режиме реального времени;
- ретроспективной - содержащей документы, поступившие за несколько последних месяцев;
- табличной - содержащей документы со структурированной информацией, например, прайс-листы, котировки, цены.

В рамках пакета услуг InfoStream Online предоставляются следующие возможности:
- он-лайн поиск документов и построение информационных портретов;
- построение дайджестов;
- построение сюжетов;
- построение диаграмм распределения и динамики встречаемости понятий;
- построение таблиц взаимосвязей рубрик.

Специальный сервисный пакет, предназначенный для информационной поддержки Web ресурсов пользователей - WebStream. В рамках этого пакета информация в виде заголовков и анонсов статей, соответствующая запросам, помещается на страницы Web-ресурсов. Предоставляемая пользователю возможность управления содержимым ленты новостей делает пакет WebStream идеальным инструментом для организации на Web-сайтах пользователей колонок новостей профильной тематики.

Система мониторинга новостей InfoSteam является одним из необходимых звеньев для принятия управленческих решений. За время своего существования эта система обрела широкую популярность и надежную клиентскую базу на украинском рынке. Вместе с тем требования, которые предъявляют пользователи к системе мониторинга новостных ресурсов Интернет, продолжают расти. Это связано как с увеличением информационных потоков (в настоящее время система InfoStream сканирует свыше 30 000 уникальных сообщений в сутки), так и с необходимостью не только поиска, но и проведения эффективного анализа его результатов.

Профессиональное использование возможностей системы InfoStream, доступное ее пользователям, обеспечивает качественно новые возможности для информационно- аналитической работы в самых различных областях деятельности - от политики, макроэкономики, прессы, банковской деятельности - до управления персоналом.

Список литературы

1. Григорьев А.Н., Ландэ Д.В. New media - новая информационная среда // Журнал "Сети и телекоммуникации", N 4, 2000, С. 18-22

2. Ландэ Д.В. Поисковые системы: поле боя - семантика // Журнал "Телеком", N 4, 2004, С. 44-50

3. Ландэ Д.В. Добыча знаний // Журнал "Телеком", N 1-2, 2004, С. 36-42

4. Ландэ Д.В, Морозов А.Ю. Новостной Интернет. Часть 2 // Журнал "Телеком", N 1-2, 2005, С. 58-62

5. Ландэ Д.В. Поиск знаний в Internet. Профессиональная работа // М.: Издательский дом "Вильямс", 2005. -272 с.


 Статьи автора, обобщенные в книге 

Поле боя - семантика
Сегодня информационные ресурсы Сети составляют свыше десятка миллиардов документов (Web-страниц), к которым возможен свободный доступ любого пользователя. Естественно, для того, чтобы найти необходимую информацию и этой крупнейшей распределенной полнотекстовой базе данных необходимо использовать самые мощные ИПС. Такие системы существуют и конкурируют друг с другом на современном рынке информационных технологий.
Подробнее >>

Text Mining
Попытки анализа больших объемов неструктурированных или слабо структурированных данных очень часто усложняют процесс принятия решений. Если широкий спектр поисковых систем достаточно легко справляется с "простым" полнотекстовым поиском, то для подобного анализа нужны технологии совсем другого типа, представленные системами добычи знаний.
Подробнее >>

Новостной Интернет
Для решения задачи синдикации новостей было создано несколько форматов описания данных на основе XML. Самый распространенный формат получил название RSS, что означает Really Simple Syndication, Rich Site Summary, хотя изначально он назывался RDF Site Summary. Смысл всех этих аббревиатур заключается в простом способе обобщения и распределения информационного наполнения Web-сайтов - синдикации контента.
Подробнее >>

Система InfoStream®

При непосредственном участии автора и под его научным руководством в ElVisti создана система InfoStream®, с помощью которой охватываются новости из тысяч Web-сайтов, осуществляется их обработка и обобщение. Сервисы, построенные на основе Infostream, обеспечивают пользователям одновременный доступа в режиме поиска к информации из многих Web-сайтов, предоставляют возможность смысловой обработки и, вследствие этого, минимизацию усилий на получение необходимых данных из Интернет.

Методическое пособие


P e к л а м a: