Основы технологии анализа текстовых данных (технология Text Mining) 5.1.1. <...> Извлечение «скрытых» контекстно-зависимых значений термов на основе латентно-семантического анализа 5.4. <...> Системы автоматических ответов на вопросы пользователей 5.5. <...> НАПРАВЛЕНИЯ РАЗВИТИЯ ТЕОРЕТИЧЕСКОЙ И ПРИКЛАДНОЙ ИНФОРМАТИКИ 6.1. <...> Основы технологии анализа текстовых данных (технология Text Mining) Сегодня в информационных хранилищах, распределенных по всему миру, собраны терабайты текстовых данных. <...> Разработанные на основе статистического и лингвистического анализа, а также методов искусственного интеллекта, технологии Text Mining как раз и предназначены для проведения смыслового анализа, обеспечения навигации и поиска в неструктурированных текстах. <...> Технология глубинного анализа текста – Text Mining – и представляет собой тот самый инструментарий, который позволяет анализировать большие объемы информации в поисках тенденций, шаблонов взаимосвязей, способных помочь в принятии стратегических решений. <...> Фогель, один из основателей легендарной компании Semio, используя аналогию с библиотекой, поясняет: «Технология Text Mining открывает перед читателем книги с подчеркнутой необходимой ему информацией. <...> Технологии глубинного анализа текста исторически предшествовало создание технологии глубинного анализа (добычи) данных (Data Mining), методология и подходы которой широко используются и в методах Text Mining. <...> Оформившись в середине 90-х годов XX века как направление анализа неструктурированных текстов, технология Text Mining сразу же взяла на вооружение методы классической добычи данных, такие как классификация или кластеризация. <...> В Text Mining появились и дополнительные возможности, например автоматическое реферирование текстов и выявление феноменов, т.е. понятий и фактов. <...> Важный компонент технологии Text Mining связан с извлечением из текста его характерных элементов или свойств, которые затем могут использоваться в качестве метаданных документа, ключевых слов <...>
Информатика_учебник_для_вузов._В_3_ч._Ч._2._Организационные_и_технико-экономические_основы._В_2-х_книгах._Книга_2__Под_общей_научной_редакцией_А.П._Фисуна,_В.А.,_Ерёменко_В.Т.,_Минаева,_В.А._Зернова_(Рекомендован_УМО_вузов_Российской_Федерации).pdf
МИНИСТЕРСТВО ОБРАЗОВАНИЯ И НАУКИ РОССИЙСКОЙ ФЕДЕРАЦИИ
ГОСУДАРСТВЕННОЕ ОБРАЗОВАТЕЛЬНОЕ УЧРЕЖДЕНИЕ
ВЫСШЕГО ПРОФЕССИОНАЛЬНОГО ОБРАЗОВАНИЯ
«ОРЛОВСКИЙ ГОСУДАРСТВЕННЫЙ ТЕХНИЧЕСКИЙ УНИВЕРСИТЕТ»
ГОСУДАРСТВЕННОЕ ОБРАЗОВАТЕЛЬНОЕ УЧРЕЖДЕНИЕ
ВЫСШЕГО ПРОФЕССИОНАЛЬНОГО ОБРАЗОВАНИЯ
«ОРЛОВСКИЙ ГОСУДАРСТВЕННЫЙ УНИВЕРСИТЕТ»
ИНФОРМАТИКА
Часть 2
Организационные
и технико-экономические
основы
Книга 2
Рекомендовано Учебно-методическим объединением вузов
Российской Федерации по образованию в области
историко-архивоведения в качестве учебника
для студентов высших учебных заведений,
обучающихся по специальностям
090103 «Организация и технология защиты информации»
и 090104 «Комплексная защита объектов информатизации»
Орел 2009
Стр.1
УДК [002:004]:316.774(075)
ББК 32.811я7
И74
Рецензенты:
доктор технических наук, профессор учебно-научного комплекса
«Автоматизированные системы и информационные технологии»
Академии Государственной противопожарной службы МЧС России
Н.Г. Топольский,
доктор физико-математических наук, декан факультета «Компьютерные
системы и информационные технологии» Российского нового университета
А.С. Крюковский
И74 Информатика. В 3 ч. Ч. 2. В 2-х книгах. Кн. 2 Организационные
и технико-экономические основы: учебник для вузов /
А.П. Фисун, В.Т. Еременко, В.А. Минаев, В.А. Зернов, И.С. Константинов,
А.В. Коськин, Ю.А. Белевская, С.В. Дворянкин; под
общей научной редакцией А.П. Фисуна, В.Т. Еременко, В.А. Минаева,
В.А. Зернова. – Орел: ОрелГТУ, ОГУ, 2009. – 171 с.
ISBN 987-5-9929-0124-5
Рассмотрены основные формы, принципы, организация информационного
обеспечения сфер и видов деятельности личности, общества
и государства, основные положения системно-информационного анализа
и синтеза в информатизации. Системно изложены основные проблемы,
организационно-экономические, технико-экономические аспекты
информатизации и их обоснование, а также вопросы маркетинга
информационных продуктов и услуг развивающегося информационного
общества.
Учебник предназначен для студентов, обучающихся по специальностям
«Комплексная защита объектов информатизации», «Организация
и технология защиты информации», и аспирантов, изучающих
дисциплину «Информатика». Может быть использован студентами и
аспирантами, изучающими автоматизированные системы обработки
информации и управления, информационные телекоммуникационные
системы, обеспечение их информационной безопасности, а также будет
полезен преподавателям и специалистам этих систем.
УДК [002:004]:316.774(075)
ББК 32.811я7
ISBN 987-5-9929-0124-9
2
ОрелГТУ, 2009
ОГУ, 2009
Стр.2
СОДЕРЖАНИЕ
ВВЕДЕНИЕ
ГЛАВА 5. СИСТЕМНО-ИНФОРМАЦИОННЫЙ АНАЛИЗ
И СИНТЕЗ В ИНФОРМАТИЗАЦИИ
5.1. Основы технологии анализа текстовых данных (технология
Text Mining)
5.1.1. Основные элементы Text Mining
5.1.2. Контент-анализ
5.1.3. Семантический анализ и поиск информации
5.2. Модели поиска информации
5.2.1. Булева модель поиска
5.2.2. Векторно-пространственная модель
5.2.3. Гибридные модели поиска
5.3. Группировка текстовых данных
5.3.1. Методы кластеризации
5.3.2. Определение тематической близости термов
5.3.3. Вероятностная модель поиска
5.3.4. Извлечение «скрытых» контекстно-зависимых
значений термов на основе
латентно-семантического анализа
5.4. Системы автоматических ответов на вопросы
пользователей
5.5. Реализация систем Text Mining
5.5.1. Intelligent Miner for Text
5.5.2. PolyAnalyst
5.5.3. WebAnalyst
5.5.4. Text Miner
5.5.5. SemioMap
5.5.6. InterMedia Text, Oracle Text
5.5.7. Autonomy IDOL Server
5.5.8. Galaktika-ZOOM
5.5.9. InfoStream
5.6. Text Mining не только для спецслужб
5.7. Автоматическое реферирование
5.7.1. Квазиреферирование
5.7.2. Алгоритмы автореферирования
5.7.3. Дайджесты
5.7.4. Поисковые образы документов
5.7.5. Информационные портреты
5.7.6. Программы автореферирования
5.8. Автореферирование на основе семантических
3
5
7
7
10
12
15
16
16
19
20
21
23
24
27
32
45
48
49
51
51
51
53
56
55
56
57
57
58
60
62
64
65
66
67
73
Стр.3
методов
5.9. Инструментарий конкурентной разведки
5.9.1. Задачи конкурентной разведки
5.9.2. Источники информации и базы данных
для конкурентной разведки
5.9.3. Подходы к анализу контента
5.9.4. Формирование запросов по конкурентной
проблематике
5.9.5. Конкурентная разведка и извлечение «скрытой» информации
5.9.6.
Перспективы систем конкурентной разведки
Контрольные вопросы
ГЛАВА 6. НАПРАВЛЕНИЯ РАЗВИТИЯ ТЕОРЕТИЧЕСКОЙ
И ПРИКЛАДНОЙ ИНФОРМАТИКИ
6.1. Направления развития теоретической информатики
6.2. Практическое приложение теоретической
информатики
6.3. Информатика и численные методы
6.4. Теория информации в информатике
6.5. Теория вероятностей в информатике
6.6. Математическая теория управляемых систем
и информатика
6.7. Направления развития кибернетики как составной части
информационной науки
6.8. Направления развития теории искусственного
интеллекта
6.9. Тенденции развития ЭВМ и вычислительных
систем
6.10. Элементная база информатизации и ее роль
в развитии национальной информационной
инфраструктуры
6.11. Направления развития программирования
и современных программных систем
6.12. Современные автоматизированные системы
управления
6.13. Направления развития современных
информационных и телекоммуникационных сетей
Контрольные вопросы
ЛИТЕРАТУРА
77
78
79
80
82
86
87
89
92
95
99
103
104
108
110
112
119
123
129
130
140
145
153
155
4
Стр.4