Технологии обработки информации. (Лекция 1) презентация

виды
Модели процессов обработки данных
Общие задачи обработки данных
Понятие анализа данных. Технология OLAP
Задачи обработки данных различных типов
Прикладные области обработки данных


,

и методы решения задач обработки информации (генерация отчетов, поддержка принятия решений, анализ данных, искусственный интеллект, обработка изображений)
Студент должен уметь:
осуществлять математическую и информационную постановку задач по обработке информации, использовать алгоритмы обработки информации для различных приложений
Студент должен владеть:
инструментальными средствами обработки информации

Задачи обработки данных различных типов
Принципы и методы оцифровки аналоговых данных. Стандарты представления различных видов цифровой информации
Технология обработки графической информации. Кодирование и сжатие изображений
Технология обработки текстовой информации
Задачи анализа. Сжатие данных
Аналитическая обработка информации. Технология OLAP
Технология обработки числовой информации. Статистические методы. Технология Data Mining. Методы визуализации данных
Методы и технологии интеграции данных
Задачи анализа. Технологии поиска информации

текстовой информации. Алгоритмы поиска и сортировки информации (8 часов)
Технология обработки графической информации. Практическое изучение и освоение возможностей методов бинарного анализа при решении задач выделение контуров, выпуклых областей и связных компонент (8 часов)
Интеллектуальные методы и алгоритмы обработки информации. Алгоритмы классификации (8 часов)

Studio 2010
Borland Delphi, C++ Builder
Источники:
Интернет-портал дисциплины ТОИ http://portal.tpu.ru/departments/kafedra/vt/Disciplines_VT/Tehnology_obrabotki_informacii
MIT OpenCourseWare http://ocw.mit.edu
Школа анализа данных Яндекс http://shad.yandex.ru/
Юрий Лифшиц - курс "Алгоритмы для Интернета" http://yury.name/internet/
Чубукова И.А. Data Mining: учебное пособие – 2-е изд., испр. – М.: Интернет-Университет Информационных технологий; БИНОМ. Лаборатория знаний, 2010. – 382 с.
Назаров С.В. и др. Основы информационных технологий. Курс на портале Интернет-университета Информационных технологий http://www.intuit.ru/department/informatics/fundamentti/1/

передача, отражение разнообразия в любых объектах и процессах живой и даже неживой природы
Математики, физики и специалисты по системам связи:
информация - фактор и мера уменьшения, снятия неопределенности в результате получения сообщения
Кибернетики:
информация - сообщение, неразрывно связанное с управлением в единстве синтаксических, семантических и прагматических характеристик
Для социологов важны аксиологические (т. е. связанные с ценностью, полезностью) свойства информации, для ИТ-специалистов наиболее существенным является знаковое представление информации и т.д.

сведения о чем-либо, независимо от формы их представления (Википедия)
Информация - новые знания, полученные в результате интерпретации данных (Энциклопедия технологий баз данных)
Данные - факты, идеи, сведения, представленные в знаковой (символьной) форме, позволяющей производить их передачу, обработку и интерпретацию
Данные – представление фактов и идей в формализованном виде, пригодном для передачи и обработки в некотором информационном процессе (Википедия)

быть реализовано одним воспринявшим их человеком и не реализовано другим
Объектом машинной обработки являются данные, а не информация!
Знание — форма существования и систематизации результатов познавательной деятельности человека, субъективный образ реальности в форме понятий и представлений (Википедия)
Сведения - это знания, выраженные в сигналах, сообщениях, известиях, уведомлениях и т.д.

— в виде цифр и знаков, обозначающих математические действия
Графическая — в виде изображений, предметов, графиков
Звуковая — устная или в виде записи и передачи лексем языка аудиальным путём
другие виды

необходимые свойства. Это преобразование осуществляется в форме процесса, протекающего во времени
Технология – система взаимосвязанных способов обработки материалов и приемов изготовления продукции в производственном процессе
Информационная технология – совокупность методов, способов, приемов и средств обработки документированной информации, включая прикладные программные средства, и регламентированного порядка их применения
Важное свойство процесса обработки – этапность, стадийность

языке, конечное описание того или иного общего метода, основанного на применении исполнимых элементарных тактов обработки
Виды обработки:
последовательная
параллельная
Формальные модели обработки данных:
конечные автоматы
сети Петри
процессы Хоара
системы и сети массового обслуживания и др.

объектов , в котором:
- входной алфавит;
- выходной алфавит);
- множество внутренних состояний автомата;
- функция перехода в следующее состояние (переходная функция);
- функция выхода (выходная функция).

представлены абстрактными символами из двух непересекающихся алфавитов, называемых соответственно множеством переходов и множеством мест

В процессе функционирования сети происходит смена разметок мест, как результат срабатывания ее переходов. Сеть останавливается, если ни один из ее переходов не может сработать

природы
отделить существенную информацию, представленную данными, от несущественной, для рассмотрения в данный момент
представить существенную информацию в виде, наиболее удобном для восприятия человеком

различные информационные системы
автоматический ввод данных
ручной ввод данных
контроль и исправление ошибок ручного ввода
накопление данных
хранение накопленных данных, в том числе:
учёт и инвентаризация данных
сортировка данных
классификация данных

накопленных массивах данных
контроль доступа и защита данных
передача данных и обмен данными
интеграция данных
упаковка данных
маркировка данных
надёжность передачи данных

текстовое представление данных
табличное представление данных
графическое представление данных
иное визуальное представление данных
форматы представления данных в различных информационных системах

визуализация)

и исследованием наиболее общих математических методов и вычислительных алгоритмов извлечения знаний из экспериментальных (в широком смысле) данных; процесс исследования, фильтрации, преобразования и моделирования данных с целью извлечения полезной информации и принятия решений
Интеллектуальный анализ данных (Business intelligence, BI) — это особый метод анализа данных, который фокусируется на моделировании и открытии данных, а не на их описании

данных, заключающаяся в подготовке суммарной (агрегированной) информации на основе больших массивов данных, структурированных по многомерному принципу
Агрегатные функции образуют многомерный (и, следовательно, нереляционный) набор данных (называемый гиперкубом или метакубом), оси которого содержат параметры, а ячейки — зависящие от них агрегатные данные. Вдоль каждой оси данные могут быть организованы в виде иерархии, представляющей различные уровни их детализации

жанровая классификация сообщений на основе лексико-статистического анализа (в т.ч. фильтрация спама)
отбор сообщений на основе структурно-статистических признаков
оценка достоверности
сокращения избыточности представления (реферирование и аннотирование)
сжатие текстовых данных

2010 гг.

и сглаживание
Разделение изображения на области (сегментация изображений).
Редактирование и ретуширование
Фильтрация изображений
Распознавание текста
Машинное зрение
Сжатие изображений

неочевидных зависимостей из больших объемов сложных данных
Предмет интереса:
Нетривиальные знания
Неявные зависимости
Предварительно неизвестные знания
Потенциально полезные знания
Синонимы
Интеллектуальный анализ данных - Business Intelligence
Открытие знаний в БД
Базы знаний. Извлечение знаний
Анализ паттернов

графика и обработка изображений
Конкурентная разведка
Криптография
Нанотехнологии
Обработка результатов экспериментов
Обработка сигналов