Факторный анализ. Факторный анализ — группа методов многомерного статистического анализа, которые позволяют представить в компактной форме обобщенную информацию о структуре связей между наблюдаемыми признаками изучаемого объекта на основе выделения некоторых непосредственно не наблюдаемых факторов.Факторный анализ служит для понижения размерности пространства входных факторов.
Обработку можно выполнять как в автоматическом режиме (с указанием порога значимости), так и самостоятельно (основываясь на значениях матрицы значимости). Первым этапом факторного анализа является выбор новых признаков, которые являются линейными комбинациями прежних и «вбирают» в себя большую часть общей изменчивости входных факторов.
Поэтому они содержат большую часть информации, заключенной в первоначальных данных. В обработчике «Факторный анализ» это осуществляется с помощью метода главных компонент. Этот метод сводится к выбору новой ортогональной системы координат в пространстве наблюдений.
Мастер-классы по работе с геопространственными данными
В качестве первой главной компоненты избирают направление, вдоль которого массив данных имеет наибольший разброс. Выбор каждой последующей главной компоненты происходит так, чтобы разброс данных вдоль нее был максимальным и чтобы эта главная компонента была ортогональна другим главным компонентам, выбранным прежде. Корреляционный анализ.
Корреляционный анализ- совокупность основанных на математической теории корреляции методов обнаружения корреляционной зависимости между двумя случайными признаками или факторами. Корреляционный анализ применяется для оценки зависимости выходных полей данных от входных факторов и устранения незначащих факторов.
Принцип корреляционного анализа состоит в поиске таких значений, которые в наименьшей степени взаимосвязаны с выходным результатом. Такие факторы могут быть исключены из результирующего набора данных практически без потери полезной информации. Критерием принятия решения об исключении является порог значимости. Если степень взаимозависимости между входным и выходным факторами меньше порога значимости, то соответствующий фактор отбрасывается как незначащий.
Источник: studfile.net
Мастера
В Deductor Studio вся работа ведется с использованием пяти мастеров:
– Мастер импорта;
– Мастер экспорта;
– Мастер обработки;
– Мастер визуализации;
– Мастер подключений.
С помощью мастеров импорта, экспорта и обработки формируется сценарий. Сценарий состоит из узлов. Мастер подключений предназначен для создания настроек подключений к различным источникам и приемникам данных. Мастер визуализации настраивает визуализаторы для конкретного узла.
Визуализатором называется любое представление набора данных в каком-либо виде: табличном, графическом, описательном. Примеры визуализаторов: таблица, дерево, гистограмма, диаграмма, OLAP-куб и т.д.
Deductor Credit Pipeline. Презентация системы принятия кредитных решений от компании BaseGroup Labs
Задание
1. Создайте новый проект и сохраните его под именем L1_1.ded.
Не используйте упакованный формат файла.
2. Заполните свойства проекта.
3. Просмотрите файл проекта через любой текстовый редактор.
4. Сделайте видимой вкладку Подключения.
5. Поменяйте местами порядок вкладок Сценарии и Подключения.
6. Найдите в помощи раздел Системные требования.
Вопросы для проверки
1. Сколько вкладок на панели управления Deductor Studio?
2. Что такое проект в Deductor Studio?
3. Какое расширение имеет файл проекта?
4. Как создать новый проект?
5. Как сохранить текущий проект под другим именем?
6. Как отредактировать свойства проекта?
7. Сколько проектов можно одновременно открыть в Deductor Studio?
8. Сколько мастеров имеется в Deductor Studio?
Сценарии
Понравилась статья? Добавь ее в закладку (CTRL+D) и не забудь поделиться с друзьями:
Источник: studopedia.ru
Аналитическая платформа Deductor: начало работы с системой, создание проекта
Deductor – это аналитическая платформа для создания законченных прикладных решений анализа данных. Реализованные в Deductor технологии позволяют на базе единой архитектуры пройти все этапы построения аналитической системы: от консолидации данных до построения моделей и визуализации полученных результатов.
Современным потребностям бизнеса в анализе данных отвечают новые парадигмы: хранилища данных, машинное обучение, Data Mining, Knowlegde Discovery in Databases. Это позволяет использовать анализ данных для решения большого числа бизнес-задач, направленных на получение экономического эффекта.
Развитие информационных технологий анализа данных стали специализированные программные системы – аналитические платформы, которые полностью автоматизируют все этапы анализа от консолидации данных до эксплуатации моделей и интерпретации результатов, среди которых – Deductor, представитель системы анализа данных последнего поколения.
Общие сведения об аналитической платформе Deductor
Аналитическая платформа Deductor состоит из пяти частей:
— Warehouse – хранилище данных, консолидирующее информацию из разных источников;
— Studio – приложение, позволяющее пройти все этапы построения прикладного решения, рабочее место аналитика;
— Viewer – рабочее место конечного пользователя, одно из средств тиражирования знаний (т.е. когда построенные аналитиком модели используют пользователи, не владеющие технологиями анализа данных);
— Server – служба, обеспечивающая удаленную аналитическую обработку данных;
— Client – клиент доступа к Deductor Server. Обеспечивает доступ к серверу из сторонних приложений и управление его работой.
Платформа Deductor поставляется в трех вариантах:
В зависимости от типа поставки набор доступных компонентов может различаться.
Версия Enterprise предназначена для корпоративного использования. В ней присутствуют:
— Серверные компоненты Deductor Server и Deductor Client.
— Интерфейс доступа к Deductor через механизм OLE Automation.
— Традиционное хранилище данных Deductor Warehouse на трех СУБД : Firebird, MS SQL, Oracle.
— Виртуальное хранилище данных Deductor Virtual Warehouse.
Версия Professional предназначена для небольших компаний и однопользовательской работы. В ней отсутствуют серверные компоненты, поддержка OLE, виртуальное хранилище, а традиционное хранилище данных можно создавать только на СУБД FireBird. Автоматизация выполнения сценариев обработки данных осуществляется только через пакетный режим.
Версии Professional и Enterprise требуют установки драйверов Guardant для работы с лицензионным ключом.
Версия Academic предназначена для образовательных и обучающих целей. Ее функционал аналогичен версии Professional за исключением:
— функции пакетного запуска сценариев, т.е. работа в программе может вестись только в интерактивном режиме;
— функции импорта из промышленных источников данных: 1С, СУБД, файлы MS Excel, Deductor Data File;
— некоторых других возможностей.
Категории пользователей Deductor
В процессе развертывания и использования аналитической платформы с ней взаимодействуют различные категории пользователей. Можно выделить четыре основные категории:
— создание в Deductor Studio сценариев – последовательности шагов, которую необходимо провести для получения нужного результата;
— построение, оценка и интерпретация моделей;
— настройка панели отчетов для пользователей Deductor Viewer;
— настройка сценария на поточную обработку новых данных.
Функции пользователя – просмотр готовых отчетов в Deductor Viewer.
— установка компонентов Deductor на рабочих местах и сервера ключей Guardant при необходимости;
— развертывание традиционного хранилища данных на сервере;
— контроль процедур регулярного пополнения хранилища данных;
— конфигурирование сервера Deductor Server;
— настройка пакетной и/или серверной обработки сценариев Deductor;
— оптимизация доступа к источникам данных, в том числе к хранилищу данных.
— интеграция Deductor с источниками и приемниками данных;
— вызов Deductor из внешних программ различными способами, в том числе взаимодействие с Deductor Server.
Такая работа как проектирование и наполнение хранилище данных часто выполняется коллективно аналитиком, администратором и программистом. Аналитик проектирует семантический слой хранилища данных, то есть определяет, какие данные необходимо иметь в хранилище. Администратор создает хранилище данных и наполняет его данными. Программист при необходимости создает программные модули, выполняющие выгрузку информации из учетных систем в промежуточные источники (так называемые транспортные таблицы).
Установка Deductor
Установку Deductor рекомендуется проводить администратору системы, однако, при наличии прав администратора в Windows это может сделать и аналитик. Установка может быть произведена на компьютер с операционной системой MS Windows 2000 и выше. Системные требования к компьютеру изложены в справочной системе.
Для установки Deductor Professional/Academic запускается файл инсталлятора и следуют инструкциям по установке. На странице «Выбор компонентов» программы установки предоставляется выбор, какой набор компонентов пакета Deductor необходимо установить на компьютер. В выпадающем списке можно выбрать предопределенные конфигурации установки платформы, и программа установки сама предложит нужный набор компонентов.
После установки программ серии Professional и Enterprise дополнительно потребуется настроить работу с электронным ключом защиты от копирования. Установку и подсоединение электронного ключа осуществляет администратор. Существуют два вида ключей – локальный и сетевой. Локальный ключ устанавливается на том же компьютере, что и Deductor, и работать с ним можно только с этой рабочей станции. Сетевой ключ устанавливается на сервере, и к нему могут подключаться несколько пользователей одновременно (количество пользователей ограничивается типом приобретаемой лицензии).
При каждом запуске Deductor пытается найти доступный электронный ключ. В случае если ключ не найден, могут появиться следующие сообщения об ошибке. При наличии ошибок следует обратиться к администратору.
После запуска главное окно Deductor Studio выглядит следующим образом.
По умолчанию панель управления представлена одной вкладкой «Сценарии». Кроме того, доступны еще две вкладки: Отчеты и Подключения. Сделать их видимыми можно следующими способами:
— главное меню Вид >Отчеты и Вид >Подключения
— кнопки 
и 
на панели инструментов.
Можно производить «drag
— Переименовать – переименовывает название вкладки;
— Закладки – переключается на выбранную закладку;
— Верх/Низ – задает расположение названий вкладок: вверху либо внизу;
— Помощь – открывает раздел справки.
Справка по программе вызывается из главного окна системы следующими способами:
— главное меню ? >Справка, клавиша F1,
— кнопка на панели инструментов .
Помощь содержит подробное описание работы с Deductor Studio: системные требования, настройки узлов, способы осуществления действий с объектами системы.
Понятие проекта
В Deductor Studio ключевым понятием является проект. Это файл с расширением *.ded, по структуре соответствующий стандартному xml-файлу. Он хранит в себе:
— последовательности обработки данных (сценарии);
— переменные проекта и служебную информацию.
Пример фрагмента файла *.ded:
Источник: znanio.ru