В Prognoz Platform 8.2 появилось ещё больше возможностей для более детальной настройки аналитического представления данных и проведения разнообразных аналитических преобразований и вычислений. Это позволит пользователям быстрее и проще получать новую информацию, обнаруживать новые закономерности в данных и соответствующим образом представлять полученные выводы.
Расширены функции анализа данных и проведения расчетов:
встроенные функции распределения данных (Первые/Последние N элементов, распределение 80/20 и пр.) теперь доступны в регламентных отчетах;
появилась возможность подключения пользовательских методов в мастере функций регламентных отчетов, что позволяет использовать специфические прикладные расчеты;
появилась функция агрегации с возможностью исключения значений скрытых строк/столбцов, которая аналогична функции MS Excel «ПРОМЕЖУТОЧНЫЕ.ИТОГИ».
Расширены возможности настройки аналитического представления данных:
доступно задание
отметки по календарному измерению в виде диапазона
«от и до»:
расширены настройки
оформления правил валидации для индикации выбросов
и прочих исключений в данных:
редактирование измерений из инструментов пользователя теперь доступно в веб-приложении;
копирование листов в экспресс-отчетах теперь не требует повторной настройки аналитического представления;
доступно создание сносок
для элементов измерений и отдельных ячеек (через Fore):
Развитие методов интеллектуального анализа позволяет выявлять новые закономерности данных и получать более качественные модели:
новый метод оценки моделей для заполнения пропусков в данных – кросс-валидация;
новый метод решения задачи классификации: построение ансамблей деревьев решений методами случайного леса (random forest) и градиентного бустинга (gradient boosted trees);
возможность использования ROC-кривых
для оценки качества моделей:
результаты применения методов заполнения пропусков теперь можно сохранить в исходный источник для дальнейшего анализа.
Новые возможности настройки визуализаторов позволяют получить необходимое графическое представление информации быстро и без необходимости написания кода или реализации дополнительных расчетов:
встроенные стили ускоряют настройку оформления визуализаторов:
диаграмм,
карт,
пузырьковых
диаграмм, плоских
и пузырьковых
деревьев;
новые настройки перекрытия
рядов гистограммы упрощают одновременный анализ нескольких рядов данных
(в частности, план-факт анализа):
использование «ряда по умолчанию» позволяет определять общие настройки (границы, тип линии и пр.) для всех рядов данных визуализатора одновременно;
упрощено отображение на диаграммах вычислимых
показателей, теперь можно по
отдельности включать отображение итогов и результатов применения
методов распределения (Первые/Последние N элементов, распределение
80/20 и пр.):
настройки масштаба оси упрощают представление больших чисел без необходимости настройки единиц измерения;
настройки следа пузырьков позволяет проследить их перемещение во времени.
В Prognoz Platform 8.2 продолжено развитие средств самостоятельной подготовки данных, чтобы пользователь мог расширять спектр анализа за счет загрузки собственных данных, хранящихся, например, в Excel-файлах. При этом конечный пользователь может самостоятельно пройти всю цепочку действий от импорта данных и первичного анализа до создания системы взаимосвязанных отчетов.
Новые возможности мастера импорта позволяют производить более сложные операции по предварительной обработке данных:
разбиение
полей с разделителями (запятая, скобки, кавычки
и пр.) на одно или несколько полей. Например, строка «Россия, Москва»
может быть разбита на два поля «Россия» и «Москва»:
выбор методов агрегации для загружаемых данных;
в импортируемых данных можно задать поле «Код территории», что позволит сопоставить данные с территорией и отобразить эти данные на карте;
возможность использования тех типов данных, которые были заданы в источнике (для структурированных источников, например, Microsoft Access или OLE DB);
выбор
приемника данных: куб или база данных временных
рядов:
новые функции интеграции с модулем ETL позволяют повторно осуществлять операции импорта с такими же или измененными настройками.
Новый интерфейс в мастерах редактирования кубов обеспечивает простоту и понятность настройки агрегации данных (на сервере или на клиенте).
В части средств администрирования, обеспечения безопасности и интеграции в Prognoz Platform 8.2 внесено несколько важных изменений:
новые функции для мониторинга и аудита безопасности:
отображение числа активных параллельных сессий для каждой учетной записи;
просмотр параметров безопасности без возможности их редактирования позволяет выделить роль пользователя-куратора информационной безопасности;
интеграция с HP Vertica
для анализа больших данных:
появилась возможность использования ODBC-драйвера для работы с MS SQL Server, а также возможность настройки опций соединения;
продолжается интеграция с Linux-подобными операционными системами:
для упрощения процесса установки платформы на Linux были разработаны инсталляционные пакеты;
поддержка средств планировщика задач на серверах под управлением Linux;
для повышения удобства разработки аналитических веб-приложений в состав платформы включена консоль веб-сервисов. Консоль позволяет получить пример запроса и ответа по выбранной операции веб-сервисов.
В Prognoz Platform 8.2 реализован ряд улучшений, способствующих ускорению выполнения операций:
оптимизация алгоритмов преобразования данных и аналитических расчетов:
расчет на разреженных данных по формулам вычисляемых кубов стал в несколько раз быстрее (на примере с 150 тыс. элементов, где 99% значений пустые, расчет ускорен с 15 сек. до 1 сек.);
новый механизм работы с неизмененными данными обеспечил ускорение расчета задач моделирования до 3 раз (в зависимости от доли измененных данных);
оптимизация работы с базами данных временных рядов (БДВР):
производительность работы с БДВР повышена за счет уменьшения размера таблиц для хранения до 10%;
изменение механизма обработки пустых строк при импорте в БДВР позволило сократить необходимое место для хранения (для примера с 60 млн. записей и разреженностью порядка 80% объем сократился в 3 раза);
ускорение построения аналитических представлений:
построение высокочастотных диаграммам (ускорение составило до 12 раз в примере с тремя рядами, каждый по 37 тыс. точек);
повышена скорость применения фильтров и правил валидации (ускорение до нескольких раз в зависимости от примера);
новый механизм применения стилей и условного форматирования, а также оптимизация потребления памяти электронной таблицы позволили ускорить построение аналитического представления (от 5% до 95% в зависимости от типа форматирования).
