Для импорта/экспорта данных с возможностью настройки взаимосвязей между источниками и приёмниками, а также промежуточных преобразований данных, используйте инструмент «Задача ETL»:
ETL (от английского Extract, Transform, Load - дословно «извлечение, преобразование, загрузка») - один из основных процессов в управлении хранилищами данных. ETL предназначен для:
извлечения данных из внешних источников (Extract);
преобразования и очистки данных для приведения их к требуемому качеству (Transform);
загрузки данных в хранилище данных (Load).
Ключевые возможности:
визуальное построение схемы трансформации данных на едином рабочем поле;
протоколирование выполнения задачи ETL;
настройка очередности выполнения задачи ETL;
извлечение данных из двумерных, реляционных и многомерных источников данных;
извлечение/загрузка данных из внешних источников: OLE DB; баз данных Microsoft Access, Visual FoxPro, DBase; файлов Microsoft Excel, XML, HTML, TXT, CSV, JSON;
извлечение/загрузка данных из объектов репозитория: таблиц, присоединенных таблиц, представлений, запросов, источников данных ODBC, журналов;
извлечение данных из REST-источников, доступ к которым осуществляется через Internet;
преобразование данных: слияние, разделение, удаление дубликатов, группировка, фильтрация, сортировка.
Общая схема работы задачи ETL:
Данные из источников поступают на вход задачи ETL. Количество объектов-источников не ограничено.
С выходов источников данные поступают на входы объектов-преобразователей.
После преобразования данные с выходов объектов-преобразователей поступают на входы приёмников данных.
С выходов приёмников данные выгружаются во внешние или внутренние форматы.
Для работы с инструментом «Задача ETL» вам понадобится единица лицензирования «PP_ETL».
Для начала работы смотрите статью «Начало работы с инструментом «Задача ETL»».
Для построения схемы импорта/экспорта/преобразования данных смотрите статью «Построение задачи ETL».
Для выполнения задачи ETL смотрите статью «Выполнение задачи ETL».
Задача ETL в веб-приложении доступна только в режиме просмотра. Данный режим предназначен для просмотра ранее созданных и отлаженных схем загрузки и трансформации данных. Возможность создания и редактирования задачи доступна только в настольном приложении.
Функциональность | Настольное приложение | Веб-приложение |
Создание новой задачи ETL и объектов в задаче ETL | ||
Редактирование задачи ETL | ||
Просмотр задачи ETL | ||
Просмотр данных объекта, на который настроен коннектор | ||
Просмотр свойств коннектора | ||
Настройка оформления коннектора | ||
Масштабирование | ||
Смена режимов работы с объектами | ||
Выполнение задачи ETL |
Условные обозначения:
- функциональность доступна в полном объеме;
- функциональность недоступна;
- функциональность доступна в ограниченном объёме.
См. также:
Начало работы с инструментом «Задача ETL» | Построение задачи ETL | Выполнение задачи ETL