sap data services что это

SAP Businessobjects Data Sevices

SAP BusinessObjects Data Services является интегрированной платформой, объединяющей средства обеспечения качества и интеграции данных.

ЕДИНОЕ РЕШЕНИЕ ДЛЯ ИНТЕГРАЦИИ И ОБЕСПЕЧЕНИЯ КАЧЕСТВА ДАННЫХ

SAP BusinessObjects Data Services является интегрированной платформой, объединяющей средства обеспечения качества и интеграции данных. Она предоставляет единую среду для разработки и исполнения процессов очистки и трансформации данных, включая:

• единый пользовательский интерфейс разработчика;

• единый сервер, поддерживающий эффективные механизмы интеграции и очистки данных;

• единый репозиторий метаданных;

• единый набор сервисов администрирования, обеспечения безопасности и параллельной обработки.

Благодаря SAP BusinessObjects Data Services Вы сможете использовать единую визуальную среду разработки процессов интеграции и очистки данных, эффективно управлять процессом разработки в многопользовательском режиме с использованием центрального репозитория, управлять процессами преобразования и загрузки данных через Web-браузер, использовать преимущества параллельной и распределенной сетевой обработки информации. Кроме того, Вы сможете отслеживать происхождение данных, а также изменения в данных и их последствия в любых узлах информационной инфраструктуры, начиная с источников и вплоть до отчетов.

Применение подобной единой среды для разработки, исполнения, администрирования и обеспечения безопасности существенно упрощает ИТ-инфраструктуру организации, сокращает общую стоимость владения и способствует повышению профессионального уровня команды разработчиков. SAP BusinessObjects Data Services является решением корпоративного уровня. Платформа SAP BusinessObjects Data Services обеспечивает работу с источниками данных любых типов, включая неструктурированные данные, широкий круг баз данных, приложений и ПО для мэйнфреймов. Заложенные в ней возможности параллельной и распределенной сетевой обработки позволяют в широких пределах масштабировать создаваемые на ее основе решения в целях получения необходимой производительности на произвольных объемах обрабатываемых данных.

Кроме того, SAP BusinessObjects Data Services поддерживает многопользовательскую распределенную среду коллективной разработки процессов интеграции, базирующуюся на едином центральном репозитории метаданных.

Платформа SAP BusinessObjects Data Services полностью соответствует стандартам совместимости Web-сервисов, что позволяет использовать заложенные в ей возможности интеграции и обеспечения качества данных в Ваших корпоративных приложениях.

Основные компоненты SAP BusinessObjects Data Services

Data Services Designer

SAP BusinessObjects Data Services Designer – это визуальное средство разработки процессов интеграции и очистки данных. Простой, интуитивно понятный интерфейс дает возможность быстро создавать процессы интеграции и очистки данных. Интерактивная визуальная среда проектирования позволяет строить потоки обработки данных путем перетаскивания мышью необходимых элементов, отображающих соответствующие процедуры трансформации.

Все участники проекта могут использовать общую библиотеку уже созданных процедур трансформации, что унифицирует процесс разработки и сокращает его сроки, а также встроенную библиотеку процедур трансформации, созданных на основе лучших практик по интеграции данных при использовании различных источников информации.

Наряду с процедурами трансформации SAP BusinessObjects Data Services предоставляет встроенную библиотеку процедур очистки данных, поддерживающих все типы данных, включая данные в произвольной форме, структурированные и неструктурированные данные.

Data Services Management Console

SAP BusinessObjects Data Services Management Console – комплекс основных средств администрирования и управления процессами интеграции. Все управление процессами очистки и интеграции данных и контроль за их выполнением осуществляется посредством Web-интерфейса.

Средства администрирования (Administrator) позволяют запускать задания, администрировать репозитории, сервисы, пользователей. Специальная панель контроля функционирования системы (Operational Dashboard) позволяет анализировать работу системы в целом за счет отображения параметров производительности исполнения заданий по загрузке данных. Средства сбора и отображения статистики по выверке данных (Data Validation), а также специализированные отчеты (Data Quality Reports) и информационные панели дают возможность оценить надежность данных, полученных с помощью заданий, выполняющих различные проверки на корректность, идентифицировать потенциальные нестыковки или ошибки в исходных данных. Средства анализа происхождения данных и влияния изменений в источниках (Impact and Lineage Analysis) отображают в наглядной форме цепочку извлечения и трансформации данных, присутствующих в отчетах SAP BusinessObjects, и позволяют проанализировать последствия изменений в структуре источника данных.

Источник

Иван Болховитинов

Здесь и далее – вольный перевод обзорной главы из официальной документации.

2.1 Обзор архитектуры

Этот раздел очерчивает общую архитектуру платформы, системы и служебные компоненты, которые составляют платформу SAP BusinessObjects Data Services. Эта информация поможет администраторам понять основы и сформировать план по развёртыванию системы и её дальнейшему управлению и обслуживанию.

SAP BusinessObjects Data Services спроектирована с учётом повышенных требований к производительности, пригодна для широкого круга пользователей и поддерживает большой спектр сценариев развёртывания. Например:

Службы информационных технологий могут использовать инструменты управления данными и системами:

Для обеспечения гибкости, надежности и масштабируемости, SAP BusinessObjects Data Services компоненты могут быть установлены на одном или на нескольких физических единицах оборудования.

Серверные процессы могут быть масштабированы «по вертикали» (где на одной единице оборудования будут работать все или несколько серверных служб) – для уменьшения стоимости, или масштабированы «по горизонтали» (процессы сервера распределены между двумя или более единицами оборудования) – для повышения производительности.

Кроме того, можно запускать несколько экземпляров одного и того же процесса на нескольких единицах оборудования, так что обработка может быть продолжена, если первичный процесс сталкивается с проблемой – для повышения отказоустойчивости.

2.2 Стандартные компоненты

Следующая диаграмма иллюстрирует расположение компонентов SAP BusinessObjects Data Services в общем наборе продуктов SAP BusinessObjects.

Если у вас нет полной установки решений платформы SAP BusinessObjects, тогда основные компоненты, которые требуются Data Services, будут предоставлены в составе сервисов платформы SAP BusinessObjects Information.

Для детального списка поддерживаемых окружений и системных требований обратитесь к Матрице доступности продуктов (Product Availability Matrix) по адресу: http://service.sap.com/PAM. Эта информация включает версии и уровень обновлений для баз данных, приложений, серверов веб-приложений, браузеров и операционных систем.

2.2.1 Дизайнер (Designer)

Дизайнер – это инструмент разработки с простым в использовании графическим интерфейсом пользователя. Он позволяет разработчикам определять управление данными приложений, которые состоят из сопоставления данных, преобразования и логику управления.

Используйте Дизайнер для создания приложений, содержащих рабочие процессы (определения выполнения заданий) и потоки данных (определения преобразования данных).

Используя Дизайнер возможно создавать объекты, а затем перетаскивать и настраивать их, выбирая иконки в блок-схемах, табличных макетах и рабочих областях. Объекты в Дизайнере представляют собой метаданные. Интерфейс Дизайнера позволяет управлять метаданными, хранящимися в репозитории. Используя Дизайнер, вы также можете запускать задания на Сервере заданий для начального тестирования приложений.

2.2.2 Репозиторий (Repository)

Репозиторий SAP BusinessObjects Data Services – это набор таблиц, которые содержат предопределённые системные объекты и объекты, созданные пользователями, исходные и целевые метаданные и правила преобразований.

Установка репозитория на открытой клиент-серверной платформе облегчает обмен метаданными, используя другие инструменты предприятия. Каждый репозиторий должен храниться в существующей СУБД, и зарегистрировано в центральной консоли управления (CMC).

Каждый репозиторий связан с одним или несколькими серверами заданий, на которых будут запускаться задания, которые вы создаёте. Есть два типа репозиториев:

Локальный репозиторий используется разработчиком приложений для хранения определений объектов (например: проекты, задания, рабочие потоки и потоки данных), а также метаданные источников / целей.

Центральный репозиторий является дополнительным компонентом, который может быть использован для поддержки многопользовательской разработки. Центральный репозиторий предоставляет библиотеку объектов для совместного доступа и позволяет разработчикам выкладывать и забирать объекты в собственные локальные репозитории.

Хотя каждый пользователь работает над приложением в собственном локальном репозитории, команда использует центральный репозиторий для хранения главной копии всего проекта. Центральный репозиторий сохраняет все версии объектов приложения, так что вы можете вернуться к предыдущей версии в случае необходимости.

Многопользовательская разработка включает в себя другие дополнительную функциональность, такую как метки и фильтры, чтобы предоставить вам больше гибкости и контроля в управлении объектами приложения.

2.2.3 Сервер заданий (Job Server)

Сервер заданий SAP BusinessObjects Data Services инициирует механизм перемещения данных, который объединяет данные из нескольких гетерогенных источников, выполняет сложные преобразования данных, управляет экстракцией и транзакциями из ERP-систем и другими источниками. Сервер заданий может перемещать данные как в пакетном режиме, так и в режиме реального времени, используя оптимизацию распределённых запросов, многопотоковость, кэширование в памяти, трансформацию данных на лету и параллельную обработку для достижения высокой пропускной способности и масштабируемости.

При определении заданий, вы можете запускать их из Дизайнера, который будет передавать задание на обработку на сервер заданий. Сервер заданий получает задание из связанного репозитория и запускает процесс обработки. В продуктивном окружении сервер заданий выполняет задания по определяемому расписанию или в режиме реального времени под управлением сервера доступа (Access Server). В продуктивном окружении вы можете распределять нагрузку по нескольким серверам заданий, создав группу серверов заданий.

Механизм (Engine)

При запуске заданий Data Services сервер заданий запускает механизм, обрабатывающий экстракцию, трансформацию и перемещение данных. Механизм использует параллельную обработку и трансформацию данных на лету для достижения высокой пропускной способности и масштабируемости.

Служба

Служба Data Services устанавливается при установке сервера заданий и сервера доступа (Access Servers). Служба запускает сервер заданий и сервер доступа при перезагрузке операционной системы. В ОС Windows эта служба называется BusinessObjects Data Services. В системах UNIX есть эквивалентная служба (daemon) с названием AL JobService.

2.2.4 Сервер доступа (Access Server)

Сервер доступа SAP BusinessObjects Data Services – это брокер сообщений (запрос-ответ), который в реальном времени собирает запросы и перенаправляет их к соответствующим службам, а также доставляет ответ за заданный интервал времени. Сервер доступа управляет очередью сообщений и отправляет их к следующей доступной службе реального времени среди любого количества вычислительных ресурсов. Такой подход позволяет достичь автоматического масштабирования, так как Сервер доступа может задействовать дополнительные службы реального времени в части дополнительных вычислительных ресурсов в случае, если поток обращений к конкретной службе реального времени будет повышенным. Вы можете настроить несколько серверов доступа.

Служба

Служба Data Services устанавливается при установке сервера заданий (Job Server) и сервера доступа. Служба запускает сервер заданий и сервер доступа при перезагрузке операционной системы. В ОС Windows эта служба называется BusinessObjects Data Services. В системах UNIX есть эквивалентная служба (daemon) с названием AL JobService.

2.2.5 Консоль управления (Management Console)

Администратор

Администратор предоставляет функции администрирования ресурсами SAP BusinessObjects Data Services в браузере:

Отчёты по метаданным

Приложение Отчёты по метаданным предоставляет функции базового анализа и отчётности по имеющимся метаданным в браузере:

Отчёты по метаданным включают несколько приложений для обзора ваших метаданных:

2.2.5.1Отчёты по анализу зависимостей и происхождению

Отчёты по динамическому анализу и происхождению включают:

Для каждого соединения, отчёты: обзорный, табличный, функциональный, иерархический.

Пользователи SAP BusinessObjects Data Services могут определить:

Обзор юниверсов, классов и объектов. Пользователи юниверсов могут определить, какие источники данных служат источниками для их юниверсов. Пользователи юниверсов также могут определить, какие отчёты используют их юниверсы.

Показывает источники данных для Business Views в Центральном Сервере Управления (CMS). Вы можете просмотреть отчёт о происхождении бизнес-элементов и бизнес-полей для каждого Business View. Пользователи Crystal Business View могут определить, какие источники данных служат для наполнения их Business Views, и в какие отчёты они в дальнейшем попадают.

Обзор источников данных для отчётов в Центральном сервере управления (CMS). Вы можете отследить происхождение таблиц и колонок для каждого отчёта Crystal Report или документа Web Intelligence, под управлением CMS. Разработчики отчётов могут определить, какие источники данных служат наполнением для их отчётов.

Поиск отдельных объектов в репозитории и понимание того, какие объекты SAP BusinessObjects Data Services воздействуют на объекты построителя юниверсов SAP BusinessObjects и отчёты, а также. Результаты поиска по метаданным включают обратные ссылки на связанные отчёты.

Для получения динамического анализа и происхождения по приложениям из портфеля решений SAP BusinessObjects solution вы должны настроить Интегратор Метаданных (Metadata Integrator).

2.2.5.2 Операционная информационная панель

Отчёты операционной информационной панели предоставляют в графическом виде отображение статистики исполнения заданий SAP BusinessObjects Data Services. Это позволяет вам охватить одним взглядом статус и производительность выполнения заданий для одного или нескольких репозиториев за определённый период времени. Вы можете использовать эту информацию для курирования и мониторинга планирования расписания для достижения максимальной суммарной эффективности и производительности

2.2.5.3 Отчёты по Автодокументированию

Отчёты по автодокументированию предоставляют удобный и всеобъемлющий способ получения печатной документации для всех создаваемых вами объектов в SAP BusinessObjects Data Services. Отчёты по автодокументированию охватывают важную информацию для понимания заданий, таким образом вы можете получить общий обзор процессов ETL (извлечение, преобразование, загрузка).

После создания проекта вы можете использовать отчёты по автодокументированию для быстрого создания документов в формате PDF или Microsoft Word, которые охватывают выбранные задания, рабочие потоки, потоки данных, включая графическое представление и информацию о ключевых соответствиях.

2.2.5.4 Информационная панель по проверке данных

Отчёты информационной панели по проверке данных предоставляют отображение в графическом виде, которое позволяет вам оценить достоверность целевых данных на основании правил проверки, которые вы создали в пакетных заданиях SAP BusinessObjects Data Services. Это позволяет бизнес-пользователям быстро осмотреть, оценить и идентифицировать потенциальные несоответствия и ошибки в исходных данных.

2.2.5.5 Отчёты по Очистке данных

Отчёты по очистке данных позволяют получить и экспортировать отчёты Crystal Reports для пакетных заданий и заданий реального времени. Список отчётов включает обзоры по заданиям, отчёты по трансформации и отчёты по групповому преобразованию.

2.2.6 Интегратор метаданных (Metadata Integrator)

Интегратор метаданных позволяет SAP BusinessObjects Data Services прозрачно предоставлять доступ к метаданным для решений SAP BusinessObjects Business Intelligence (BI). Запустите Интегратор метаданных для сбора метаданных в репозитории SAP BusinessObjects Data Services для использования в Business Views и юниверсах, которые служат источниками для Crystal Reports, документов SAP BusinessObjects Desktop Intelligence и документов SAP BusinessObjects Web Intelligence.

Источник

Sap data services что это

Часовой пояс: UTC + 3 часа

FAQ по разделу

5. Не переходи на личности. Будь корректен, такт и этичность всегда смотрятся лучше, чем поливание грязью.

6. Имей терпение. Если ты не нашел темы с обсуждением какой-либо компании в этом форуме, возможно, это не просто так. Прежде, чем открывать новую тему, задай вопрос админу или модератору, мы все поясним. Если ты открыл тему, а ее удалили, открывать новую не стоит, в определенных случаях это может привести к предупреждениям и банам на форуме. Причины удаления всегда можно уточнить у админа или модератора в приватном порядке.

SAP Data Services: есть ли перспективы?

Старший специалист

Зарегистрирован:
Пн, авг 29 2011, 08:54
Сообщения: 318
Откуда: Владивосток, Россия
Пол: Мужской

Старший специалист

Зарегистрирован:
Ср, июн 08 2005, 13:47
Сообщения: 293

Специалист

Зарегистрирован:
Пт, янв 14 2011, 14:08
Сообщения: 221

Старший специалист

Зарегистрирован:
Пн, авг 29 2011, 08:54
Сообщения: 318
Откуда: Владивосток, Россия
Пол: Мужской

Старший специалист

Зарегистрирован:
Пн, авг 29 2011, 08:54
Сообщения: 318
Откуда: Владивосток, Россия
Пол: Мужской

Старший специалист

Зарегистрирован:
Пн, авг 29 2011, 08:54
Сообщения: 318
Откуда: Владивосток, Россия
Пол: Мужской

Старший специалист

Зарегистрирован:
Ср, июн 08 2005, 13:47
Сообщения: 293

Старший специалист

Зарегистрирован:
Пн, авг 29 2011, 08:54
Сообщения: 318
Откуда: Владивосток, Россия
Пол: Мужской

Старший специалист

Зарегистрирован:
Ср, июн 08 2005, 13:47
Сообщения: 293

Младший специалист

Зарегистрирован:
Пн, мар 12 2012, 12:49
Сообщения: 83

Старший специалист

Зарегистрирован:
Пн, авг 29 2011, 08:54
Сообщения: 318
Откуда: Владивосток, Россия
Пол: Мужской

Старший специалист

Зарегистрирован:
Вт, янв 30 2007, 17:10
Сообщения: 488

Старший специалист

Зарегистрирован:
Пн, авг 29 2011, 08:54
Сообщения: 318
Откуда: Владивосток, Россия
Пол: Мужской

Логотип © 2006 Андрей Горшков
Поддержка: Кирилл Андреев, 2011-…

Источник