SAP DS (usługi danych) w HANA

Co to jest SAP Usługi danych?

SAP Usługi danych to narzędzie ETL zapewniające kompleksowe rozwiązanie na poziomie przedsiębiorstwa umożliwiające integrację, transformację, jakość i profilowanie danych oraz przetwarzanie danych tekstowych z heterogenicznego źródła do docelowej bazy danych lub magazynu danych.

Za pomocą Designera możemy tworzyć aplikacje (zadania), w których można dokonać mapowania i transformacji danych. (Najnowsza wersja SAP BODS wynosi 4.2).

Funkcje usług danych

• Zapewnia wysoką wydajność transformacji równoległych.
• Posiada wszechstronne narzędzia administracyjne i narzędzie raportowania.
• Obsługuje wielu użytkowników.
• SAP BOD jest bardzo elastyczny w przypadku aplikacji opartych na usługach internetowych.
• Umożliwia tworzenie języka skryptowego z bogatym zestawem funkcji.
• Usługi danych można zintegrować z SAP Serwer replikacji LT (SLT) z technologią opartą na Triggerze. SLT dodaje możliwości delty do każdego SAP lub nieSAP tabela źródłowa, która umożliwia wykorzystanie przechwytywania danych w celu wprowadzania zmian oraz przesyłania danych delta tabeli źródłowej.
• Walidacja danych za pomocą dashboardów i audyt procesów.
• Narzędzie administracyjne z możliwością planowania i monitorowania/panelami kontrolnymi.
• Debugowanie, wbudowane profilowanie i przeglądanie danych.
• SAP BODS obsługuje szerokie źródło i cel.
• Wszelkie aplikacje (np SAP).
• Dowolne bazy danych z masowym ładowaniem i przechwytywaniem danych
• Pliki: stała szerokość, rozdzielane przecinkami, COBOL, XML, przewyższać.

Składnik usług danych

SAP Usługi DATA mają poniższy komponent –

1. Projektant – Jest to narzędzie programistyczne, za pomocą którego możemy tworzyć, testować i wykonywać zadania wypełniające hurtownię danych. Umożliwia programiście tworzenie obiektów i konfigurowanie ich poprzez wybranie ikony na diagramie przepływu od źródła do celu. Może to być służy do tworzenia aplikacji poprzez określenie przepływów pracy i przepływów danych. Aby otworzyć Open Data Service Designer przejdź do Menu Start -> Wszystkie programy -> SAP Usługi danych (tutaj 4.2) -> Projektant usług danych.

2. Serwer zadań- Jest to aplikacja uruchamiająca silnik przetwarzania usług danych i służąca jako interfejs do silnika i pakietu Data Services Suite.
3. Silnik- Silnik Data Service wykonuje indywidualne zadania zdefiniowane w aplikacji.
4. Magazyn- Repozytorium to baza danych przechowująca obiekty predefiniowane przez projektanta i obiekty zdefiniowane przez użytkownika (metadane źródłowe i docelowe, zasady transformacji). Repozytorium są dwojakiego rodzaju –

• Repozytorium lokalne (Używany przez projektanta i serwer zadań).
• Centralne repozytorium (Używany do udostępniania obiektów i kontroli wersji)

5. Dostęp do serwera- Serwer dostępu przekazuje wiadomości pomiędzy aplikacjami internetowymi, serwerem zadań usług danych i silnikami.
6. Administrator- Administrator WWW zapewnia zarządzanie zasobami usług danych w oparciu o przeglądarkę. Szczegóły poniżej –

• Konfigurowanie, uruchamianie i zatrzymywanie usług czasu rzeczywistego.
• Planowanie, monitorowanie i wykonywanie zadań wsadowych.
• Konfigurowanie użycia serwera zadań, serwera dostępu i repozytorium.
• Zarządzanie użytkownikami.
• Publikowanie zadań wsadowych i usług w czasie rzeczywistym za pośrednictwem usług sieciowych
• Konfigurowanie i zarządzanie adapterami.

Usługi danych Archistruktura –

Architektura usług danych składa się z następujących komponentów:

• Repozytorium Centralne – służy do konfiguracji repozytoriów do serwerów zadań, zarządzania bezpieczeństwem, kontroli wersji i udostępniania obiektów
• Projektant – używany do tworzenia projektu, zadania, przepływu pracy, przepływu danych i uruchamiania.
• Lokalne repozytorium (tutaj możesz tworzyć zmiany i uruchamiać zadania, przepływ pracy, przepływ danych).
• Serwer i silnik zadań – zarządza zadaniami.
• Serwer dostępu – służy do wykonywania zadań w czasie rzeczywistym tworzonych przez programistów w repozytoriach.

Na poniższym obrazku pokazano relację usług danych i komponentów.

SAP BOD Architektura

Szczegóły okna projektanta: Najpierw przyjrzymy się pierwszemu składnikowi SAP usługa danych - Projektant

Szczegóły każdej sekcji projektanta usług danych przedstawiono poniżej:

1. Pasek narzędzi (Używane do otwierania, zapisywania, cofania, sprawdzania poprawności, wykonywania itp.).
2. Teren projektu (Zawiera bieżący projekt, który obejmuje zadanie, przepływ pracy i przepływ danych. W usługach danych wszystkie encje są obiektami.
3. Miejsce do pracy (Obszar Okna aplikacji, w którym definiujemy, wyświetlamy i modyfikujemy obiekty).
4. Lokalna biblioteka obiektów (Zawiera obiekty lokalnego repozytorium, takie jak transformacje, zadanie, przepływ pracy, przepływ danych itp.).
5. Paleta narzędzi (Przyciski na palecie narzędzi umożliwiają dodawanie nowych obiektów do obszaru roboczego).

Hierarchia obiektów

Poniższy diagram przedstawia relacje hierarchiczne pomiędzy najważniejszymi typami obiektów w ramach Usług danych.

>

Uwaga:

Przepływy pracy i tryb warunkowy* są opcjonalne

Przedmioty użyte w SAP Szczegóły usług danych są następujące –

Obiekty	Opis
Projekt	Projekt jest obiektem najwyższego poziomu w oknie Projektanta. Projekty umożliwiają organizowanie innych obiektów tworzonych w Data Services. W danej chwili otwarty jest tylko jeden projekt (gdzie „otwarty” oznacza „widoczny w obszarze projektu”).
Praca	„Zadanie” to najmniejsza jednostka pracy, którą można niezależnie zaplanować do wykonania.
Skrypty	Podzbiór linii w procedurze.
Workflow	„Przepływ pracy” to włączenie kilku przepływów danych w spójny przepływ pracy dla całego zadania. Przepływ pracy jest opcjonalny. Przepływ pracy jest procedurą. Wywołaj przepływy danych Wywołaj inny przepływ pracy Określ kolejność kroków do wykonania w swojej pracy Przekazuj parametry do i z przepływów danych. Określ sposób obsługi błędów występujących podczas wykonywania. Określ warunki realizacji odcinków projektu.
Przepływ danych	„Przepływ danych” to proces, w wyniku którego dane źródłowe przekształcane są w dane docelowe. Przepływ danych jest obiektem wielokrotnego użytku. Jest zawsze wywoływany z przepływu pracy lub zadania. Zidentyfikuj dane źródłowe, które chcesz przeczytać. Zdefiniuj przekształcenia, które chcesz wykonać na danych. Zidentyfikuj tabelę docelową, do której chcesz załadować dane.
Magazyn danych	Kanał logiczny łączący usługi danych ze źródłową i docelową bazą danych Datastore. Należy określić dla każdej źródłowej i docelowej bazy danych. Służą do importowania do repozytorium metadanych źródłowych i docelowych baz danych Są używane przez usługi danych do odczytywania danych z tabel źródłowych i ładowania danych do tabel docelowych
Target	Tabela lub plik, w którym usługi danych ładują dane ze źródła.

Przykład usług danych poprzez ładowanie danych z SAP Tabela źródłowa

Wszystko w usługach danych jest obiektem. Musimy oddzielić magazyn danych dla każdej źródłowej i docelowej bazy danych.

Kroki ładowania danych z SAP tabela źródłowa – SAP BODS składa się z wielu kroków, w ramach których musimy utworzyć magazyn danych dla źródła i celu oraz je zmapować.

• Utwórz magazyn danych między źródłem a BODS
• Zaimportuj metadane (struktury) do BODS.
• Skonfiguruj serwer importu
• Zaimportuj metadane do systemu HANA.
• Utwórz magazyn danych między BODS a HANA.
• Utwórz projekt.
• Utwórz zadanie (wsadowo/w czasie rzeczywistym)
• Utwórz przepływ pracy
• Utwórz przepływ danych
• Dodaj obiekt w Dataflow
• Wykonaj zadanie
• Sprawdź podgląd danych w HANA

Krok 1) Utwórz magazyn danych pomiędzy SAP Źródło i BODS

1. Aby załadować dane z SAP Źródło do SAP HANA przez SAP BODS, potrzebujemy magazynu danych. Dlatego najpierw tworzymy magazyn danych, jak pokazano poniżej – Projekt -> Nowy – > Magazyn danych

   

2. Pojawi się wyskakujące okienko Utwórz nowy magazyn danych, wprowadź szczegóły jak poniżej –
   1. Wprowadź nazwę magazynu danych „ds_ecc”.
   2. Wybierz nazwę typu magazynu danych jako „SAP Aplikacje".
   3. Wprowadź nazwę serwera bazy danych
   4. Nazwa użytkownika i hasło.
   5. Kliknij przycisk „Zastosuj”.
   6. Kliknij przycisk „OK”.

   

3. Magazyn danych zostanie utworzony i wyświetli utworzony magazyn danych jak poniżej:

1. Przejdź do lokalnej biblioteki obiektów
2. Wybierz kartę DataStore.
3. Wyświetli się magazyn danych „ds_ecc”.

Krok 2) Importuj metadane (strukturę) do serwera BODS.

Stworzyliśmy magazyn danych dla ECC do BODS; teraz importujemy metadane z ECC do BODS. Aby zaimportować, wykonaj poniższe kroki –

1. Wybierz Datastore „ds_ecc” i kliknij prawym przyciskiem myszy.
2. Wybierz opcję Importuj według nazwy.

   

   Wyświetli się okno dialogowe Importuj według nazwy. Wprowadź szczegóły, jak poniżej –

   1. Wybierz opcję Wpisz jako tabelę.
   2. Wprowadź nazwę tabeli, którą chcemy zaimportować. Tutaj importujemy tabelę KNA1.
   3. Kliknij przycisk „Importuj”. Tabela KNA1 pojawi się pod węzłem tabeli źródła danych „ds_ecc”.

   

Metadane tabeli zostaną zaimportowane do magazynu danych ds_ecc jak poniżej –

Krok 3) Skonfiguruj serwer importu

Do tej pory importowaliśmy tabelę do przechowywanych danych „ds_ecc” utworzonych dla ECC SAP Połączenie BODS. Aby zaimportować dane do SAP HANA, musimy skonfigurować serwer importu,

1. Aby to zrobić, przejdź do Szybki podgląd-> Skonfiguruj serwer importu jak poniżej -

   

2. Pojawi się wyskakujące okienko Wybierz system, Wybierz SAP HANA (tutaj HDB) System jak poniżej-

3. Kliknij przycisk „Dalej”. Pojawi się kolejne okno pop-up z danymi uwierzytelniającymi usługi danych, wprowadź następujące dane

1. SAP Adres serwera BODS (tutaj BODS:6400 )
2. Wchodzę SAP Nazwa repozytorium BODS (nazwa repozytorium HANAUSER)
3. Wprowadź źródło danych ODBC (ZTDS_DS).
4. Wprowadź domyślny port dla SAP Serwer BODS (8080).

Kliknij przycisk „Zakończ”.

Krok 4) Zaimportuj metadane do systemu HANA

1. Do tej pory mamy skonfigurowany serwer importu, teraz zaimportujemy metadane SAP Serwer BODS.

1. Kliknij opcję Importuj w Szybkim podglądzie.
2. Wyświetli się okno dialogowe opcji Import. Wybierz opcję „Selektywny import metadanych”.

Kliknij przycisk „Dalej”.

2. Wyświetli się okno dialogowe „Selektywnego importu metadanych”, w którym należy wybrać system docelowy.

1. Wybierz SAP System HANA (tutaj HDB).

Kliknij przycisk „Dalej”.

Krok 5) Utwórz magazyn danych między BODS i HANA

Jak wiemy, w BODS musimy stworzyć oddzielny magazyn danych dla źródła i celu. Stworzyliśmy już magazyn danych dla źródła, teraz musimy utworzyć magazyn danych dla celu (pomiędzy BODS i HANA). Tworzymy więc nowy magazyn danych o nazwie „DS_BODS_HANA”.

1. Przejdź do Projekt -> Nowy -> Datastore.

2. Pojawi się ekran tworzenia nowego magazynu danych, jak poniżej.
   1. Wprowadź nazwę magazynu danych (DS_BODS_HANA).
   2. Wprowadź typ magazynu danych jako Baza danych.
   3. Wprowadź typ bazy danych jako SAP HANA.
   4. Wybierz opcję Wersja bazy danych.
   5. Wchodzę SAP Nazwa serwera bazy danych HANA.
   6. Wprowadź nazwę portu dla SAP Baza danych HANA.
   7. Wprowadź nazwę użytkownika i hasło.
   8. Zaznacz „Włącz automatyczny transfer danych”.

Kliknij „Zastosuj”, a następnie przycisk „OK”.

Magazyn danych „DS_BODS_HANA” zostanie wyświetlony na karcie magazynu danych Biblioteki obiektów lokalnych jako

Poniżej-

3. Teraz importujemy tabelę do magazynu danych „DS_BODS_HANA”.
   1. Wybierz magazyn danych „DS_BODS_HANA” i kliknij prawym przyciskiem myszy.
   2. Wybierz opcję Importuj według nazwy.

4. Pojawi się wyskakujące okienko Importuj według nazwy, jak pokazano poniżej:
   1. Wybierz opcję Typ jako tabela.
   2. Wprowadź nazwę jako KNA1.
   3. Właściciel będzie wyświetlany jako Hanauser.
   4. Kliknij przycisk Importuj.

Tabela zostanie zaimportowana do magazynu danych „DS_BOD_HANA”, aby wyświetlić dane w tabeli, wykonaj poniższe kroki –

1. Kliknij tabelę „KNA1” w magazynie danych „DS_BODS_HANA”.
2. Dane zostaną wyświetlone w formacie TABELARYCZNYM.

Krok 6) Zdefiniuj projekt: Grupuj projekt i organizuj powiązane obiekty. Projekt może zawierać dowolną liczbę zadań, przepływu pracy i przepływu danych.

1. Przejdź do menu Projekt projektanta.
2. Wybierz nową opcję.
3. Wybierz opcję Projekt.

Pojawi się wyskakujące okienko umożliwiające utworzenie nowego projektu, jak poniżej. Wprowadź nazwę projektu i kliknij przycisk Utwórz. W naszym przypadku utworzy folder projektu BODS_DHK.

Krok 7) Zdefiniuj zadanie: Zadanie jest obiektem wielokrotnego użytku. Zawiera przepływy pracy i przepływ danych. Zadania można wykonywać ręcznie lub według harmonogramu. Aby wykonać proces BODS, musimy zdefiniować zadanie.

Tworzymy ofertę pracy jako JOB_Customer.

1. Wybierz projekt (BODS_DHK) utworzony w kroku 1, kliknij prawym przyciskiem myszy i wybierz „Nowe zadanie wsadowe”.

   

2. Zmień jego nazwę na „JOB_Customer”.

Krok 8) Zdefiniuj przepływ pracy:

1. Wybierz zadanie „JOB_Customer” w obszarze projektu,
2. Kliknij przycisk przepływu pracy na palecie narzędzi. Kliknij czarny obszar roboczy. W obszarze roboczym pojawi się ikona przepływu pracy.
3. Zmień nazwę przepływu pracy na „WF_Customer”.

Kliknij nazwę przepływu pracy. W obszarze roboczym pojawi się pusty widok przepływu pracy.

Krok 9) Zdefiniuj przepływ danych:

1. Kliknij przepływ pracy „WF_Customer”.
2. Kliknij przycisk Dataflow na palecie narzędzi. Kliknij czarny obszar roboczy. W obszarze roboczym pojawi się ikona Dataflow.
3. Zmień nazwę przepływu danych na „DF_Customer”.
4. Przepływ danych pojawia się także w obszarze projektu po lewej stronie pod nazwą zadania.

Krok 10) Dodaj obiekt w Dataflow:

Wewnątrz przepływu danych możemy dostarczyć instrukcję przekształcenia danych źródłowych do pożądanej postaci dla tabeli docelowej.

Zobaczymy poniższy obiekt –

• Obiekt dla źródła.
• Obiekt dla tabeli docelowej.
• Obiekt do transformacji zapytania. (Przekształcenie zapytania mapuje kolumny ze źródła do celu.) Kliknij w przepływie danych DF_Customer . Pojawi się pusty obszar roboczy, jak poniżej –

  

1. Określ obiekt ze źródła – Przejdź do magazynu danych „ds_ecc” i wybierz tabelę KNA1, a następnie przeciągnij i upuść na pusty ekran przepływu danych, jak poniżej:
2. Określ obiekt dla Target- Wybierz magazyn danych „DS_BODS_HANA” z repozytorium i wybierz tabelę KNA1.
3. Przeciągnij i upuść do obszaru roboczego i wybierz „Make Target „opcja. Będą dwie tabele dla źródła i celu. Tutaj zdefiniujemy tabelę jako źródło i cel.

4. Transformacja zapytania – Jest to narzędzie służące do pobierania danych w oparciu o schemat wejściowy dla warunków specyficznych dla użytkownika oraz do przesyłania danych ze źródła do celu.
   1. Wybierz ikonę Query Transform z palety narzędzi, a następnie przeciągnij ją i upuść pomiędzy obiektem źródłowym i docelowym w obszarze roboczym, jak poniżej –
   2. Połącz obiekt zapytania ze źródłem.
   3. Połącz obiekt zapytania z Target tabela.

   

   4. Double Kliknij ikonę zapytania. W ten sposób mapujemy kolumnę ze schematu wejściowego na schemat wyjściowy.

Po kliknięciu ikony Zapytanie pojawi się kolejne okno mapowania, w którym wykonujemy następujące kroki –

1. Wybrano tabelę źródłową KNA1.
2. Wybierz całą kolumnę z tabeli źródłowej, kliknij prawym przyciskiem myszy i wybierz mapę do wyświetlenia.
3. Target Dane wyjściowe wybrane jako Zapytanie, a kolumna zostanie zmapowana.

5. Zapisz i zatwierdź projekt.

1. Kliknij ikonę potwierdzenia.

2. Pojawi się wyskakujące okienko z informacją o pomyślnym zakończeniu walidacji.

Krok 11) Wykonaj zadanie – Aby wykonać zadanie, postępuj zgodnie z poniższą ścieżką-

1. Wybierz ikonę obszaru projektu, aby otworzyć projekt i wybierz utworzony projekt.
2. Wybierz Zadanie i kliknij prawym przyciskiem myszy.
3. Wybierz opcję Wykonaj, aby wykonać zadanie.

   

   1. Po wykonaniu zadania wyświetlane jest okno dziennika zadań, w którym wyświetlane są wszystkie komunikaty dotyczące zadania.
   2. Ostatni komunikat będzie brzmieć: Zadanie < > zostało pomyślnie ukończone.

   

   Krok 12) – Zweryfikuj/Sprawdź dane SAP Baza danych HANA.

   1. Zaloguj się do SAP Baza danych HANA poprzez SAP Studio HANAi wybierz schemat HANAUSER.
   2. Wybierz tabelę KNA1 w węźle tabeli.
   3. Kliknij prawym przyciskiem myszy tabelę KNA1 i wybierz opcję Otwórz podgląd danych.
   4. Tabela (KNA1) Dane załadowane przez procesy BODS w powyższy sposób zostaną wyświetlone na ekranie podglądu danych.