Jak mogę połączyć Azure Data Factory z GitLab w 5 minut?

Aby podłączyć Azure Data Factory do GitLab, wykonaj poniższe czynności. Wystarczy znajomość Azure Data Factory oraz swojej własnej działalności.

GitLab to internetowe oprogramowanie do zarządzania oprogramowaniem. GitLab wykorzystuje system GIT do zarządzania wersjami, śledzenia zgłoszeń oraz automatycznego tworzenia kompilacji.

Aby połączyć GitLab z Azure Data Factory, nie jest wymagana żadna wiedza techniczna ani znajomość interfejsów API GitLab. Ten plan krok po kroku dokładnie wyjaśni, jakie czynności należy wykonać w platformie Invantive Cloud, aby utworzyć własną hurtownię danych w Azure z danymi pochodzącymi z GitLab.

Oto kroki, które należy wykonać, aby podłączyć Azure Data Factory do GitLab:

Załóż konto w Invantive Cloud.
Utwórz bazę danych GitLab.
Udostępnij bazę danych GitLab za pośrednictwem łącznika Microsoft OData.
Podłącz Azure Data Factory do GitLab za pomocą złącza.
Załaduj dane z GitLab do hurtowni danych Azure Data Factory.

Invantive Cloud oferuje GitLab łącznik umożliwiający pobieranie danych z GitLab do Azure Data Factory, ale dostępnych jest również ponad 110 innych łączników przeznaczonych m.in. dla SQL, Power BI Desktop, Power BI Service, Power Query i/lub Azure Data Factory.

Czy dysponujesz rozbudowanym środowiskiem? Aby zapewnić sprawne pobieranie danych, możesz oczywiście filtrować je za pomocą etapu filtrowania lub przycisku „Przekształć” w Azure Data Factory.

Gdy masz pytania, sprawdź fora dla GitLab. Każda organizacja ma prawo do 1 godziny bezpłatnego szkolenia, które pomoże jej rozpocząć korzystanie z serwisu. Ta bezpłatna godzina dotyczy również planów bezpłatnych.

Załóż konto w Invantive Cloud

Pomiń ten krok, jeśli masz już konto w Invantive Cloud. W przeciwnym razie wykonaj poniższe czynności jednorazowo, aby zarejestrować konto w Invantive Cloud:

Przejdź do strony początkowej Invantive Cloud.
Kliknij przycisk „Zaloguj się”.
Kliknij przycisk „Zarejestruj się”.
Wprowadź swój służbowy adres e-mail.
Kliknij przycisk „Dalej”.
Wprowadź swoje dane osobowe.
Kliknij przycisk „Dalej”.
Wprowadź hasło i powtórz podane hasło.
Kliknij przycisk „Dalej”.
W ciągu 2 minut otrzymasz e-mailem sześciocyfrowy kod weryfikacyjny.
Wprowadź sześciocyfrowy kod weryfikacyjny.
Kliknij przycisk „Zarejestruj się”.
Zaloguj się teraz. >
Upewnij się, że masz zainstalowaną w telefonie aplikację do uwierzytelniania. Kliknij przycisk „Dalej”.
Dodaj wyświetlony kod QR do aplikacji uwierzytelniającej, wprowadź aktualny kod weryfikacyjny i wybierz opcję „Zakończ”.
Pomiń rejestrację organizacji.
Wprowadź swoje dane osobowe i wybierz opcję „Zapisz”.
Przejdź do pulpitu nawigacyjnego.
Zostanie wyświetlony panel sterowania Invantive Cloud.

Masz teraz kod logowania w Invantive Cloud, za pomocą którego możesz skonfigurować połączenie z GitLab oraz wieloma innymi platformami. Ten sam kod logowania do Invantive oraz ten sam proces konfiguracji będziesz wykorzystywać dla wszystkich pozostałych platform.

Utwórz bazę danych GitLab

W tym kroku konfigurujemy bazę danych zawierającą dane z GitLab. Baza ta jest „wirtualna”, ponieważ nie jest to tradycyjna baza danych, lecz jest zasilana w czasie rzeczywistym z GitLab. Invantive Cloud zapewnia Azure Data Factory połączenie w czasie rzeczywistym z GitLab. Baza danych będzie wykorzystywana do wszystkich raportów dotyczących GitLab tworzonych w Azure Data Factory. Wystarczy więc wykonać te czynności tylko raz.

Kliknij przycisk Dodaj bazę danych.
Wybierz GitLab z listy.
Proszę wypełnić formularz, podając dane logowania dla GitLab.
Kliknij przycisk „OK”.

Gratulacje! Teraz możesz przetwarzać dane z GitLab na stronie internetowej Invantive Cloud. Możesz to zrobić na przykład za pomocą interaktywnego edytora SQL.

Przyznaj uprawnienia Azure Data Factory do dostępu do GitLab

Aby pobrać dane z Azure Data Factory, tworzymy połączenie za pośrednictwem Invantive Bridge Online. Powstaje w ten sposób „most” między chmurą Invantive a standardowym łącznikiem OData, który jest dostępny we wszystkich wersjach Azure Data Factory. Nie musisz instalować niczego lokalnie: ani łącznika, ani dostawcy ADO.NET, ani dodatku do Azure Data Factory.

Aby bezpiecznie korzystać z danych z GitLab poza platformą Invantive Cloud, wykonaj następujące czynności:

Obok bazy danych znajduje się pomarańczowy tekst z prośbą o zezwolenie na dostęp z bieżącej lokalizacji (adresu IP). Wybierz pomarańczowy przycisk znajdujący się obok.
Należy całkowicie wyłączyć sprawdzanie adresu IP, wpisując gwiazdkę („*”), ponieważ Microsoft Azure Data Factory składa się z setek tysięcy serwerów na całym świecie.

Teraz możesz zaimportować dane GitLab do Azure Data Factory.

Skonfiguruj złącze Azure Data Factory dla GitLab

Teraz pobierzesz dane Azure Data Factory z GitLab za pośrednictwem utworzonego połączenia.

Prosimy ponownie pamiętać, że Invantive Cloud zajmuje się za kulisami wszystkimi skomplikowanymi zadaniami, takimi jak konfiguracja danych uwierzytelniających (np. Refresh Token), uzyskiwanie Access Token, optymalizacja i równoległa obsługa dostępu oraz korzystanie z API z uwzględnieniem limitów częstotliwości, zakresów i ograniczeń bezpieczeństwa. Nie ma absolutnie żadnej potrzeby posiadania wiedzy na temat skomplikowanych zagadnień technicznych, takich jak Access Token OAuth czy API. Etapy, działania i potoki w usłudze Azure Data Factory można tworzyć, korzystając wyłącznie z źródła danych OData i uwierzytelniania podstawowego.

Wykonaj następujące czynności:

Uruchom program Microsoft Azure Data Factory i wybierz opcję „Ingest”.
Wybierz opcję „Wbudowane zadanie kopiowania”.
Wybierz typ źródła „OData”, a następnie opcję „Nowe połączenie”.
W oknie tym wprowadź adres URL serwisu Bridge Online dla bazy danych Azure Data Factory. Ten adres URL zawierający dane można znaleźć w formularzu „Baza danych” w Invantive Cloud. Wybierz typ uwierzytelniania „Uwierzytelnianie podstawowe”. Wprowadź nazwę użytkownika i hasło do Invantive Cloud.
Pojawi się lista dostępnych tabel GitLab. Wybierz żądane tabele i utwórz potok w usłudze Azure Data Factory.