Jak mogę połączyć Azure Data Factory z NDJSON w 5 minut?
Aby podłączyć Azure Data Factory do NDJSON, wykonaj poniższe czynności. Wystarczy znajomość Azure Data Factory oraz swojej własnej działalności.
NDJSON to format pliku oparty na języku JavaScript. Plik NDJSON składa się z jednego rekordu w formacie JSON w każdym wierszu. Nie stosuje się grupowania w postaci tablic ani separatorów rekordów.
Aby połączyć NDJSON z Azure Data Factory, nie jest wymagana żadna wiedza techniczna ani znajomość interfejsów API NDJSON. Ten plan krok po kroku dokładnie wyjaśni, jakie czynności należy wykonać w platformie Invantive Cloud, aby utworzyć własną hurtownię danych w Azure z danymi pochodzącymi z NDJSON.
Oto kroki, które należy wykonać, aby podłączyć Azure Data Factory do NDJSON:
- Załóż konto w Invantive Cloud.
- Utwórz bazę danych NDJSON.
- Udostępnij bazę danych NDJSON za pośrednictwem łącznika Microsoft OData.
- Podłącz Azure Data Factory do NDJSON za pomocą złącza.
- Załaduj dane z NDJSON do hurtowni danych Azure Data Factory.
Invantive Cloud oferuje NDJSON łącznik umożliwiający pobieranie danych z NDJSON do Azure Data Factory, ale dostępnych jest również ponad 110 innych łączników przeznaczonych m.in. dla SQL, Power BI Desktop, Power BI Service, Power Query i/lub Azure Data Factory.
Czy dysponujesz rozbudowanym środowiskiem? Aby zapewnić sprawne pobieranie danych, możesz oczywiście filtrować je za pomocą etapu filtrowania lub przycisku „Przekształć” w Azure Data Factory.
Gdy masz pytania, sprawdź fora dla NDJSON.
Załóż konto w Invantive Cloud
Pomiń ten krok, jeśli masz już konto w Invantive Cloud. W przeciwnym razie wykonaj poniższe czynności jednorazowo, aby zarejestrować konto w Invantive Cloud:
-
Przejdź do strony początkowej Invantive Cloud.
Kliknij przycisk „Zaloguj się”.
-
Kliknij przycisk „Dalej”.
-
Kliknij przycisk „Dalej”.
Wprowadź hasło i powtórz podane hasło.
W ciągu 2 minut otrzymasz e-mailem sześciocyfrowy kod weryfikacyjny.
-
Kliknij przycisk „Zarejestruj się”.
-
Zaloguj się teraz. >
-
Upewnij się, że masz zainstalowaną w telefonie aplikację do uwierzytelniania. Kliknij przycisk „Dalej”.
-
Dodaj wyświetlony kod QR do aplikacji uwierzytelniającej, wprowadź aktualny kod weryfikacyjny i wybierz opcję „Zakończ”.
-
Zostanie wyświetlony panel sterowania Invantive Cloud.
Masz teraz kod logowania w Invantive Cloud, za pomocą którego możesz skonfigurować połączenie z NDJSON oraz wieloma innymi platformami. Ten sam kod logowania do Invantive oraz ten sam proces konfiguracji będziesz wykorzystywać dla wszystkich pozostałych platform.
Utwórz bazę danych NDJSON
W tym kroku konfigurujemy bazę danych zawierającą dane z NDJSON. Baza ta jest „wirtualna”, ponieważ nie jest to tradycyjna baza danych, lecz jest zasilana w czasie rzeczywistym z NDJSON. Invantive Cloud zapewnia Azure Data Factory połączenie w czasie rzeczywistym z NDJSON. Baza danych będzie wykorzystywana do wszystkich raportów dotyczących NDJSON tworzonych w Azure Data Factory. Wystarczy więc wykonać te czynności tylko raz.
-
Kliknij przycisk Dodaj bazę danych.
-
Proszę wypełnić formularz, podając dane logowania dla NDJSON.
Kliknij przycisk „OK”.
Gratulacje! Teraz możesz przetwarzać dane z NDJSON na stronie internetowej Invantive Cloud. Możesz to zrobić na przykład za pomocą interaktywnego edytora SQL.
Przyznaj uprawnienia Azure Data Factory do dostępu do NDJSON
Aby pobrać dane z Azure Data Factory, tworzymy połączenie za pośrednictwem Invantive Bridge Online. Powstaje w ten sposób „most” między chmurą Invantive a standardowym łącznikiem OData, który jest dostępny we wszystkich wersjach Azure Data Factory. Nie musisz instalować niczego lokalnie: ani łącznika, ani dostawcy ADO.NET, ani dodatku do Azure Data Factory.
Aby bezpiecznie korzystać z danych z NDJSON poza platformą Invantive Cloud, wykonaj następujące czynności:
Obok bazy danych znajduje się pomarańczowy tekst z prośbą o zezwolenie na dostęp z bieżącej lokalizacji (adresu IP). Wybierz pomarańczowy przycisk znajdujący się obok.
Należy całkowicie wyłączyć sprawdzanie adresu IP, wpisując gwiazdkę („*”), ponieważ Microsoft Azure Data Factory składa się z setek tysięcy serwerów na całym świecie.
Teraz możesz zaimportować dane NDJSON do Azure Data Factory.
Skonfiguruj złącze Azure Data Factory dla NDJSON
Teraz pobierzesz dane Azure Data Factory z NDJSON za pośrednictwem utworzonego połączenia.
Prosimy ponownie pamiętać, że Invantive Cloud zajmuje się za kulisami wszystkimi skomplikowanymi zadaniami, takimi jak konfiguracja danych uwierzytelniających (np. Refresh Token), uzyskiwanie Access Token, optymalizacja i równoległa obsługa dostępu oraz korzystanie z API z uwzględnieniem limitów częstotliwości, zakresów i ograniczeń bezpieczeństwa. Nie ma absolutnie żadnej potrzeby posiadania wiedzy na temat skomplikowanych zagadnień technicznych, takich jak Access Token OAuth czy API. Etapy, działania i potoki w usłudze Azure Data Factory można tworzyć, korzystając wyłącznie z źródła danych OData i uwierzytelniania podstawowego.
Wykonaj następujące czynności:
-
Uruchom program Microsoft Azure Data Factory i wybierz opcję „Ingest”.
-
Wybierz typ źródła „OData”, a następnie opcję „Nowe połączenie”.
-
W oknie tym wprowadź adres URL serwisu Bridge Online dla bazy danych Azure Data Factory. Ten adres URL zawierający dane można znaleźć w formularzu „Baza danych” w Invantive Cloud. Wybierz typ uwierzytelniania „Uwierzytelnianie podstawowe”. Wprowadź nazwę użytkownika i hasło do Invantive Cloud.
-
Pojawi się lista dostępnych tabel NDJSON. Wybierz żądane tabele i utwórz potok w usłudze Azure Data Factory.