Jak mogę połączyć Azure Data Factory z Wikipedia w 5 minut?

Aby podłączyć Azure Data Factory do Wikipedia, wykonaj poniższe czynności. Wystarczy znajomość Azure Data Factory, własnej działalności oraz administracji Wikipedia.

Wikipedia to internetowa platforma służąca do gromadzenia wiedzy encyklopedycznej. Wikipedia zajmuje się zarówno gromadzeniem, udostępnianiem, jak i aktualizowaniem ogromnych zasobów wiedzy encyklopedycznej w wielu różnych językach.

Aby połączyć Wikipedia z Azure Data Factory, nie jest wymagana żadna wiedza techniczna ani znajomość interfejsów API Wikipedia. Ten plan krok po kroku dokładnie wyjaśni, jakie czynności należy wykonać w platformie Invantive Cloud, aby utworzyć własną hurtownię danych w Azure z danymi pochodzącymi z Wikipedia.

Oto kroki, które należy wykonać, aby podłączyć Azure Data Factory do Wikipedia:

1. Załóż konto w Invantive Cloud.
2. Utwórz bazę danych Wikipedia.
3. Udostępnij bazę danych Wikipedia za pośrednictwem łącznika Microsoft OData.
4. Podłącz Azure Data Factory do Wikipedia za pomocą złącza.
5. Załaduj dane z Wikipedia do hurtowni danych Azure Data Factory.

Invantive Cloud oferuje Wikipedia łącznik umożliwiający pobieranie danych z Wikipedia do Azure Data Factory, ale dostępnych jest również ponad 110 innych łączników przeznaczonych m.in. dla SQL, Power BI Desktop, Power BI Service, Power Query i/lub Azure Data Factory.

Za pomocą złącza Wikipedia dla Azure Data Factory domyślnie pobierzesz dane ze wszystkich połączonych firm Wikipedia z pulpitu nawigacyjnego. Możesz ograniczyć liczbę Wikipedia firm, które są pobierane w Azure Data Factory poprzez ustawienia bazy danych. Możesz na przykład ograniczyć łącznik dla Azure Data Factory do danych z dokładnie jednej firmy Wikipedia. Oczywiście można też filtrować dane po konkretnej firmie Wikipedia używając kroku filtrującego w Azure Data Factory. Konektor Wikipedia dla Azure Data Factory posiada zaawansowane optymalizacje zapewniające świetną wydajność w czasie rzeczywistym zarówno z pojedynczą firmą Wikipedia, jak i z setkami firm Wikipedia.

Gdy masz pytania, sprawdź fora dla Wikipedia. Każda organizacja ma prawo do 1 godziny bezpłatnego szkolenia, które pomoże jej rozpocząć korzystanie z serwisu. Ta bezpłatna godzina dotyczy również planów bezpłatnych.

Załóż konto w Invantive Cloud

Pomiń ten krok, jeśli masz już konto w Invantive Cloud. W przeciwnym razie wykonaj poniższe czynności jednorazowo, aby zarejestrować konto w Invantive Cloud:

1. Przejdź do strony początkowej Invantive Cloud.

2. Kliknij przycisk „Zaloguj się”.

3. Kliknij przycisk „Zarejestruj się”.

4. Wprowadź swój służbowy adres e-mail.

5. Kliknij przycisk „Dalej”.

6. Wprowadź swoje dane osobowe.

7. Kliknij przycisk „Dalej”.

8. Wprowadź hasło i powtórz podane hasło.

9. Kliknij przycisk „Dalej”.

10. W ciągu 2 minut otrzymasz e-mailem sześciocyfrowy kod weryfikacyjny.

11. Wprowadź sześciocyfrowy kod weryfikacyjny.

12. Kliknij przycisk „Zarejestruj się”.

13. Zaloguj się teraz. >

14. Upewnij się, że masz zainstalowaną w telefonie aplikację do uwierzytelniania. Kliknij przycisk „Dalej”.

15. Dodaj wyświetlony kod QR do aplikacji uwierzytelniającej, wprowadź aktualny kod weryfikacyjny i wybierz opcję „Zakończ”.

16. Pomiń rejestrację organizacji.

17. Wprowadź swoje dane osobowe i wybierz opcję „Zapisz”.

18. Przejdź do pulpitu nawigacyjnego.

19. Zostanie wyświetlony panel sterowania Invantive Cloud.

Masz teraz kod logowania w Invantive Cloud, za pomocą którego możesz skonfigurować połączenie z Wikipedia oraz wieloma innymi platformami. Ten sam kod logowania do Invantive oraz ten sam proces konfiguracji będziesz wykorzystywać dla wszystkich pozostałych platform.

Utwórz bazę danych Wikipedia

W tym kroku konfigurujemy bazę danych zawierającą dane z Wikipedia. Baza ta jest „wirtualna”, ponieważ nie jest to tradycyjna baza danych, lecz jest zasilana w czasie rzeczywistym z Wikipedia. Invantive Cloud zapewnia Azure Data Factory połączenie w czasie rzeczywistym z Wikipedia. Baza danych będzie wykorzystywana do wszystkich raportów dotyczących Wikipedia tworzonych w Azure Data Factory. Wystarczy więc wykonać te czynności tylko raz.

1. Kliknij przycisk Dodaj bazę danych.

2. Wybierz Wikipedia z listy.

3. Proszę wypełnić formularz, podając dane logowania dla Wikipedia.

4. Kliknij przycisk „OK”.

Gratulacje! Teraz możesz przetwarzać dane z Wikipedia na stronie internetowej Invantive Cloud. Możesz to zrobić na przykład za pomocą interaktywnego edytora SQL.

Przyznaj uprawnienia Azure Data Factory do dostępu do Wikipedia

Aby pobrać dane z Azure Data Factory, tworzymy połączenie za pośrednictwem Invantive Bridge Online. Powstaje w ten sposób „most” między chmurą Invantive a standardowym łącznikiem OData, który jest dostępny we wszystkich wersjach Azure Data Factory. Nie musisz instalować niczego lokalnie: ani łącznika, ani dostawcy ADO.NET, ani dodatku do Azure Data Factory.

Aby bezpiecznie korzystać z danych z Wikipedia poza platformą Invantive Cloud, wykonaj następujące czynności:

1. Obok bazy danych znajduje się pomarańczowy tekst z prośbą o zezwolenie na dostęp z bieżącej lokalizacji (adresu IP). Wybierz pomarańczowy przycisk znajdujący się obok.

2. Należy całkowicie wyłączyć sprawdzanie adresu IP, wpisując gwiazdkę („*”), ponieważ Microsoft Azure Data Factory składa się z setek tysięcy serwerów na całym świecie.

Teraz możesz zaimportować dane Wikipedia do Azure Data Factory.

Skonfiguruj złącze Azure Data Factory dla Wikipedia

Teraz pobierzesz dane Azure Data Factory z Wikipedia za pośrednictwem utworzonego połączenia.

Prosimy ponownie pamiętać, że Invantive Cloud zajmuje się za kulisami wszystkimi skomplikowanymi zadaniami, takimi jak konfiguracja danych uwierzytelniających (np. Refresh Token), uzyskiwanie Access Token, optymalizacja i równoległa obsługa dostępu oraz korzystanie z API z uwzględnieniem limitów częstotliwości, zakresów i ograniczeń bezpieczeństwa. Nie ma absolutnie żadnej potrzeby posiadania wiedzy na temat skomplikowanych zagadnień technicznych, takich jak Access Token OAuth czy API. Etapy, działania i potoki w usłudze Azure Data Factory można tworzyć, korzystając wyłącznie z źródła danych OData i uwierzytelniania podstawowego.

Wykonaj następujące czynności:

1. Uruchom program Microsoft Azure Data Factory i wybierz opcję „Ingest”.

2. Wybierz opcję „Wbudowane zadanie kopiowania”.

3. Wybierz typ źródła „OData”, a następnie opcję „Nowe połączenie”.

4. W oknie tym wprowadź adres URL serwisu Bridge Online dla bazy danych Azure Data Factory. Ten adres URL zawierający dane można znaleźć w formularzu „Baza danych” w Invantive Cloud. Wybierz typ uwierzytelniania „Uwierzytelnianie podstawowe”. Wprowadź nazwę użytkownika i hasło do Invantive Cloud.

5. Pojawi się lista dostępnych tabel Wikipedia. Wybierz żądane tabele i utwórz potok w usłudze Azure Data Factory.