¿Cómo conecto Azure Data Factory con OpenSpending?

Ejecute los siguientes pasos para conectar Azure Data Factory a OpenSpending. Sólo necesitas conocimientos de Azure Data Factory y de tu propio negocio.

OpenSpending es un servicio web en línea sobre el presupuesto y el gasto de los gobiernos de los Países Bajos. Incluye datos de diversas fuentes, como el IV3 de la CBS.

No se necesitan conocimientos técnicos ni conocimientos sobre las API OpenSpending para conectar OpenSpending a Azure Data Factory. Este plan paso a paso le indicará exactamente qué pasos debe seguir en Invantive Cloud para crear su propio almacén de datos de Azure con datos de OpenSpending.

Los pasos para conectar Azure Data Factory con OpenSpending son:

  1. Registrar una cuenta de Invantive Cloud.
  2. Crear una base de datos OpenSpending.
  3. Haga que la base de datos OpenSpending esté disponible a través del conector OData de Microsoft.
  4. Conecte Azure Data Factory a OpenSpending a través del conector.
  5. Cargar los datos de OpenSpending en el almacén de datos de Azure Data Factory.

Invantive Cloud offers a OpenSpending connector to download data from OpenSpending into Azure Data Factory, but there are over 75 other connectors available also for SQL, Power BI, Power Query or Azure Data Factory.

¿Tiene un entorno amplio? Para que las descargas sean efectivas, por supuesto también puede filtrar los datos utilizando el paso de filtro o el botón de transformación en Azure Data Factory.

Cuando tengas dudas, por favor consulta los foros de OpenSpending. Cada organización tiene derecho a 1 hora de capacitación gratuita para ayudarlo a comenzar. Esta hora gratuita también se aplica a los planes gratuitos.

Registrar Cuenta en Invantive Cloud

Omita este paso si ya tiene una cuenta en Invantive Cloud. De lo contrario, ejecute los siguientes pasos una vez para registrar una cuenta en Invantive Cloud:

  1. Ve a la página de inicio de Invantive Cloud.

  2. Seleccione el botón Iniciar Sesión.

  3. Selecciona el botón Registrarse. Regístrese en Invantive Cloud.

  4. Introduzca la dirección de correo electrónico de su empresa. Introduzca la dirección de correo electrónico de la empresa.

  5. Seleccione el botón Siguiente.

  6. Introduzca sus datos personales. Introduzca los datos personales.

  7. Seleccione el botón Siguiente.

  8. Introduzca su contraseña y repita la contraseña proporcionada.

  9. Seleccione el botón Siguiente. Introduzca dos contraseñas idénticas.

  10. Recibirás un código de verificación de seis dígitos por correo electrónico en 2 minutos.

  11. Introduzca el código de verificación de seis dígitos. Código de verificación de seis dígitos para validar la dirección de correo electrónico.

  12. Selecciona el botón Registrarse.

  13. Inicie sesión ahora. Registrarse

  14. Asegúrese de tener una aplicación de autenticación instalada en su teléfono. Seleccione el botón Siguiente. Prepare la configuración TOTP.

  15. Añada el código QR mostrado a la aplicación de autenticación, introduzca el código de verificación actual y seleccione "Finalizar". Escanee el código QR en la aplicación TOTP e introduzca el código actual.

  16. Omitir el registro de la organización. Omitir el registro de la empresa.

  17. Complete sus datos personales y elija 'Guardar'. Datos personales completos.

  18. Ir al panel de control. Navegue hasta el panel de control.

  19. Se mostrará el panel de control de Invantive Cloud.

Ahora tiene un código de inicio de sesión en Invantive Cloud con el que puede establecer la conexión con OpenSpending y otras numerosas plataformas. Utilizará el mismo código de inicio de sesión de Invantive y el mismo flujo de trabajo para todas las demás plataformas.

Crear una base de datos OpenSpending

En este paso, configuramos una base de datos con datos de OpenSpending. La base de datos es "virtual" porque no es una base de datos tradicional, sino que se alimenta en tiempo real desde OpenSpending. Invantive Cloud proporciona Azure Data Factory con un enlace en tiempo real a OpenSpending. La base de datos se utilizará para todos los informes de OpenSpending con Azure Data Factory. Por lo tanto, solo necesita realizar estos pasos una vez.

  1. Haga clic en el botón Agregar base de Datos. Añadir Base de Datos

  2. Seleccione OpenSpending de la lista. Seleccione el conector OpenSpending.

  3. Por favor rellene el formulario con la información de acceso para OpenSpending.

  4. Seleccione el botón OK.

¡Felicidades! Ahora puedes procesar datos de OpenSpending en el sitio web de Invantive Cloud. Puede hacerlo, por ejemplo, con el editor SQL interactivo.

Conceder conexión desde Azure Data Factory acceso a OpenSpending

Para recuperar los datos de Azure Data Factory creamos un enlace a través de Invantive Bridge Online. Esto crea un "puente" entre la nube de Invantive y el conector OData estándar que está disponible en cada versión de Azure Data Factory. No es necesario instalar nada localmente: ni el conector, ni el proveedor ado.NET ni el complemento de Azure Data Factory.

Ejecute los siguientes pasos para usar de forma segura los datos de OpenSpending fuera de Invantive Cloud:

  1. Junto a la base de datos encontrará un texto naranja solicitando que permita el acceso desde su ubicación actual (dirección IP). Seleccione el botón naranja cercano.

  2. Debe deshabilitar por completo la verificación de direcciones IP ingresando un asterisco ("*") ya que Microsoft Azure Data Factory se compone de cientos de miles de servidores en todo el mundo.

Ahora está listo para importar los datos de OpenSpending a Azure Data Factory.

Configurar el conector Azure Data Factory para OpenSpending

Ahora se extraerán los datos de Azure Data Factory desde OpenSpending a través del enlace establecido.

Por favor tenga en cuenta de nuevo que Invantive Cloud maneja toda la complejidad como la configuración de credenciales como un token de actualización, la adquisición de un token de acceso, la optimización y paralelización del acceso, el acceso a una API dentro de los límites de la tasa, los alcances y las restricciones de seguridad. No es necesario tener conocimientos sobre temas técnicos complejos como los tokens de acceso OAuth o la API. Los pasos, las actividades y los pipelines de Microsoft Azure Data Factory pueden construirse utilizando únicamente el feed OData y la autenticación básica.

Ejecute los siguientes pasos:

  1. Inicie Microsoft Azure Data Factory y seleccione 'Ingerir'. Copiar OpenSpending datos utilizando la actividad 'Ingest' de Microsoft Azure Data Factory

  2. Seleccione 'Tarea de copia incorporada'. Copia incorporada usando OpenSpending como fuente

  3. Seleccione el tipo de fuente 'OData' y seleccione 'Nueva conexión'. Conexión OData para OpenSpending a Microsoft Azure Data Factory

  4. Introduzca en la ventana la URL de Bridge Online de la base de datos Azure Data Factory. Esta URL que contiene los datos se puede encontrar en el Formulario de la Base de Datos de Invantive Cloud. Elija tipo de autenticación 'Basic authentication'. Introduzca el nombre de usuario y la contraseña de Invantive Cloud. URL de OData para OpenSpending con credenciales de inicio de sesión

  5. Aparecerá la lista de Azure Data Factory tablas disponibles. Seleccione las tablas deseadas y construya la canalización en Microsoft Azure Data Factory. Seleccione OpenSpending tablas y procéselas en Microsoft Azure Data Factory