Peut-on obtenir le contenu complet d'un fichier JSON dans un stockage blob dans une variable ADF ? Si oui, comment ?

Question

Dans ADF, j'essaie d'obtenir le contenu prêt à l'emploi d'une requête pour une API GraphQL (bloc d'activité Web) stocké dans un JSON quelque part dans le blob. Pour des raisons de rapidité, nous ne pouvons pas nous permettre de faire tourner Databricks à chaque fois.

Que peut-on faire pour que le contenu Dans le cas d'un fichier JSON, il n'est pas possible de stocker les métadonnées d'un fichier JSON dans une variable ADF qui paramétrerait d'autres blocs de pipeline (le chemin vers le fichier est connu, fixe, et le fichier est accessible via un service lié) ?

Answer 1

J'opterais pour la création d'une base de données Azure SQL avec des méta-données (coût de base de seulement 5 usd par mois). Elle peut être connectée via un lien privé avec Azure Data Factory. C'est la méthode la plus simple et la plus rapide. Il suffit d'y enregistrer les données et de remplir plus tard les paramètres du flux de données etc. avec les résultats de cette base de données.