api - Azure Data Factory を使用して REST API からデータを取得する

Question

Azure Data Factory を使用して REST API からデータを取得し、それを Azure データベース テーブルに挿入することはできますか?

Answer 1

カスタム .Net アクティビティを使用してこれを行いました。Salesforce API からデータを取得する必要がありました。ここでこれを行う方法について書いています: http://eatcodelive.com/2016/02/06/accessing-azure-data-lake-store-from-an-azure-data-factory-custom-net-アクティビティ/データ レイク ストアを利用していますが、データはどこにでも保存できます。

マイクロソフトの例については、こちらもご覧ください: https://azure.microsoft.com/en-us/documentation/articles/data-factory-use-custom-activities/

それが役立つことを願っています。

Answer 2

これは、Data Factory を使用して実現できます。Data Factory は、バッチをスケジュールに従って実行し、監視と管理を 1 か所で行う場合に便利です。https://github.com/Azure/Azure-DataFactoryにブロブする http ローダーのサンプル コードが、GitHub リポジトリにあります。その後、テーブルに配置するなど、他の処理のために BLOB を使用できます。これを行うには、カスタム ローダーを含むパイプラインを作成し、入力データセットとして BLOB を、出力データセットとしてテーブルを使用するアクティビティを作成します。

Answer 3

https://github.com/Azure/Azure-DataFactory/tree/master/Samples/HttpDataDownloaderSample

こんにちは、これは http 要求によってファイルをダウンロードするカスタム データ アクティビティです。小さな変化を加えることで、あなたが望むものを達成することができます。それが役に立てば幸い。