問題タブ [azure-data-factory]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
azure-data-factory - データセットの特定の実行タイム スライスを一時停止する方法はありますか?
実行中のスライスを一時停止できるかどうか疑問に思っていますか? パイプラインを一時停止できることはわかっていますが、そのパイプラインで実行中のすべてのスライスが一時停止されます。特定のパイプラインの特定のスライスのみを一時停止する方法 (UI またはプログラム) はありますか?
azure-storage - Data Factory を使用してストレージ アカウント テーブルを Data Lake に転送する
Data Factory を使用して、テーブルをストレージ アカウントから Data Lake に転送しようとしています。Microsoft は、「任意のサイズと形式のファイルを Data Lake に保存する」ことができると主張しています。オンライン ウィザードを使用して、パイプラインを作成しようとしています。パイプラインが作成されますが、常に次のエラーが表示されます。
コピー アクティビティでユーザー エラーが発生しました。
Data Factory を使用してストレージ アカウント テーブルから Data Lake にデータを転送できるようにするためにできることはありますか?
ありがとう。
azure-data-factory - Visual Studio Data Factory Project を介した Data Lake のリンクされたサービスの承認
Azure Data Lake のリンクされたサービスを使用している Azure Data Factory Visual Studio プロジェクトがあります。それらを作成するとき、最初にそれらを承認する必要があります。ただし、指定された承認は、特定の期間 (日数) が経過すると期限切れになります。
リンクされたサービスを再承認するオプションが見つかりません。ポータルから別の連携サービスを再認可し、その認可を VS で作成した連携サービスに使用しようとしましたが、うまくいきません。
新たな承認のために、リンクされたサービスを削除して再作成する必要がありました。
この機能が欠落していますか、または VS でデータ レイクのリンクされたサービスの新しい認証を取得する別の方法はありますか?
azure - Azure: 手動で作成されたパイプラインでの待機中のデータセットの依存関係
さまざまな種類のリンクされたサービスとデータセットを使用して、データ ファクトリにいくつかの単純なパイプラインを作成しました。手動で、JSON を書き込むことによって。しかし、どれも機能しません。
ウィザードによって作成されたパイプラインは機能し、準備完了ステータスになります。すべての手動パイプラインのステータスは [待機中: データセットの依存関係] です。それはどういう意味ですか、どうすれば修正できますか?
azure-data-factory - Azure DataFactory パイプラインをバックフィルしてから、実行中のスケジュールに変換する方法は?
Azure SQL テーブルにコピーする必要があるログ データを含む多数の BLOB があり、より多くの BLOB が定期的に到着します。ブロブは、形式で名前が付けられます[ORIGINALTARFILENAME].tar.gz.log
。
データ ファクトリを使用して、タイムアウトせずに最初のバックフィルを実行し、同じパイプラインを変換して、BLOB が 2 回処理されないように定期的なスケジュールで実行するにはどうすればよいでしょうか?
それは本質的にですか:
- 1 回限りのプロセスを作成する
- VSでプロセスを開く
- ある種のスケジュールを含めるように json を修正します
- 変更をデプロイする
azure-data-factory - ADF は「動的な」リンク サーバーを使用する機能を提供しますか?
動的リンク サーバーを作成する方法はありますか? 通常、リンク サーバーを宣言し、固定リソース (コンピューティングまたはストレージ) をポイントします。何らかの形式の変数の値に基づいて、任意のリソースを動的に指すことができるようにしたい場合はどうでしょうか。その値は事前に知る必要はありません。
例を挙げると、N 個の異なる HDInsight クラスターがあり、パイプラインがパラメーターに基づいてそれらのいずれかを指すことができる必要があるとします (ここでは、ADF に何らかのスキームがある限り、どのパラメーターは重要ではありません)。ここでは、リンク サーバーを宣言するときに、変数名を指定するだけです。