問題タブ [azure-data-factory-pipeline]

質問する

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

395 問題
Newest
Active
Bountied
318
Unanswered
0 投票する
1 に答える
32 参照

azure - Azure データ ファクトリでエラー ステートメントを自動生成する代わりに、カスタム エラー ステートメントを作成できますか

システム生成エラー

画像では、パイプラインに失敗した後にシステムが生成したエラーがあることがわかります。しかし、パイプラインの実行後にシステムが生成したエラーの代わりにポップアップするカスタムエラー（エラーのためにユーザーによって変更/編集されたメッセージ）が必要です。

0 投票する
0 に答える
251 参照

azure - XML ファイルの読み込みに時間がかかりすぎる Azure Data Factory のコピー アクティビティ

毎日 Azure ファイル ストレージ パスに着信 XML ファイルがあり、ADF コピー アクティビティを使用してそれらを Azure SQL データベースに読み込んでいます。ソースは XML ファイルを参照する XML データセットであり、シンクはデータベース内のテーブルです。ファイルが約 500 MB の場合、コピー アクティビティは 3 分未満で完了します。しかし、680MB のファイルを試したところ、5 時間近く実行されました。この大幅な時間の増加の背後にある理由を見つけることができません。DIU と並列処理の設定を変更しようとしましたが、役に立ちませんでした。

  • ロード時間が大幅に増加した理由は何ですか?
  • ADF XML コピー アクティビティにはファイル サイズの制限がありますか?
  • Azure関数でロジックを書き直す以外に、処理時間を短縮する方法はありますか?

どんな助けや提案も大歓迎です！ありがとう

0 投票する
1 に答える
1920 参照

azure - JSON の Azure Data Factory ADF スキーマ検証

データセット スキーマを検証する機能を実装しています。ADF では、データフローのマッピング セクションにチェックボックスがあり、列または列の型が参照と一致しない場合に自動的に実行されることを知っています。CSV の場合は問題なく動作しますが、JSON の場合は 2 つのことに気付きました。サンプルファイルからのインポート、インポートプロジェクションなどの両方（データセットとデータフロー）の場所ですべてのオプションを試しました.成功なし

sameDataSetDifferentSchema.png

データセットの最後で、JSON の JSON を編集して、コード部分で手動で変更しました :)

changeSchemaOfDataset.png

2、最後に、スキーマの検証中にまだ失敗している同じスキーマを持った後、問題を解決しません。

ErrorMsg.png

ただし、スクリーンショットが表示されている場合、エラーメッセージ自体に同じタイプが表示されます。

見つかった:ArrayType(StructType(StructField(**Description1**,StringType,true),...etc 必須:ArrayType(StructType(StructField(**Description1**,StringType,true),...etc


12345678910