問題タブ [azure-data-flow]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
azure - Azure Data Factory で一意のレコードを分離する動的データ フロー
Parquet ファイルを動的に読み取り、一意のレコードを抽出する必要があります。各ファイルには、1 つ以上のキー列を含めることができます。
IDファイルに 1 つのキー列があると仮定して、パラメーター を使用して以下のデータ フローを設計しました。
集計変換では、
ID列ごと にグループ化してい
ます また、他のすべての列をパススルーできるようにします
注: 列がAddressID ではなくとして読み取られていることを確認してください
IDselect の次のステップで、この ID の名前を AddressID (パラメーター値を使用) に変更しようとしています。
このような出力ショー
ハードコードされた値 (アドレス ID) として名前に値を指定しようとしましたが、機能します。
この ID の名前を AddressId (キー列名のパラメータ値) で動的に変更する方法について、私を助けることができますか?
また、上記のシナリオは、キー列が 1 つある場合に発生する可能性があります。Azure Data Factory を使用して、複数のキー列があるシナリオを処理し、動的に処理することはできますか?
これに応じて、adf を使用するか、ADB を使用します。
データ フロー コード:
DataFlow スクリプト
csv - Azure データ ファクトリのデータ フローがサイレントに日付列を NULL にする
Azure Data Factory を使用して、CSV を Azure SQL テーブルにアップサートしようとしています。結果を確認するまで、すべてが順調に見えました。列の 1 つは、NULL 可能な日付です。CSV には so のような値が含まれています1/2/2020 12:00:00 AM。データ フローNULLは、入力が気に入らなかったため、エラーをスローする代わりに、暗黙的に a を挿入します。では、データ フローで文字列を適切に日時に変換し、今後このような問題でエラーを発生させるにはどうすればよいでしょうか? サイレント障害や不良データは本当に望んでいません。
azure-data-factory - ADF Dataflow - 列名のスペースをアンダースコアに置き換えます
アンダースコアでスペースを削除するには、選択変換で replace($$,' ','_') 式を使用しています
列「Period Key」で機能し、「Period_Key」にしますが、別の列「Week in Month Description」では「Week_in Month Description」にします。したがって、最初に出現したものだけを置き換えています
誰かがこれを試すことができますか？または、これの正規表現をどのように書くことができますか?
