tsql - Azure Data Factory でデルタ ロードを設定する

Question

データを取得したいオンプレミスの SQL データベースがあります。データベースには、行が最後に更新されたときに関する情報を含む last_update という列があります。パイプラインを初めて実行するときに、オンプレミスのデータベースから Azure データベースにすべてをコピーしたいと考えています。次回は、前回の実行以降に更新された行のみをコピーします。したがって、last_update が前回の実行時間よりも大きいすべてをコピーしたいと考えています。パイプラインでの最後の実行時間に関する情報を使用する方法はありますか? 私が欲しいものを作成する他の良い方法はありますか?

Answer 1

これは、カスタム コピー アクティビティを開発することで実現できると思います。独自の変換/処理ロジックを追加して、パイプラインでアクティビティを使用できます。