azure-data-lake - ローカル U-SQL テーブルと ADLA のパフォーマンスの違いは?

Question

ADLA からテーブルを作成して使用する場合と比較して、ローカル U-SQL テーブルへの挿入/クエリは非常に高速です。並列処理を使用せずに約 8 分で CSV から 3 つのテーブルにデータをローカルに挿入することができ、並列処理が 10 の ADLA で同じジョブに約 10 分かかりました (並列処理ジョブを設定しないと、はるかに長い時間がかかりました)。同じパフォーマンスを実現できますか?

Answer 1

テーブルの定義とデータのサイズは? 具体的には、クラスタリングと細かいグレードの分割分布をどのように指定しましたか?

また、スケールアウト計画を作成する必要がないため、ローカル ジョブのコンパイル時間はクラスター内よりも大幅に短縮できます。