問題タブ [azure-data-lake-gen2]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
scala - Spark 2.4 を使用した Azure Data Lake Storage V2 からのファイルの読み取り
Mac 上の IntelliJ-IDE で、Spark 2.4 を使用して単純な csv ファイル Azure Data Lake Storage V2 を読み込もうとしています。
以下のコード
読み取り可能で、セキュリティ例外をスローします
誰が私を助けることができますか、間違いは何ですか?
powershell - テーブル データをインポートし、databricks を使用して adls gen2 で json ドキュメントとして保存する
以下のコードを使用して、SQL サーバー テーブルから json 結果セットを生成しています。
パワーシェル：
Azure Databricks を使用して Azure Data Lake Storage Gen2 に json ドキュメントを保存する方法を教えてください。
azure-data-factory - データのコピー 'ストレージ接続' により、ADLS Gen2 の代わりに ADF で BLOB ストレージを使用することが強制されます
ADLS Gen2 からの入力を使用するデータ ファクトリがあります (当社ではこれのみが準拠しています)。それは正常に動作します。以下の図は、「データのコピー」アクティビティの設定です。ログ (欠落した行データ) を保存するための図に示されているように、ブロブ ストレージまたは第 1 世代のデータレイクを使用する必要があります。これにはどのように ADLS Gen2 を使用できますか? ボトルネックのように見えます。そのようなデータが Gen2 の外に保存されている場合、自己満足の問題が発生します。
mongodb - Data Factory パイプラインがさまざまなエラーで失敗しました
MongoDB をソースとして、Delta Lake Storage Gen2 を使用して Azure Data Factory をセットアップしました。(ソースおよびターゲット宛先への) すべての接続が正常にチェックされました。しかし、パイプラインの実行は次のエラーで失敗しました:
*ADLS Gen2 操作が失敗しました: 操作が無効なステータス コード 'Forbidden' を返しました。アカウント: 'xxxx'。ファイル システム:「マーケティング」。パス: 'output/users.txt'。エラー コード: 'AuthorizationPermissionMismatch'
"errorCode": "2200", "message": "'ソース' 側でエラーが発生しました.ErrorCode=UserErrorTypeInSchemaTableNotSupported,'Type=Microsoft.DataTransfer.Common.Shared.HybridDeliveryException,Message=スキーマ テーブルから型を取得できませんでした. Sql Server System CLR が見つからないことが原因である可能性があります
"errorCode": "2200", "message": "'Sink' 側でエラーが発生しました。データの 1 行目から推測されます。コピー アクティビティのマッピングまたは DataSet の構造でそのデータ型を指定してください *
これらのエラーを修正する方法はありますか?