問題タブ [dask-kubernetes]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
json - json と requests での Dask メモリ リークの問題
これは、リモート Dask kubernetes クラスターでメモリ リークの問題を再現するための最小限のテストのサンプルです。
観察: 実行ごとに約 30 MB ずつワーカー メモリ (バイト ストレージ) が着実に増加し、メモリ全体が使用されるまで増加し続けます。urllib で試した別のテストでは、実行ごとにメモリがランダムに増減することがわかりました。
望ましい動作: 参照 L_geojson が削除された後、メモリをクリーンアップする必要があります。
誰かがこのメモリリークの問題を手伝ってくれませんか?
dask - GPU サポートを Dask Gateway とどのように統合しますか?
現在、CPU のみのワーカーで Dask Gateway を使用しています。ただし、ディープ ラーニングがより広く採用されるようになると、Dask Gateway を介して作成されたクラスターに GPU サポートを追加するように移行したいと考えています。
Dask Gateway のドキュメントを確認しましたが、これを設定する方法と、この機能を有効にするために変更する必要があるヘルム チャート/構成のどの部分についての詳細な説明はあまりありません。
私が考えているのは、最初に GCP 上の GKE クラスターに GPU を追加してから、この GPU を利用するタスク ワーカーに RAPIDS dockerfile を使用することですか? Dask Gateway に必要なセットアップはこれですべてですか?
誰かが私を正しい方向に向けることができれば幸いです。
google-cloud-platform - プライベート IP アドレス/VPC を使用しているときに Dask Gateway で Dask Daskboard を表示する方法は?
Google Cloud Platform の Kubernetes に Dask Gateway をデプロイしました。現在、内部 TCP ロード バランサーを使用して、セキュリティ上の目的で traefik プロキシを公開しています。ユーザーは、Dask Gateway を介して生成されたクラスターへのクライアント接続を問題なく作成できます。しかし、プライベート VPC で内部ロード バランサーを使用しているため、ダッシュボードへのリンクにはアクセスできなくなりました。このダッシュボード リンクを公開するにはどうすればよいですか?
私がやろうとしているのは、Dask ダッシュボード用に別の外部ロード バランサーを作成してから、クラスター構成で、何らかの形でそれを外部ロード バランサーにポイントすることです。しかし、kubernetes helm チャートでこれを行う方法がよくわかりません。
前もって感謝します。