Celery を使用してキューを管理するコンピューティング クラスター全体で Python タスクを実行するシステムがあります。これらのタスクは、MapR-FS に格納されたデータで動作します (Hadoop HFDS API を公開するため、Hadoop HDFS で機能する技術は MapR-FS でも機能するはずです)。
MapR-FS に保存されているファイルのローカル性を判断し、ファイルへのローカル アクセスを持つ特定のクラスター ノードで実行するタスクを割り当てたいと考えています。
これは可能ですか？