私はhadoopに取り組んでおり、現在、クライアントから提供されたファイルをクラスター内の特定のノードに保存する方法を見つけようとしています。クライアントは、ファイルまたはチャンクを特定のノードまたは特定のファイルに保存することを望んでいますが、すべてに保存することは望んでいません。
HDFS に配置したファイルを格納するために使用するノードを指定する方法を探しています。
誰でもいくつかのアイデアを提案できますか?
私はhadoopに取り組んでおり、現在、クライアントから提供されたファイルをクラスター内の特定のノードに保存する方法を見つけようとしています。クライアントは、ファイルまたはチャンクを特定のノードまたは特定のファイルに保存することを望んでいますが、すべてに保存することは望んでいません。
HDFS に配置したファイルを格納するために使用するノードを指定する方法を探しています。
誰でもいくつかのアイデアを提案できますか?
HDFS-385の助けを借りて、それを行うことができます。この機能は、HDFS がファイルのブロックのレプリカを割り当てる方法を指定するコードを記述する方法を提供します。独自のブロック配置ポリシーを作成する方法についてヘルプが必要な場合は、これを参照してください。
HTH