Find centralized, trusted content and collaborate around the technologies you use most.
Teams
Q&A for work
Connect and share knowledge within a single location that is structured and easy to search.
次のようなマトリックスストアがあります
行 ID、列 ID、値
行のチャンクのみを読み取り、マッパーに送信したい。たとえば、id= 1,2,3,4 の行をマッパーに、5,6,7,8 を別のマッパーに、... そうすることは可能ですか?
いいえ、いくつかの深刻なフープを飛び越えない限り、これはおそらく不可能です. これがreduceフェーズの目的です!ロー ID をリデュース キー (またはそれに基づく計算など(rowid-1)/4) にすると、それらのチャンクが同じリデューサーに送信されます。
(rowid-1)/4