問題タブ [apache-crunch]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
java - Apache crunch が出力を書き込めない
見落としかもしれませんが、Crunchを学ぶために書いている非常に単純なプログラムの出力をApache Crunchがファイルに書き出さない理由を見つけることができません..
コードは次のとおりです。
これは、hadoop を使用してこの jar を実行したときに表示されるログです。
入力ファイルは非常に単純で、次のようになります。
ロギングは、出力場所への書き込みが発生したことを示していますが、ファイルが作成されていません。何かご意見は？
apache-crunch - apache crunch Pcollection を複数の出力ファイルに書き込む
現在、Pcollection を単一の avro ファイルに書き込んでいます。Pcollection を複数のファイルに書きたいと思っています。
amazon-s3 - How to write output of Apache Crunch to Amazon S3 bucket
Is there a way through which we can write our Apache Crunch output to S3 bucket. There is a method in crunch pipeline write which takes Target as parameter. Is there a way to add S3 as Target to write method of crunch.