寄木細工のファイルを pyspark のデータフレームとして読み取るとします。必要なパーティションの数を指定するにはどうすればよいですか?
私はこのように寄木細工のファイルを読みました -
df = sqlContext.read.format('parquet').load('/path/to/file')
使用するパーティションの数を指定するにはどうすればよいですか?
寄木細工のファイルを pyspark のデータフレームとして読み取るとします。必要なパーティションの数を指定するにはどうすればよいですか?
私はこのように寄木細工のファイルを読みました -
df = sqlContext.read.format('parquet').load('/path/to/file')
使用するパーティションの数を指定するにはどうすればよいですか?