csv ファイルからデータフレームに読み込むサンプル アプリケーションがあります。メソッドを使用して、データフレームを寄木細工形式で Hive テーブルに格納できます
df.saveAsTable(tablename,mode)。
上記のコードは問題なく動作しますが、作成日 (テーブルの列) に基づいてハイブ テーブルを動的に分割したい毎日のデータが非常に多いためです。
データフレームを動的に分割してハイブ ウェアハウスに格納する方法はありますか。を使用して挿入ステートメントをハードコーディングすることは控えたいhivesqlcontext.sql(insert into table partittioin by(date)....)。
質問は拡張機能と見なすことができます: DataFrame を Hive に直接保存する方法は?
どんな助けでも大歓迎です。