HDFS からファイルを読み取るために Python を使用しています。使用するライブラリはHadoopyです。
以前、Hadoopy を使用して対応するファイルを HDFS に書き込むことができました。
ただし、HDFS から読み取ってローカル ファイル システムに保存することはありません。
コードを以下に貼り付けます。
import hadoopy
hdfs_path = 'hdfs://localhost:54310/user/hduser/sample1'
def main():
hadoopy.readtb("abc4.txt",hdfs_path)
if __name__ == '__main__':
main()
Hadoopy を使用してファイルを読み取る方法は?