Hadoop/Pig 用の Python UDF を作成し、ローカル ボックス UDF テストを行うときに pip でローカルにインストールした「request」などの Python ライブラリを使用する必要があります。Python UDF がどのノードで実行されていても、自動的に消費されるように、Hadoop クラスターに pip パッケージをデプロイする方法を知りたいですか?
1006 次
1 に答える
1
zip ファイル形式に関する情報は、Zip (ファイル形式)にあります。実際には、tar (アーカイブ形式) と gzip (ファイル圧縮形式) のような圧縮アーカイブ形式です。Java jar (Java ARchive) 形式は zip と互換性があります。
Linux および Unix プラットフォームでは、ディレクトリ dir を「zip -r dir dir」で圧縮して、dir.zip ファイルを作成できます。Windows 7 では、Zipは zip ファイルの作成とアンバンドルに最も役立ちます。また、tar や gzip などの他の圧縮形式やアーカイブ形式を持つファイルのアンバンドルと参照にも使用できます。
ファイル dir.tar.gz を指定すると、Windows では 7-Zip GUI を使用してインタラクティブにアンバンドルおよび圧縮できますが、Linux および Unix システムでは、次のコマンドで同じことを実行できます。
tar zxf dir.tar.gz # creates directory dir by extraction and decompression
zip -r dir dir # creates dir.zip by bundling without removing dir
于 2015-08-27T23:31:27.467 に答える