amazon-web-services - FPT/SCP を使用してファイルを S3 にプルする最良の方法は何ですか?

Question

数分ごとに FPT/SCP ファイルを S3 に転送する最適で軽量な方法は何ですか? したがって、wget/curl は機能します。また、状態を維持するためにDBを使用したJavaなど、カスタムソリューションも機能する可能性があります。どんなアイデアでも役に立ちます。

Answer 1

S3 バケットをローカル パーティションとしてマウントし、サーバーのファイル システムに配置されていた S3 ファイルを操作できます。利用可能な優れたオープン ソース ツールが多数あります。

しかし、私の側からは、私のプロジェクトをご覧になることをお勧めします。RioFSは、Amazon S3 バケットをマウントするためのユーザー空間ファイルシステムです。プロジェクトの目標と他の同様のツールと比較した主な利点は、単純さ、操作の速度、およびバグのないコードです。

現在、プロジェクトは「ベータ」状態にありますが、かなり長い間、いくつかの高負荷のファイルサーバーで実行されています ( RioFSは、ftp / sftp サーバーへの S3 にあるファイルへのアクセスを提供します)。

私たちはプロジェクトを中心にコミュニティを構築しており、プロジェクトに参加して将来の計画について話し合い、テストを手伝ってくれる人を探しています。私たちの側から、迅速なバグ修正を提供し、新しい機能を追加するためのリクエストに耳を傾けます.

簡単なハウツー:

次のコマンドを使用してバケットをマウントできます (RioFS をインストールし、AWSACCESSKEYID および AWSSECRETACCESSKEY 環境変数をエクスポートしたと仮定します)。

riofs http://s3.amazonaws.com your_bucket_name /path/to/localfolder

(プロジェクトの説明を参照して実行riofs --helpし、コマンド ライン引数のヘルプを取得してください)

プロジェクトはまだ開発中であることに注意してください。まだ多くのバグが残っている可能性があります。何かが期待どおりに機能しないことがわかった場合: プロジェクトの GitHub ページで問題レポートを記入してください。

お役に立てば幸いです。あなたが私たちのコミュニティに参加するのを楽しみにしています!