問題タブ [wget]

hudsonがデプロイされているのと同じマシンにシェルスクリプトがあり、それを実行すると、hudsonビルドトリガーURLでwgetが呼び出されます。同じマシンなので、http：// localhost：8080 / hudson / job / jobname / build？token=sometokenとしてアクセスします。

通常、これはプロジェクトのビルドをトリガーすることになっています。しかし、これを行うと403が禁止されます。誰かが理由を知っていますか？ブラウザを使用してこれを試しましたが、ビルドがトリガーされますが、コマンドラインからは機能しないようです。何か案は？

わかりましたので、wget を実行する必要がありますが、wget を実行する必要がある場所に「ドット」ファイルを作成することは禁止されています。だから私の質問は、「指定できる .listing 以外の名前を wget に使用させることはできますか」です。

さらなる明確化: これは、ftp フォルダーをローカルのフォルダーと同期/ミラーリングするためのものです。そのため、すべてのファイルでフォーマットを維持する必要があるため、-O オプションの使用はあまり役に立ちません。

ヘッダーなしでファイルを取得したいと思います。私は多くのことを試しました

ヘッダーのないファイルを取得するにはどうすればよいですか?

Unixを使用してダウンロードしたいサイトが ありますwget。ファイルのソースコードと内容を見ると、SUMMARYというセクションが含まれています。ただし、次のようなwgetコマンドを発行した後：

の内容downdloadedtext.txtは不完全であり、そのサイトのソースコードとは異なります。たとえば、SUMMARYセクションは含まれていません。完全なコンテンツを正しく取得する正しい方法はありますか？

そのHTMLのさまざまな値からのダウンロードを自動化したいので、これを尋ねる理由。

wgetがリダイレクトをたどらないようにするにはどうすればよいですか?

ターミナルで wget を使用してフォルダーをダウンロードしようとしています (それが重要な場合は Mac を使用しています)。ftp クライアントがうまくいかず、タイムアウトし続けるからです。長くはつながりません。そのため、wget を使用して ftp プロトコル経由でサーバーに接続し、問題のディレクトリをダウンロードできるかどうか疑問に思っていました。これについてインターネットで検索し、コマンドを書き込もうとしましたが、失敗し続けます。したがって、次のように仮定します。

ftp ユーザー名: serveradmin@mydomain.ca ftp ホスト: ftp.s12345.gridserver.com ftp パスワード: somepassword

次の方法でコマンドを記述しようとしました。

最初の方法を試すと、次のエラーが発生します。

2番目の方法を試すと、もう少し進みますが、次のエラーが発生します。

私は何が間違っているのでしょうか？

多数のファイルをダウンロードするスクリプトを作成しています。特定のファイルが存在しない場合に通知するようにしたいと考えています。

しかし、実行時に次のエラーが発生します。

./file: line 2: [: -ne: unary operator expected

どうしたの？

単一のGoogleドキュメントをダウンロードする方法を学びました。しかし、すべてのデータをテキスト形式でダウンロードし、それらを 1 つのテキスト ファイルにマージするスクリプトを作成しようとしています。では、Web ブラウザーと同じように、すべてのファイルを含む zip ファイルを取得できるように、ダウンロード部分を実装する方法を考えています。これは、単一のファイルを取得するための私の newb スクリプトです。より効果的にするための微調整を提案していただければ幸いです。

ご覧のとおり、ここでは単一のresourceIdを指定しています。多くのresourceId -s をダウンロード リンクにプッシュしてすべてを取得する必要がありますか、それとももっと良い方法がありますか?

HTTP と FTP の両方を介して大量のファイル転送を行う必要があるソフトウェアを構築しています。多くの場合、axel や pget を使用した lftp などのマルチ接続ダウンロード アクセラレータを使用すると、HTTP ダウンロードが高速になります。場合によっては、次のようなものを使用して 2 倍から 3 倍高速なファイル転送を見てきました。

また

対 wget を使用するだけ:

しかし、それ以外の場合は、wget が lftp よりも大幅に高速です。不思議なことに、これは次のように get で lftp を実行する場合でも当てはまります。

帯域幅の制約によっては、複数の接続を介してファイルをダウンロードしても、常に高速化されるとは限らないことを理解しています。しかし、なぜ遅くなるのですか？特に -n 1 で lftp/pget を呼び出すときは?

なぜこれが機能するのですか：

そして、これは失敗します:

wget、curl、またはその他のライブラリを使用せずに1行で行う方法はありますか?