問題タブ [wget]

私の英語でごめんなさい (私は rus)

wgetでIPカメラからMJPEGストリームを保存します

時間単位の保存を制限する必要があります (1 時間ごとに別のファイル - 2010-01-12_[XX])

それを行うにはどうすればよいですか？1) cron による起動と終了 ? 2) スクリプトで実行するには、どうすればよいですか? ...

答えてくれてありがとう

パスワードで保護されたいくつかの Web ページとサブリンクを取得したいと考えています。ユーザー名とパスワードがあり、通常のブラウザー UI からアクセスできます。しかし、後で参照できるようにこれらのページをローカル ドライブに保存したいので、WGET を使用してそれらを取得しています。

ただし、パスワードを再度要求するため、上記は機能しません。システムがパスワードを再度要求することに悩まされることなく、これを行うためのより良い方法はありますか。また、特定のページのすべてのリンクとサブリンクを取得し、それらを単一のフォルダーに保存するための最良のオプションは何ですか.

更新: アクセスしようとしている実際のページは HTTPS ゲートウェイの背後にあり、同じページの証明書が検証されていません。これを乗り越える方法はありますか？

--no-check-certificate オプションも試しましたが、機能しません。リクエストした実際のページではなく、このオプションを使用してログインページのみを取得します。

次を使用してレポートをプルダウンしようとしています。

https://user:password@domain.com/ReportServer?%2fFolder+1%2fReportName&rs:Format=CSV&rs:Command=Render

また、csv ファイルではなく、html ページをプルするだけです。何か案は？

同じ構造の約 100 個の Web ページをクロールしようとしていますが、必要な画像はインスタンスごとに異なる名前です。

イメージタグは次の場所にあります。

その結果の src url をダウンロードする必要があります。

何か案は？.txt ファイルに URL があり、Mac OS X ボックスを使用しています。

私は次のようなものを計画していました：

私が抱えている問題は、URL を somefunc で変換すると URL が失われることです。そうしないと、既にそこにあるときにダウンロードされるのを避けるために、それをターゲットとして使用できません。

何か案は？

次のコマンドを使用して、Wgetを使用してcron経由でPHPスクリプトを実行しています。

スクリプトの処理には、最大5〜6分かかります。WGetはそれを待って、必要なときにすべてを提供しますか、それともタイムアウトしますか？

投稿する必要のあるドラフトニュース投稿があるかどうかを確認するために毎分実行したいphpスクリプトがあります。cPanelのcronコマンドに「wget」を使用していましたが、実行するたびにメインディレクトリに空白のファイルが作成されていることに気付きました（数日後）。それを防ぐために必要なことはありますか？

ありがとう。

サーバーに大量のファイルをダウンロードしたいと考えています。ダウンロードするさまざまなファイルのリストと、それらを配置する場所があります。これはすべて問題ではありません。wget を使用してファイルをダウンロードし、shell_exec でこれを実行します。

これはうまく機能し、サーバーはすべてのスレッドを開始し、ファイルはすぐにダウンロードされます。

問題は、ファイルがダウンロードされたときにユーザーに通知したいことです...そして、これは私の現在のやり方ではうまくいきません。では、これをどのように実装しますか？

どんな提案も役に立ちます！

PHPを使用してApacheWebサーバーで何らかの方法で「キュー」操作を実行できるようにしたいと考えています。たとえば、次のようなループを作成します。

「ダウンロード」機能は、wgetを実行し、ファイルを指定された位置にダウンロードするだけです。これは正常に機能していますが、私の問題は、この操作中、ファイルがダウンロードされるまで他に何もできないことです。言い換えれば、私がやろうとしているのは、ダウンロード機能をバックグラウンドで（別のApacheスレッドなどを使用して）実行し、サイト内を移動したり他のことを実行したりできるようにすることです。

これどうやってするの？

インストール時にWebからダウンロードする他のバイナリに依存するプロジェクトがあります。このために私が行うことは次のとおりです。

このアプローチの問題は、途中でダウンロードを中断し、次にスクリプトを呼び出すと、部分的にダウンロードされたファイルもスキップされることです（これは望ましくありません）。また、wgetで部分的にダウンロードされたファイルのダウンロードを再開したいです。 。

どのようにすればよいですか：私が考えることができる可能な解決策：

1. ファイルをdownload_tmpなどのファイルにダウンロードします。成功した場合は元のファイルに移動します。
2. SIG {'INT'}を処理して、適切なクリーンアップコードを記述します。

しかし、これらのどれも部分的なファイルのダウンロードを再開するのに役立ちませんでした、

洞察はありますか？