perl - WGETを介してダウンロードする前にリモートにあるファイルを読み取るPerlツール

Question

Webページにテキストファイルのリンクがあるとします。これで、HTMLビルダーを使用してページを解析し、そのリンクを抽出して、WGETを介して選択したディレクトリにそのファイルをダウンロードできます。しかし、ダウンロードする前にファイルをチェックすることは可能ですか？つまり、最初の6文字をチェックしてシーケンスと一致するかどうかを確認し、一致するcooler場合はダウンロードするだけですか？

Answer 1

ダウンロードする前にファイルの一部を読んでください。

--rangeオプションを指定してcurlを使用すると、ファイルの一部をダウンロードできます。しかし、私が想定するメタ/ヘッダーデータをスキップするには、ファイルについて十分に知っている必要があります。

man curl

マニュアルページによると、注意してください。

また、多くのHTTP / 1.1サーバーでこの機能が有効になっていないため、範囲を取得しようとすると、代わりにドキュメント全体が取得されることに注意してください。