bash - wgetまたはcurlを使用して利用可能なファイルのリストを取得する方法は?

Question

lsたとえば、Web サイトで使用できる *.js ファイルを確認できるように、URLを実行できるかどうかを知りたいです。何かのようなもの：

wget --list-files -A.js stackoverflow.com

そして得る

ajax/libs/jquery/1.7.1/jquery.min.js
js/full.js
js/stub.js
...

Answer 1

lsサーバーがそのようなリスト自体を提供しない限り、に相当することはできません。ただし、次のようなものを取得index.htmlして、インクルードを確認することもできます

wget -O - http://www.example.com | grep "type=.\?text/javascript.\?"

これは、特定の方法でフォーマットされている HTML に依存していることに注意してください。この場合、たとえば、個々の行にインクルードがあります。これを適切に行いたい場合は、HTML を解析し、その方法で JavaScript インクルードを抽出することをお勧めします。