いくつかのツールをファジングしようとしていますが、そのためには大量の .zip または .jpg ファイルが必要です。私は webripper のようなクローラーを試しましたが、あまり効果的ではありません (またはやり方が間違っています)。多くの異なるファイルを取得するためのより良い方法はありますか?
1 に答える
0
わかりました、他の誰かが次のような sth を必要とするかもしれない偶然のために:
最後に、私はWebripperを使用し、「filetype」パラメーターを使用して google/bing の結果へのリンクを生成する代わりに、いくつかのアップロード/フリーウェア ページを最大リンク深度のターゲット rip ジョブとして配置しました。
Webripper は時々クラッシュすることがあり、かなり時間がかかりますが、ある程度は機能します。
考えられるより良い解決策は、おそらく google API (例: c#SearchAPI ) を使用することです。次に、結果からクリーンなリンクを抽出し、それらに対して非同期ダウンロードを呼び出します。いくつかのファイル「異常なデータ転送」の後にGoogleがブロックするため、直接結果リンクを使用するとうまくいかない可能性があります。
于 2014-12-12T13:06:27.847 に答える