サイト URL とそのリソース タイプ、コンテンツ、応答時間、関連するリダイレクト数のリストを作成して、Web サイトをクロールする機能を持つ Groovy (Grails フレームワークと MongoDB データベースを使用) で Web クローラーを開発したいと考えています。
私は JSoup と Crawler4j について議論しています。それらが基本的に何をするかについて読んだことがありますが、2つの違いを明確に理解できません。上記の機能に適したものを誰か提案できますか? それとも、両者を比較するのは完全に間違っていますか?
ありがとう。