私は何年も Perl を使用してさまざまな目的でクロールとスクレイピングを行ってきましたが、LWP、WWW::Mechanize、Web など、小規模なスクレイピングとクロール用の優れた CPAN モジュールがたくさんある一方で、常に私を悩ませてきたことの 1 つです。 ::Scraper、AnyEvent::HTTP、そして現在の Mojo::UserAgent には、他の言語と同じようなクロール フレームワークはないようです。
たとえば、Apache Nutch (/Droids) & Scrapy (Python)。
Perl で同等のプロジェクトを知っている人はいますか?