私はウェブサイトをクロールするためにscrapyを使用しているPyQt4ツールを開発しています。UIからScrapyスパイダーを実行するための新しいプロセス[マルチプロセッシング]を開始します。すべてが正常に機能します〜UIがブロックされ、Scrapyがスクレイピングされます。
TwistedイベントループをPyQtメインループに統合したいのですが、ノンブロッキングUIが必要です。
誰かがこれをできるだけ簡単に達成する方法を知っていますか？Scrapy / PyQt / Multiprocessing/Twistedは初めてです。
私はPyQt4、Python 2.7、Scrapy0.12.0.2546を搭載したXubuntu12.04ボックスを使用しています。
前もって感謝します。