python - Webkitクローラーはsquidプロキシを使用する必要がありますか？

Question

Webkitを使用してクローラーを作成していますが、Webkitはキャッシュを使用しますか？Webkitベースのクローラーのプロキシとしてsquidを使用する必要がありますか？

Answer 1

を使用していQWebKitますか? PyQt/PySide はデフォルトでディスク キャッシュを使用しません。キャッシュを有効にするには、QNetworkDiskCacheオブジェクトを設定する必要があります。QNetworkManager

webscrapingwebkit.pyライブラリのモジュールのソース コードを参照してください。QWebkitでキャッシュを有効にする方法が示されています。