Apify を使用していますが、クロールの速度がひどいです。物件リストの約 12,500 ページを確認する必要があります。
開始ページ: https://www.sreality.cz/hledani/prodej/byty?strana=1
リンクセレクター: a[href]
疑似 URL: https://www.sreality.cz/detail/prodej/byt/[.+]/[.+]/[.+] https://www.sreality.cz/hledani/prodej/byty?ストラナ=[.+]
1枚目はマンションの詳細 2枚目は次のページ
マイページ機能:
非同期関数 pageFunction(context) {
const { request, log, skipLinks, jQuery: $, waitFor } = context;
const pageTitle = $('title').first().text();
context.log.info(`URL: ${context.request.url}, TITLE: ${pageTitle}`);
if (request.userData.label === 'DETAIL') {
return {
url: context.request.url,
pageTitle,
name: $('span.name.ng-binding').eq(3).text(),
};
}
}
現在、私は名前をこすり落としているだけです。まずはスピードを解決したい。
回答ありがとうございます:)