0

PyQtと美しいスープの組​​み合わせを使用して、Webページからデータを取得しています。PyQtは、PythonとJavascriptの間のインタープリターとして使用されています。「onclick」イベントを呼び出し、「click」イベントの後にそのhtmlをBeautifulスープにフィードしようとしています。参照されるコードは次のとおりです。

import csv
import urllib2
import sys
import time
from bs4 import BeautifulSoup
from PyQt4.QtGui import *  
from PyQt4.QtCore import *  
from PyQt4.QtWebKit import *  

class Render(QWebPage):  
  def __init__(self, url):  
    self.app = QApplication(sys.argv)  
    QWebPage.__init__(self)  
    self.loadFinished.connect(self._loadFinished)  
    self.mainFrame().load(QUrl(url))  
    self.app.exec_()  

  def _loadFinished(self, result):  
    self.frame = self.mainFrame()  
    self.app.quit()  

url = 'http://www.att.com/shop/wireless/devices/smartphones.html'  
r = Render(url)
jsClick = """var evObj = document.createEvent('MouseEvents');
             evObj.initEvent('click', true, true );
             this.dispatchEvent(evObj);
             """

allSelector = "a#deviceShowAllLink" 
allButton   = r.frame.documentElement().findFirst(allSelector)
allButton.evaluateJavaScript(jsClick) 
html = allButton.frame.toHtml()


page = html
soup = BeautifulSoup(page)
soup.prettify()
with open('Smartphones_26decv2.0.csv', 'wb') as csvfile:
    spamwriter = csv.writer(csvfile, delimiter=',')
    spamwriter.writerow(["Date","Day of Week","Device Name","Price"])
    items = soup.findAll('a', {"class": "clickStreamSingleItem"},text=True)
    prices = soup.findAll('div', {"class": "listGrid-price"})
    for item, price in zip(items, prices):
        textcontent = u' '.join(price.stripped_strings)
        if textcontent:            
            spamwriter.writerow([time.strftime("%Y-%m-%d"),time.strftime("%A") ,unicode(item.string).encode('utf8').strip(),textcontent])

これを実行した後、以下のエラーが発生します。

File "D:\Microsoft\Pricing\2012-12-26\AT&T_attempt2code.py", line 32, in <module>
    html = allButton.frame.toHtml()
AttributeError: 'QWebElement' object has no attribute 'frame'

私はプログラミングに不慣れなので、この問題を解決するのを手伝ってください。そして私の無知を許してください。

4

1 に答える 1

0

エラーメッセージに記載されているように、問題は次の行にあります。

html = allButton.frame.toHtml()

allButtonframeのインスタンスであるため、属性はありませんQWebElement（定義上の変換のシーケンスはRender-> QWebFrame-> QWebElement->QWebElementです）。

コードでは、属性はメソッドframeで定義されているため、オブジェクトのみが属性を持っています。Render._loadFinishedrframe

html定義を次のように変更すると、エラーを取り除くことができます。

html = r.frame.toHtml()

または：

html = allButton.webFrame().toHtml()
于 2012-12-26T15:16:20.407 に答える