0

次のコードは searchResults に到達しません。documentElement.findFirst('input[name="btnG"]') を印刷した<input name="btnG" type="submit" value="Google Search" class="lsb">ところ、その時点までは問題ないことがわかりました。私の目標は Google をスクレイピングすることではありませんが、有名で公開されている Google から学ぶ方が簡単です。

#!/usr/bin/python
from PyQt4.QtCore import QUrl, SIGNAL
from PyQt4.QtGui import QApplication
from PyQt4.QtWebKit import QWebPage, QWebView

class Scrape(QApplication):
  def __init__(self):
    super(Scrape, self).__init__(None)
    self.webView = QWebView()
    self.webView.loadFinished.connect(self.searchForm)

  def load(self, url):
    self.webView.load(QUrl(url))

  def searchForm(self):
    documentElement = self.webView.page().currentFrame().documentElement()
    inputSearch = documentElement.findFirst('input[title="Google Search"]')
    inputSearch.setAttribute('value', 'test')
    self.webView.loadFinished.disconnect(self.searchForm)
    self.webView.loadFinished.connect(self.searchResults)
    documentElement.findFirst('input[name="btnG"]').evaluateJavaScript('click()')

  def searchResults(self):
    for element in documentElement.find('li[class="g"]'):
      print unicode(element.toOuterXml())
    self.exit()

my_scrape = Scrape()
my_scrape.load('http://google.com/ncr')
my_scrape.exec_()
4

1 に答える 1

0

私はついにそれを理解しました!http://drupal4hu.com/node/266に提出

于 2010-09-12T20:38:08.040 に答える