2

以下のコードを使用して、Web ページhttp://ajaxian.comから XFN コンテンツをスクレイピングして いますが、以下のエラーが発生しています。

    Traceback (most recent call last):  File      "C:\Users\Somnath\workspace\us.chakra.social.web.microformat\src\microformats_xfn_scrape.py", line 40, in <module>
page = urllib2.urlopen(URL)
  File "C:\Python27\lib\urllib2.py", line 126, in urlopen
return _opener.open(url, data, timeout)
  File "C:\Python27\lib\urllib2.py", line 394, in open
response = self._open(req, data)
  File "C:\Python27\lib\urllib2.py", line 417, in _open
'unknown_open', req)
  File "C:\Python27\lib\urllib2.py", line 372, in _call_chain
result = func(*args)
  File "C:\Python27\lib\urllib2.py", line 1232, in unknown_open
raise URLError('unknown url type: %s' % type)
urllib2.URLError: <urlopen error unknown url type: c>

私のコードは次のとおりです。

'''
Created on Jan 11, 2013

@author: Somnath
'''
# Scraping XFN content from a web page
# -*-coding: utf-8 -*-

import sys
import urllib2
import HTMLParser
from BeautifulSoup import BeautifulSoup

# Try http://ajaxian.com
URL = sys.argv[0]

XFN_TAGS = set([
            'colleague',
            'sweetheart',
            'parent',
            'co-resident',
            'co-worker',
            'muse',
            'neighbor',
            'sibling',
            'kin',
            'child',
            'date',
            'spouse',
            'me',
            'acquaintance',
            'met',
            'crush',
            'contact',
            'friend',
            ])


#try:
page = urllib2.urlopen(URL)
#except urllib2.URLError:
#    print 'Failed to fetch ' + item

#try:
soup = BeautifulSoup(page)
#except HTMLParser.HTMLParseError:
#    print 'Failed to parse ' + item

anchorTags = soup.findAll('a')

for a in anchorTags:
    if a.has_key('rel'):
        if len(set(a['rel'].split()) & XFN_TAGS) > 0:
            tags = a['rel'].split()
            print a.contents[0], a['href'], tags

私はEclipseでPyDevを実行しており、Run As --> Python Runを使用して、引数「http://ajaxian.com/」でランタイム構成を設定しています。誰かが私が間違っている場所を提案できますか?

もう 1 つ: コード内の 2 つの try ブロックにコメントを付けました。これは、undefined variable : item というエラーが発生したためです。try-except ブロックを再インクルードしたい場合、try ブロックの外側に変数、項目の定義を空白にする必要がありますか? どうすればその問題を取り除くことができますか?

4

1 に答える 1

4

あなたが提案sys.argv[0]したように、あなたはあなたのスクリプトを次のように呼び出すので、あなたはあなたのスクリプトのパスを印刷します

python microformats_xfn‌​_scrape.py <some_argument>

ここで、sys.argvのインデックス0はスクリプトの名前であり、引数ではありません。

あなたがする必要があるのは<url>、次のようなパラメータを使用してスクリプトを呼び出すことです。

python microformats_xfn‌​_scrape.py http://www.ajaxian.com/

スクリプトで、URL引数のインデックスが1に変更sys.argv[0]されます。sys.argv[1]

于 2013-01-11T15:54:58.067 に答える