ここではpython 2.7.1でBeautiful Soup 3.2を使用しています。
私は最近、簡単なものを機能させようとしていますが、かなりトリッキーなようです:
私は次のことを行います:
temp=BeautifulSoup(urllib2.urlopen(urlList[1], None,15))
ただし、次のエラーが表示されます。
File "/home/foo/k/kat/BeautifulSoup.py", line 1519, in __init__
BeautifulStoneSoup.__init__(self, *args, **kwargs)
File "/home/foo/k/kat/BeautifulSoup.py", line 1144, in __init__
self._feed(isHTML=isHTML)
File "/home/foo/k/kat/BeautifulSoup.py", line 1186, in _feed
SGMLParser.feed(self, markup)
File "/usr/lib/python2.7/sgmllib.py", line 104, in feed
self.goahead(0)
File "/usr/lib/python2.7/sgmllib.py", line 143, in goahead
k = self.parse_endtag(i)
File "/usr/lib/python2.7/sgmllib.py", line 320, in parse_endtag
self.finish_endtag(tag)
File "/usr/lib/python2.7/sgmllib.py", line 358, in finish_endtag
method = getattr(self, 'end_' + tag)
UnicodeEncodeError: 'ascii' codec can't encode character u'\xfa' in
position 4: ordinal not in range(128)
同じループをもう一度実行すると、次のようになることもあります。
File "/home/foo/k/kat/BeautifulSoup.py", line 1519, in __init__
BeautifulStoneSoup.__init__(self, *args, **kwargs)
File "/home/foo/k/kat/BeautifulSoup.py", line 1144, in
__init__
self._feed(isHTML=isHTML)
File "/home/foo/k/kat/BeautifulSoup.py", line 1186, in _feed
SGMLParser.feed(self, markup)
File "/usr/lib/python2.7/sgmllib.py", line 104, in feed
self.goahead(0)
File "/usr/lib/python2.7/sgmllib.py", line 143, in goahead
k = self.parse_endtag(i)
File "/usr/lib/python2.7/sgmllib.py", line 320, in parse_endtag
self.finish_endtag(tag)
File "/usr/lib/python2.7/sgmllib.py", line 358, in finish_endtag
method = getattr(self, 'end_' + tag)
UnicodeEncodeError: 'ascii' codec can't encode characters in position
4-5: ordinal not in range(128)
このエラーを回避するにはどうすればよいですか? 明らかに、sgmllib.py に問題があります。
私はSOFからいくつかの解決策を試しました:
*]soup = BeautifulSoup(page, fromEncoding=<encoding of the page>)
試行結果: Dosent 作業、同じエラー。
*] sgmllib.py を 2.7.2 バージョンから 2.7.1 バージョンにアップグレードしようとしました。結果: うまくいきませんでしたが、同じエラーが発生しました。
*]html = BeautifulSoup(page.encode('utf-8'))
試行結果: Dosent 作業、同じエラー。
このエンコード エラーを解決する方法についての提案をいただければ幸いです。