3

OS Xでローカルに開発している間、UbuntuサーバーでPython Webアプリを実行しています。

私は、画像のファイル名の操作を含め、ヘブライ語に多くの Unicode 文字列を使用しているため、画像はファイルシステムにヘブライ文字で保存されます。

私のUbuntuサーバーはUTF-8用に完全に構​​成されています-ファイルシステム(このアプリの外部)には、ヘブライ語の名前、ヘブライ語の名前のディレクトリなどの他のイメージがあります。

ただし、Ubuntuでヘブライ語のファイル名で画像を保存しようとすると(OS Xではなく)、アプリがエラーを返します。

エラーは次のとおりです。

UnicodeEncodeError: 'ascii' codec can't encode characters in position 0-3: ordinal not in range(128)

多くの調査の後、私が見ることができる限り、考えられる最後の原因にたどり着きました:

# Inside my virtualenv, Mac OS X
>>> import os.path
>>> os.path.supports_unicode_filenames
>>> True

# Inside my virtualenv, Ubuntu 12.04
>>> import os.path
>>> os.path.supports_unicode_filenames
>>> False

好奇心のために、これが私のUbuntuロケール設定です。

locale
LANG=en_US.UTF-8
LANGUAGE=
LC_CTYPE="en_US.UTF-8"
LC_NUMERIC="en_US.UTF-8"
LC_TIME="en_US.UTF-8"
LC_COLLATE="en_US.UTF-8"
LC_MONETARY="en_US.UTF-8"
LC_MESSAGES="en_US.UTF-8"
LC_PAPER="en_US.UTF-8"
LC_NAME="en_US.UTF-8"
LC_ADDRESS="en_US.UTF-8"
LC_TELEPHONE="en_US.UTF-8"
LC_MEASUREMENT="en_US.UTF-8"
LC_IDENTIFICATION="en_US.UTF-8"
LC_ALL=

更新: コードの追加と文字列の例:

# a string, of the type I would get for instance.product.name, as used below.
u'\\u05e7\\u05e8\\u05d5\\u05d1-\\u05e8\\u05d7\\u05d5\\u05e7'


#utils.py
# I get an image object from django, and I run this function so django 
# can use the generated filepath for the image.
def get_upload_path(instance, filename):

    tmp = filename.split('.')
    extension = '.' + tmp[-1]

    if instance.__class__.__name__ == 'MyClass':

        seo_filename = unislugify(instance.product.name)
        # unislugify takes a string and strips spaces, etc.
        value = IMAGES_PRODUCT_DIR + seo_filename + extension

    else:

        value = IMAGES_GENERAL_DIR + unislugify(filename)

    return value

スタックトレースの例:

UnicodeEncodeError: 'ascii' codec can't encode characters in position 60-66: ordinal not in range(128)

Stacktrace (most recent call last):

  File "django/core/handlers/base.py", line 111, in get_response
    response = callback(request, *callback_args, **callback_kwargs)

  File "django/contrib/admin/options.py", line 366, in wrapper
    return self.admin_site.admin_view(view)(*args, **kwargs)

  File "django/utils/decorators.py", line 91, in _wrapped_view
    response = view_func(request, *args, **kwargs)

  File "django/views/decorators/cache.py", line 89, in _wrapped_view_func
    response = view_func(request, *args, **kwargs)

  File "django/contrib/admin/sites.py", line 196, in inner
    return view(request, *args, **kwargs)

  File "django/utils/decorators.py", line 25, in _wrapper
    return bound_func(*args, **kwargs)

  File "django/utils/decorators.py", line 91, in _wrapped_view
    response = view_func(request, *args, **kwargs)

  File "django/utils/decorators.py", line 21, in bound_func
    return func(self, *args2, **kwargs2)

  File "django/db/transaction.py", line 209, in inner
    return func(*args, **kwargs)

  File "django/contrib/admin/options.py", line 1055, in change_view
    self.save_related(request, form, formsets, True)

  File "django/contrib/admin/options.py", line 733, in save_related
    self.save_formset(request, form, formset, change=change)

  File "django/contrib/admin/options.py", line 721, in save_formset
    formset.save()

  File "django/forms/models.py", line 497, in save
    return self.save_existing_objects(commit) + self.save_new_objects(commit)

  File "django/forms/models.py", line 628, in save_new_objects
    self.new_objects.append(self.save_new(form, commit=commit))

  File "django/forms/models.py", line 731, in save_new
    obj.save()

  File "django/db/models/base.py", line 463, in save
    self.save_base(using=using, force_insert=force_insert, force_update=force_update)

  File "django/db/models/base.py", line 551, in save_base
    result = manager._insert([self], fields=fields, return_id=update_pk, using=using, raw=raw)

  File "django/db/models/manager.py", line 203, in _insert
    return insert_query(self.model, objs, fields, **kwargs)

  File "django/db/models/query.py", line 1593, in insert_query
    return query.get_compiler(using=using).execute_sql(return_id)

  File "django/db/models/sql/compiler.py", line 909, in execute_sql
    for sql, params in self.as_sql():

  File "django/db/models/sql/compiler.py", line 872, in as_sql
    for obj in self.query.objs

  File "django/db/models/fields/files.py", line 249, in pre_save
    file.save(file.name, file, save=False)

  File "django/db/models/fields/files.py", line 86, in save
    self.name = self.storage.save(name, content)

  File "django/core/files/storage.py", line 44, in save
    name = self.get_available_name(name)

  File "django/core/files/storage.py", line 70, in get_available_name
    while self.exists(name):

  File "django/core/files/storage.py", line 230, in exists
    return os.path.exists(self.path(name))

  File "python2.7/genericpath.py", line 18, in exists
    os.stat(path)
4

2 に答える 2

5

os.path.supports_unicode_filenamesダーウィンを除くposixシステムでは常にFalseです。これは、ファイル名のエンコーディングをあまり気にしないためです。これは単なるバイトシーケンスです。ロケール設定は、このバイトを解釈する方法を指定します。そのため、ロケール設定が正しくない場合、端末で文字が壊れてしまう可能性があります。

Web アプリをどのように実行していますか? cgi または wsgi を使用して Web サーバー (Apache?) 経由で実行している場合、ロケールはシ​​ェルで表示されるものとは異なる可能性があるため、これが Python がasciiコーデックを使用してパス名をエンコードしようとする理由である可能性があります。

utf-8機能させるには、ファイルを開くときと同じようにパス名を手動でエンコードできます。

編集:
したがって、失敗は への呼び出しos.statであり、ユニコード文字列で呼び出され、デフォルトのエンコーディング ( sys.getdefaultencoding())に従ってバイト文字列に変換しようとしますascii。これを修正するには、os.stat に渡す前に Unicode 文字列を utf-8 にエンコードする必要があります。

于 2012-11-05T13:00:13.237 に答える
0

みんなの助けに感謝します。私はまだuWSGIでこの問題を解決していません。

しかし、これは私にとってuWSGIを「構成」する最後のストローでした。アプリサーバーとしてgunicornに戻り、すべて正常に動作しました。野心的なプロジェクトなのでuWSGIを使用したいと思いますが、結局のところ、私はシステム管理者ではなく開発者であり、gunicornは一般的なユースケースで作業する方がはるかに簡単です.

于 2012-11-07T06:49:47.647 に答える