問題タブ [simpletransformers]

Docker イメージを使用して AWS でラムダ関数をテストすると、次のエラーが発生します。モデルは単純なトランスフォーマー分類モデルです。テストはローカルで問題なく機能しました。

simpletransformers が os に書き込もうとしていると思います。回避策はありますか？

Google Colab のサイトから simpletransformers の例を実行しようとしています。

例：

しかし、それは私に次のエラーを与えます:

VersionConflict: このモジュールが正常に機能するには tokenizers==0.9.4 が必要ですが、tokenizers==0.10.0 が見つかりました。試してください: pip installTransformers -U または pip install -e '.[dev]' git master を使用している場合

試してみまし!pip install transformers -Uた!pip install tokenizers==0.9.4 が、同じエラーが発生し続けます。以前にこのコードを実行したことがありますが、うまくいきましたが、今は前述のエラーが発生しています。

約 530 Mb のデータを持つカスタム NER を構築しようとしています。次のコードを使用して、simpletransformers を使用して実装しました。

args.lazy_loading=Trueメモリの問題を解決するために使用しています。しかし、次のエラーが発生しています：

CoNLL 形式の入力テキストの例:

参考リンク：https ://simpletransformers.ai/docs/ner-specifics/