問題タブ [gpt-2]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票する
1 に答える
434 参照

python - Tensorflow.JS を使用して GPT-2 モデルを変換できません

Node.JS プロジェクトに GPT-2 モデルをロードしようとしています。これは tfjs ライブラリを使用して実行できると思います。そこでGPT-2モデルをtfjsモデルに変換してみました。この回答に関する推奨事項に従って、GPT-2 モデルを SavedModel としてエクスポートしました。

次に、次のコードを実行して、SavedModel xx.pb ファイルをエクスポートしました。

次に、このコマンドを実行して、SavedModel を tfjs 互換ファイルに変換しました。

これにより、エラーが発生します

StatefulPartitionedCallサポートされていないと書かれています。これを解決できる方法はありますか?

0 投票する
0 に答える
484 参照

huggingface-transformers - huggingface トランスフォーマー run_clm.py が早期に停止する

language_modeling の例に従って、run_clm.py を実行して、huggingface ライブラリから gpt-2 を微調整しています。

これは出力です。プロセスは開始されたように見えますが、プロセスを停止するように見える^Cがありました。

ここに私の環境情報があります:

  • トランスフォーマーのバージョン: 3.4.0
  • プラットフォーム: Linux-4.19.112+-x86_64-with-Ubuntu-18.04-bionic
  • Python バージョン: 3.6.9
  • テンソルフローのバージョン: 1.14
  • スクリプトで GPU を使用しますか?: はい

早期停止のトリガーとして考えられるものは何ですか?