c - Pthreads - 高いメモリ使用量

Question

256Mb システム上の Linux で多くの Pthreads を作成する C で何かをプログラミングしています。私は通常+200Mbの空き容量があります。

少量のスレッドでプログラムを実行すると動作しますが、約 100 のスレッドを作成すると、システムのメモリが不足するためにエラーが発生します。私はいくつかのテストを行い、各スレッドはほぼ 2Mb を使用しました。スレッドのスタックサイズは 16Kb に設定されています。

各スレッドの作成に使用するコード:

pthread_attr_t attr;
pthread_attr_init(&attr);
size_t stacksize;
stacksize = (double) 16*1024;
int res = pthread_attr_setstacksize (&attr, stacksize);
int res2 = pthread_attr_setdetachstate(&attr, PTHREAD_CREATE_DETACHED);
if (res != 0 || res2 != 0) {
    logs << "pthread_attr_XX: error "+int2string(res);
    exit(-1);
}
pthread_t id;
pthread_create(&id, &attr, &Class::thread_callback, &some_var);

それは正常ですか、それとも何か不足していますか？ありがとう。

score 4 · Accepted Answer

役に立つかどうかはわかりませんが、最初のスレッドを作成する前に、スタックサイズを 16k に制限するためにsetrlimitwithを呼び出してみてください。RLIMIT_STACK

score 2 · Accepted Answer

システムスレッドライブラリは、メモリが非常に限られているシステムで多数のスレッドをサポートするようには設計されていません。その目的のために設計されたスレッドライブラリを使用するか、使用するスレッド数を減らす必要があります。

score 1 · Accepted Answer

ええ、ほとんどすべてのオペレーティングシステムが、多くのスレッドで停止して停止することはよくあることです。OS メーカー (Linux など) がそれほど多くの CPU を搭載しているシステムはほとんどないため、これは問題ではありません。そのため、100 スレッドでは 8 スレッドよりもはるかに高速にコードを実行できない可能性があります (または、CPU の数にかかわらず)持ってる）。

あなたがする必要があるのは、ある種のスレッドプーリングだと思います。また、このページの ulimit の回答は、本当に多くのスレッドが必要な場合に役立つと思いますが、私が言ったように、ほとんどの状況で多くのスレッドが得られるとは思いません。システム、それはそれをよりポータブルにします。