問題タブ [setrlimit]

setrlimit を使用して、プログラムが作成できるプロセスの数を制限しようとしています。これが私のコードです：

rlim_maxandの値rlim_curは 10 であるため、私のプログラムは 10 個のプロセスをフォークできるはずです。しかし、今のところ、単一の fork 呼び出しでも失敗しています。値を約 250 に設定すると機能しますが、その理由がわかりません。フォークの数を に制限する方法が必要ですn。

データ サイズを 65Kb に制限する簡単なプログラムを作成し、65Kb 以上のダミー メモリを割り当てていることを確認するために、(以下のように) すべて正しいことを行っている場合、malloc 呼び出しは失敗するはずですよね?

驚いたことに、出力は次のようなものです -

私は何らかの方法で間違っていますか？入力をドロップしてください。ありがとう！

信頼できないコード用の分離サンドボックスを作成しているため、コード実行を分離する安全な方法を探しています。また、コード統計 (メモリ使用量、CPU 使用量など) を収集する方法も必要です。

Docker を試してみましたが、Stats API は 2 番目のピリオドでのみストリーミングでき、一部のコード (特に C または C++ で記述) は 1000 倍以上高速に実行されます。

私は質問をしましsetrlimitたが、コメントの人々は、ユーザーが制限をキャンセルできると書いています (ユーザーがこれを行うのを防ぐ方法があるかもしれません?)

についても聞いたことがありulimitます。その方法は十分に安全で、ユーザーが上書きすることはできませんか?

私はJavaアプリケーション、より具体的にはjarコンパイルされたものを実行しようとしています.Cでexecve()を使用し
ています.

それは問題なく動作していますが、このプログラムがそのようなものを使用して開くことができるスレッドの数を制限しようとすると:

スレッドを開くJVMに問題があり、それを防止しているため、次のエラーが発生します。

Javaアプリケーションで開かれたスレッドを防ぎ、JVMによって開かれたスレッドを防ぐにはどうすればよいですか? !

注意してください、問題はシステムスレッドではなくユーザースレッドを防ぐ方法です。2番目のコード「RLIMIT_NPROC」で行ったように、実行環境を制限する必要があります

ありがとう！

次のコマンドを使用して、開いている可能性のあるファイルの新しい制限を設定したい:

ただし、エラーが発生します。ValueError: current limit exceeds maximum limit これを克服して、OS X に新しい制限を設定する方法はありますか?

テストでメモリ使用量を制限したいので、Process::setrlimit最初の動作をテストしましたが、混乱します。これが私のコードです：

私の Linux ラップトップにはスワップ パーティションがないので、RSS はメモリの合計に等しいと思います。

このプログラムがクラッシュすることを期待していますが、そうではありません。10485760その文字列の正しい長さを出力するだけです。なぜクラッシュしないのですか？プログラム自体でメモリ制限を正しく設定するにはどうすればよいですか?

プロセスがマシンをクラッシュさせないようにするために、Linux システムでのメモリ使用量を制限しようとしてsetrlimitいます (バグが 100 GiB を超えるメモリ消費につながったため、私のコードは高性能クラスターのノードをクラッシュさせていました) ）。に渡す正しいリソースが見つからないようですsetrlimit。setrlimit で制限できない常駐であるべきだと思いますが、常駐、ヒープ、スタックで混乱しています。以下のコードでは; のみコメントを外すと、その配列は 80 MB しかないはずなのにRLIMIT_AS、コードはMemoryErrorat で失敗します。、、または両方の配列numpy.ones(shape=(1000, 1000, 10), dtype="f8")のみのコメントを外すと、合計メモリ使用量が 2 GB、または目的の最大値の 2 倍であっても、正常に割り当てられます。RLIMIT_DATARLIMIT_RSSRLIMIT_STACK

RAM の割り当てが多すぎるとすぐに、プログラムが失敗するようにしたいと考えています。RLIMIT_DATA、RLIMIT_RSS、RLIMIT_STACKおよびのどれも私が意味することをしないのはなぜですか?RLIMIT_ASに渡す正しいリソースは何setrlimitですか?

RLIMIT_AS行のコメントを外して出力します。

他のコメントを外して実行した場合の出力:

最後の行でtop、プロセスが 379 GB VIRT、2.0 GB RES を使用していると報告しています。

システムの詳細:

Linuxサーバーに1つのプロセスがあり、 setrlimit() 関数を使用してそのプロセスに1GBの仮想メモリを設定しており、コードベースでopenmpが使用されています。実行プロセスがクラッシュしたときに、コア ファイルが生成されます。コア ファイルをデバッグしたところ、#pragma omp parallel for 行でクラッシュが発生していることがわかりました。openmp ステートメントで仮想メモリが超過し、bad_alloc 例外が発生して処理されていないと思います。この #pragma omp parallel for line を try ブロック内に追加しようとし、bad_alloc 例外を含む catch ブロックを追加しましたが、キャッチされません。私もキャッチ（...）で疲れましたが、運はありません。

omp ステートメントによって発生する例外を処理する方法について、皆さんの提案を共有できますか。

現在、クライアントのリクエストを処理するプロセスをフォークするサーバー プログラムを実装しています。フォークされたプロセスは、CPU、メモリ、ディスク、およびその他のシステム属性に関して適切に制御する必要があります。リソース マネージャー クラスを実装する最も簡単な方法は、 C をラップすることだと気付きましたrlimit。しかし、rlimitあまりにも基本的なようです。などの最新のソフトウェア技術も知らされてcgroupsおり、LXC良い仕事をすることもできます。私のアプリケーションでは、フォークされたプロセスは、ローカル共有メモリまたはリモート ネットワーク ソケット (アプリケーションはマシン クラスタ上で実行されます) を介して相互に通信する必要があります。この場合、cgroups手頃LXCな価格ですか？コンテナが完全に隔離されており、互いに通信できないことに気付きました。どんなコメントでも大歓迎です！

doMCパッケージを利用したものを使用していますmulticore。（コンソールで）デバッグしているときに、横向きになり、fork-bombed .

R には setrlimit() システムコールがありますか? このためのpyhtonでは、resource.RLIMIT_NPROCを使用します

理想的には、実行中の R プロセスの数を制限したい

編集：OSはLinux CentOS 6です