問題タブ [chunks]

マルチスレッド プログラムで動的なチャンク管理システムを作成しようとして、非常に苦労しているようです。ボクセル チャンクで満たされた次元である VDimensia クラスがあり、マルチスレッド プログラムの 1 つのスレッドがビジー状態でボクセルのレンダリングと更新を行っています。私の問題は、別のスレッドが遠すぎるボクセル チャンクを破棄するように設計されており、別のスレッドがチャンクの作成と初期化の最中にチャンクを削除すると問題が発生することです。現在、私のコードは少し乱雑です。すべてのアクセス チェックが行われていますが、何らかのアクセス違反でプログラムがポップアップしないようにする方法を見つけることができないようです。try catch を使用して違反を無視して続行する方法はありますか? 私はすでに __try __except を使用しようとしましたが、スレッドをロックすることにしました。コンパイラ オプション /EHa を設定しようとしましたが、文字通り何もしません。Visual Studio 2012 C++ を使用しています。私は今でも C++ を学んでいます。

(バイナリ) リモート ファイルから複数の範囲をダウンロードしています。

リクエストを作成し、複数の範囲を追加します

次に、リクエストを実行してレスポンスを処理します

さて、私の問題は次のとおりです。宛先ファイルには、最初と各チャンクの間にヘッダー情報が含まれています。

これらのヘッダーなしでコンテンツを取得するにはどうすればよいですか?

RAM の数百倍のデータを処理する必要があります。大きなチャンクを読み込んで処理し、結果を保存し、メモリを解放して繰り返したいと思います。Pythonでこれを効率的にする方法はありますか?

を作成PdfPTableしてPdfPCellおり、 でParagraph構成されていChunksます。特定の座標 (絶対位置) でページにチャンクを追加したい。

こんにちは、私はこの質問を読みました:

非常に大きなテキスト ファイルを読み取る場合、非同期を組み込む必要がありますか?

ネット、特に STACK OVERFLOW を掘りました !

結果はこれを行うための 14 の方法でしたが、どれも完全ではありませんでした。

最後の 2 日間で、私はこれに取り組んでおり、14 の方法をテストしてベンチマークしました。

例えば ​​：

5 MB のテキスト ファイルの場合、時間がかかりすぎます。どうすればよいですか?

ファイルをチャンク単位でバイト配列に変換する方法があることは知っています。サンプル コードは次のとおりです。

私は反対のことを探しています: バイト配列をファイルにチャンクで変換する方法です。チャンクでそれを行う例は見つかりませんでした。

「movechunk」コマンドを使用すると (その結果、バランサーが実行されている場合)、レプリカ セットのプライマリまたはセカンダリ メンバーで読み取りとロックが発生しますか?

私たちのアプリケーションは現在、セカンダリから読み取りを行っていないため、シャード バランサー / movechunk コマンドがプライマリ メンバーのパフォーマンスに影響を与えずに、セカンダリ メンバーから読み取り、ロックするだけであればよいでしょう。

私はwavファイルを読むためにこれらの方法を使用しています: http://www.labbookpages.co.uk/audio/javaWavFiles.html

それは私にエラーを与える

WavFile wavFile = WavFile.openWavFile(file);

ただし、常にではありません。別の wav ファイルを使用しようとすると、エラーが発生しないことがあります。

wav ファイルまたは openWavFile メソッドが原因ですか? WavFile コードを変更せずにこれを修正できますか?

以下のコードを使用して、既にタグ付けされ、トークン化された RSS フィードをチャンクしています。「print subtree.leaves()」は出力しています:

[('Prime', 'NNP'), ('Minister', 'NNP'), ('Stephen', 'NNP'), ('Harper', 'NNP')] [('US', 'NNP' ), ('President', 'NNP'), ('Barack', 'NNP'), ('Obama', 'NNP')] [('what\', 'NNP')] [('Keystone', 'NNP'), ('XL', 'NNP')] [('CBC', 'NNP'), ('ニュース', 'NNP')]

これはpythonリストのように見えますが、直接アクセスする方法や反復する方法がわかりません。サブツリー出力だと思います。

このサブツリーを、操作可能なリストに変換できるようにしたいと考えています。これを行う簡単な方法はありますか？Python でツリーに遭遇したのはこれが初めてで、道に迷っています。私はこのリストで終わりたい：

docs = ["首相スティーブン ハーパー"、"米国大統領バラク オバマ"、"何\"、"キーストーン XL"、"CBC ニュース"]

これを実現する簡単な方法はありますか？

いつも助けてくれてありがとう！

ワーカーが数十万のドキュメントを mongodb に並行して一括挿入するジョブ処理システムがあります。各ワーカーはデータ バッチを挿入し、各バッチは同じ group_id に属します。データベース用に 3 つのシャードをセットアップしました。これらの group_id をラウンド ロビン方式で事前に分割したいと考えています。例えば：

group_id: 1 --> シャード1

group_id: 2 --> shard2

group_id: 3 --> shard3

group_id: 4 --> シャード1

group_id: 5 --> shard2

...など

アイデアは書き込みスループットを向上させることであり、ワーカーはグループを段階的に処理するため、この事前分割により、理論的には 3 つのワーカーが互いに待機することなく並列に一括挿入できるはずです (各ワーカーにローカル mongos サーバーがあります)。 ）。

タグ付きシャーディング sh.addTagRange() コマンドを使用して上記のアイデアを実装しました。しかし、チャンクが正しく分割されていませんか? すべてが最終的にプライマリ シャードになります。これは、データを事前に分割するという目的全体を無効にします。タグ認識シャーディングがこのキー値のラウンドロビン分散を実装するための適切な方法ではない場合、誰かがその方法でデータを事前に分割するにはどうすればよいでしょうか? どんな助けにも感謝します！