問題タブ [singlestore]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
singlestore - 100 GB のデータを格納するために確保する必要があるメモリの量
各ノードに設定がある5つのリーフノードがあります
TPCH の 100GB のデータをロードしようとしていますが、ロードできません。LineItem テーブルの読み込みに失敗しました。そのカウントは 0 です。
以下は、memsql ops のステータス テーブルの図です。リーフ テーブル メモリの場合、90GB から 108GB の間で変化します。
サイズが 74 GB の LINEItem テーブルを再度ロードしようとすると、ステータス タブに、memsql が使用可能なメモリをすべて消費していると表示されます
そのため、2 倍以上のメモリ (200GB) を設定した後でも、Memsql は 100GB のデータをロードできません。ここで何が問題なのですか？いくつかの明らかなパラメータが欠けているようです。正しい設定を教えてください。
singlestore - MemSQL データベースの作成中にエラーが発生する
ダウンロード ページのビデオの説明に従って MemSQL をインストールしました。インストール中に、ポート 3306 は Master Aggregator で使用できないと通知されたので、ポートを 4000 に変更しました。そして、MySQL Workbench 経由で接続できます。
データベースを作成しようとしています:
エラーが返されます: Error Code: 1748. You must add at least one leaf to the system to run CREATE DATABASE。わかりました。Web UI に移動すると、どのノード (ポート 4000 のマスター アグリゲーターまたはポート 3307 のリーフ) も実行されていないことがわかります。
試してみATTACH LEAF '10.82.60.43':3307ましたが、戻ってきましたError Code: 1802. Leaf '10.82.60.43':3307 is currently 'offline' and cannot be attached back into the cluster until it is reachable and in the 'detached' state.
これを修正して、マスターとリーフをオンラインにして到達可能にすることはできますか?
singlestore - mesql で root パスワードを変更中にエラーが発生しました
を使用して管理者パスワードを変更しようとしていました
memsql-ops memsql-update-root-password -p <password>
しかし、私はこのエラーを受け取ります
J543a0b [エラー] パスワードの難読化を解除できませんでした</p>
私が間違っていることはありますか？
singlestore - Memsql: メモリ使用量が非常に多いのはなぜですか?
まず、私の下手な英語を許してください。
私のテスト環境:
- [centos 6.5 16G RAM] ※2
- MemSQL コミュニティ:MemSQL Ops Server バージョン:4.1.10 および MemSQL バージョン:4.1.2
- 私のクラスター画像
- リーフノード、トップ画像
ええ、たった1人のマスターと1枚の葉です。リーフノードで maximum_memory = 10G を設定しました。
質問は次のとおりです。テーブル データには 334M のメモリしか使用されていませんが、リーフ ノードは 13.34G のメモリを使用していました。何故ですか？
ちなみに私の使用シナリオは「Speed Test」と同じで一括挿入、一括削除です。
どうもありがとうございました！
memsql
apache-spark - Memsql Spark-Kafka 変換の失敗
Memsql の下で実行されている Spark クラスターがあり、さまざまなパイプラインが実行されています。ETL セットアップは以下のとおりです。
- 抽出:- Kafka クラスターからの Spark 読み取りメッセージ (Memsql Kafka-Zookeeper を使用)
- 変換:- このステップ用にデプロイされたカスタム jar があります。
- 読み込み:- 変換ステージからのデータが列ストアに読み込まれます
以下の疑問があります。
ジョブが Transform ステージで失敗した場合、Kafka からポーリングされたメッセージに何が起こるか - Memsql はそのメッセージを再度ロードしますか - または、データが失われます
データが失われた場合、この問題を解決するにはどうすればよいですか? そのために必要な構成変更はありますか?
singlestore - CentOS 6.7 で memsql アグリゲーターが起動しない
現在、memsql を評価しており、2 つのセットアップがあります。1 つは CentOS 6.7 で実行され、もう 1 つは CentOS 7.1 で実行されます。
CentOS 7.1 を使用している場合、システムの再起動後にマスターですべてのサービスが開始されますが、CentOS 6.7 バリアントでは開始されず、アグリゲーターがオフラインであることが示されます。単一サーバー クラスターで、MemSql リーフ ダウンmemsql-ops cluster-startで foundを実行する必要がありました。これがマシンの init.d/systemctl diff に関連しているかどうか疑問に思っています。どんな返信でも大歓迎です！
乾杯、μatthias