ActiveMQ KahaDB または LevelDB ストアのディスク容量が徐々に増加していることに気付いた人はいますか?
以下を使用しています：
- Windows Server 2008 SP1 (展開用) および Windows 7 SP1 (開発用)
- Java 1.7
- ActiveMQ 5.11.1 および 5.13.2 (KahaDB と LevelDB の両方を試しました)
- ServiceMix 5.4.0、その Karaf サーバーが Camel ベースの Java アプリケーション Bean をホストし、その ActiveMQ サーバーが未使用
- メッセージ率 = 1 秒あたり 200 個の XML メッセージが着信し、ほぼ同じ量のメッセージが発信されます (Java アプリケーション Bean によって JSON に変換されます)。
- キューの数 = 上記のメッセージを共有する約 50 のキュー。特に 2 つのキューはトラフィックの半分まで処理しています
- すべてのメッセージの設定:
- 配信の持続性 = false
- 生存時間 (TTL) = 1 分または 2 分 (最大)
カハDB
KahaDB で ActiveMQ を使用している場合、db*.log ファイルが最初に db-1.log から db-2.log に、次に db-3.log に、古い db* で "leap-frog" するのを見てきました。 .log ファイルは期待どおりにクリーンアップ (削除) されています。それから 10 時間後のある時点で、古い db*.log ファイルのクリーンアップが停止します。新しい db*.log ファイルが表示され、KahaDB は 1 日あたり約 4 GB で拡張し始めます。そして最終的に構成された 50 GB の上限に達すると、サーバーはもちろん動作を停止します。
ごく少数のメッセージが (TTL が与えられているにもかかわらず) 期限切れにならず、通常のクリーンアップがブロックされているようです。古い db*.log ファイルを手動で削除しようとしましたが、これらのファイルがまだ使用されているという警告が表示されてブロックされました。
KahaDB db*.log ファイルは、テキスト エディターで「半読み取り可能」(!) です。つまり、アプリケーション メッセージは認識できますが、実際に何が起こったのかについてはあまりわかりません。
レベルDB
私は最近、ActiveMQ 5.13.2 で LevelDB を使用してみましたが、ストアはまだかなりゆっくりではありますが (1 日あたり約 200 MB) 拡大しているように見えます。
LevelDB データ ストアは圧縮を使用していると思います。ほとんどのファイルはバイナリのように見えるため、適切なリーダー/ブラウザーがないと非常に不透明です。
KahaDB または LevelDB メッセージ ストアの非永続メッセージを読み取り/閲覧するためのツールを見つけた、または実装した人はいますか?
私たちの構成
以下は、私たちのactivemq.xmlが通常どのように見えるかです:
<beans
xmlns="http://www.springframework.org/schema/beans"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xsi:schemaLocation="http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans.xsd
http://activemq.apache.org/schema/core http://activemq.apache.org/schema/core/activemq-core.xsd">
<bean class="org.springframework.beans.factory.config.PropertyPlaceholderConfigurer">
<property name="locations">
<value>file:${activemq.conf}/credentials.properties</value>
</property>
</bean>
<bean id="logQuery" class="io.fabric8.insight.log.log4j.Log4jLogQuery"
lazy-init="false" scope="singleton"
init-method="start" destroy-method="stop">
</bean>
<broker xmlns="http://activemq.apache.org/schema/core" brokerName="XXXX" dataDirectory="${activemq.data}">
<destinationPolicy>
<policyMap>
<policyEntries>
<policyEntry topic=">" >
<pendingMessageLimitStrategy>
<constantPendingMessageLimitStrategy limit="1000"/>
</pendingMessageLimitStrategy>
</policyEntry>
<policyEntry queue=">" producerFlowControl="true" memoryLimit="1mb">
<deadLetterStrategy>
<discarding />
</deadLetterStrategy>
</policyEntry>
</policyEntries>
</policyMap>
</destinationPolicy>
<!--
<managementContext>
<managementContext createConnector="false"/>
</managementContext>
-->
<managementContext>
<managementContext createConnector="true" connectorPort="1099"/>
</managementContext>
<!--
<persistenceAdapter>
<kahaDB directory="${activemq.data}/kahadb"/>
</persistenceAdapter>
-->
<persistenceAdapter>
<levelDB directory="${activemq.data}/leveldb"/>
</persistenceAdapter>
<systemUsage>
<systemUsage>
<memoryUsage>
<memoryUsage percentOfJvmHeap="70" />
</memoryUsage>
<storeUsage>
<storeUsage limit="100 gb"/>
</storeUsage>
<tempUsage>
<tempUsage limit="50 gb"/>
</tempUsage>
</systemUsage>
</systemUsage>
<networkConnectors>
<networkConnector
uri="XXX"
networkTTL="XXX"
duplex="XXX"
prefetchSize="XXX"
userName="${networkconnector.username}"
password="${networkconnector.password}"
name="XXX" >
<excludedDestinations>
</excludedDestinations>
<staticallyIncludedDestinations>
<queue physicalName="XXX" />
<queue physicalName="XXX" />
</staticallyIncludedDestinations>
</networkConnector>
</networkConnectors>
<transportConnectors>
<transportConnector name="amqp" uri="amqp://0.0.0.0:XXXX?maximumConnections=1000&wireFormat.maxFrameSize=104857600"/>
<transportConnector name="openwire" uri="tcp://0.0.0.0:XXXX?maximumConnections=1000&wireFormat.maxFrameSize=104857600"/>
<transportConnector name="openwire-outbound" uri="tcp://0.0.0.0:XXXX?maximumConnections=1000&wireformat.maxFrameSize=104857600"/>
</transportConnectors>
<plugins>
<simpleAuthenticationPlugin>
<users>
<authenticationUser username="XXX" password="XXX" groups="XXX" />
</users>
</simpleAuthenticationPlugin>
<authorizationPlugin>
<map>
<authorizationMap>
<authorizationEntries>
<authorizationEntry topic=">" read="XXX" write="XXX" admin="XXX" />
<authorizationEntry queue=">" read="XXX" write="XXX" admin="XXX" />
<authorizationEntry queue="XXX" read="XXX" write="XXX" admin="XXX" />
<authorizationEntry queue="ActiveMQ.Advisory.>" read="XXX" write="XXX" admin="XXX" />
<authorizationEntry topic="ActiveMQ.Advisory.>" read="XXX" write="XXX" admin="XXX" />
</authorizationEntries>
<tempDestinationAuthorizationEntry>
<tempDestinationAuthorizationEntry read="tempDestinationAdmins" write="tempDestinationAdmins" admin="tempDestinationAdmins" />
</tempDestinationAuthorizationEntry>
</authorizationMap>
</map>
</authorizationPlugin>
<runtimeConfigurationPlugin checkPeriod="1000" />
</plugins>
<shutdownHooks>
<bean xmlns="http://www.springframework.org/schema/beans" class="org.apache.activemq.hooks.SpringContextHook" />
</shutdownHooks>
</broker>
<import resource="jetty.xml"/>
</beans>