python - Python Context Free Grammar と PCFG 生成のベンチマーク?

Question

Python で一般的な CFG と PCFG に使用するさまざまな関数があることは知っています。ただし、それらはすべて速度が異なるようです。

例: NLTK、PyParsing。

速度とメモリ使用量に関連するさまざまな属性を比較する最近のベンチマークはありますか?

Answer 1

他のコンピューティング ソフトウェアと同様に、NLP ツールの公式ベンチマークを検討している場合は、非常に落胆するかもしれません。悲しいことに、NLP の研究者は精度システムをリアルタイム以上に推し進めようとしています。（研究I score X% more than the state-of-artよりもそう言った方が確かにいいです）。I save Y hrs / days training my model

多くの場合、彼らの研究論文には、システムのトレーニングにかかる​​時間を示す 1 つの文が含まれています (例: In average, the sampling program run on the Wikipedia dump consumed 20G memory, and each round took about one week on a single AMD Dual-Core 1000MHZ processor.www.aclweb.org/anthology/P10-1116.pdf )。

とにかく、いくつかのベンチマークが必要なので、グーグルでできる宿題の一部を以下に示します =) www.aclweb.org/anthology/I11-1100。しかし、もう一度、速度ではなく精度をベンチマークしていることに気付きました =)