問題タブ [lexer]

また、文字列リテラルとは、の\123ような文字も含むものを意味します。私は何かを書いたが、それが完璧かどうかわからない：

実際、これが完璧ではないことはわかっています。なぜなら、\ddd-like 文字を解析する 3 行では、文字自体を文字列に入れるのではなく、その表現を文字列に入れるからです。文字メソッドを使用して変換しようとするかもしれませんが、網羅的ではないかもしれません。処理しなかった他のエスケープシーケンスがあるかもしれません....そのための正規のjflexファイルがあれば完璧です。

初期トークンが部分的に固定され、部分的に一般的なルールを作成できますか?

ただし、トークン ID が var* の形式の場合のみ (var は固定)

ありがとう

文法を組み合わせています（同じファイルにレクサーとパーサーがあります）。設定するにはどうすればよいですか

レクサーに？

ありがとう

私はプログラムでいくつかの簡単な変換を実行するツール（extractメソッドなど）に取り組んでいます。これを行うには、コンパイルの最初のいくつかのステップ（トークン化、解析、場合によってはシンボルテーブルの作成）を実行する必要があります。Cから始めて、うまくいけば、これを拡張して複数の言語をサポートします。

私の質問は、これらの手順を実行するための最良の方法は何ですか？

1.）車輪の再発明はしません。明らかに、Flex/Bisonの仕様を手作業で書きたくありません。既存の仕様を取得してそこから作業するだけですか？Antlrはここに行く方法ですか？

2.）複数の言語に拡張可能です。もちろん、字句解析/構文解析は人によって異なりますが、他の言語に簡単に拡張できるソリューションが必要です。少なくとも、これを管理しやすくする一連のテクノロジー。

ところで、私はアプリケーションを書くためにCを使用しています

誰かが素晴らしいアイデアを持っているなら！ありがとう！

ANTLR 用の既存の C++ 文法ファイルはありますか?

一部の C++ ソース コード ファイルを解析するのではなく、lex を探しています。

ANTLR 文法ページを調べたところ、Sun Microsystems によって作成されたものがここにリストされているようです。

ただし、生成されたパーサーのようです。

C++ ANTLR レクサーまたは文法ファイルを教えてもらえますか?

この文法の違いは何ですか：

この：

？

違いがある場合、これはパフォーマンスに影響を与えるため...ありがとう

トークンを作成できますか

PREENDPLUS に含めずにトークンが前にある場合にのみ、レクサーによって考慮されますか?

ありがとう。

この文字列として内部で再帰を処理できるレクサーでトークンを作成するにはどうすればよいですか。

?

antlr3の「島の文法」とは何ですか?

現在、正規表現を使用してドキュメントをトークンに解析しようとしています。

現在、ドキュメント内のキーワードを一致させようとしています。たとえば、次のドキュメントがあります。

一致する必要があるキーワードは、Func、Return、および EndFunc です。

次の正規表現を思いつきました: (\s|^)(Func)(\s|$) は Func キーワードに一致しますが、希望どおりには機能しません。空白も一致します!

空白をキャプチャせずに一致させるにはどうすればよいですか?