問題タブ [lexical]

Python-NLTK は入力文字列を認識し、空白だけでなく内容にも基づいて解析できますか? この状況で「コンピュータシステム」がフレーズになったとしましょう。誰でもサンプルコードを提供できますか?

input String : "コンピュータ システムの応答時間に関するユーザーの意見の調査"

期待される出力: ["A", "survey", "of", "user", "opinion", "of", "computer system", "response", "time"]

Haskell の文字列に文字 ('A') を挿入しようとしています。私のコードは次のとおりです。

ただし、それ以外の行で「文字 '\8220' で字句エラー」がスローされ続けます。私はHaskellを初めて使用し、助けていただければ幸いです。

したがって、私はこれを修正するために高低を調べましたが、何も機能していないようです. 100% 動作するプロジェクトがありますが、それを別の Mac に転送すると、次のエラーが発生します。Pinterest.h ファイルが見つかりません。ただし、このファイルは実際には存在し、なぜこのエラーが発生するのか意味がありません。ビルドのクリーニング、ビルド フォルダーのクリーニング、xcode の再起動、ビルド パスの確認を試みましたが、この問題がわかりません。エラー画像はこちら

これがエラーの原因となっているクラスの画像です

文字通り、これに関するヘルプは驚くべきものです。それが役立つ場合、私はシェアキットを使用しています。

私は、いくつかのコードを含むファイルを取り込んで、その中のトークンを識別し、それらを特定の形式で出力する必要がある課題に取り組んでいます。これまでのところ、ファイルから文字を取得し、配列リストに追加しました。今、ファイル内の特定のトークンを見つけるためのロジックを考え出すのに苦労しています。配列リストを調べるには、最初にループを作成する必要があることを知っています。私のanalyzeForTokensのコメントに私のロジックの概要があります。forループの最初の反復がチェックされ、2番目の反復で再度チェックされるため、重複があるように感じるため、各タイプを1回だけ通過させて追加する方法がわかりません。どうすればこの問題を解決できますか?

編集: 入力ファイルと出力は次のようになります。入力：

出力：

Javaを使用して字句解析器を実装しています。「String palavras_reservadas」の中には、変数の名前付けなどに使用できないすべての予約語があります。マッチャーは、入力コード内の予約語を見つける責任があります。入力コードのすべての行を、「vetor1」という ArrayList の別の位置に配置しました。この「vetor1」は、予約語が 1 つ見つかった時点で分割したいと考えています。たとえば、入力として次のコードがあります。

私のコードは、各行を配列の異なる位置に配置します。

そして、私がやりたいことは次のとおりです。

（またはそのようなもの）。これを行うために分割を使用できますか?

これは私がこれまでに持っているものです: