問題タブ [import-from-csv]

カンマ区切りのデータファイルをMatlabに読み込む方法についてアドバイスはありますか？ヘッダー情報が複数行あるため、単純なソリューション（dlmread、fscanfなど）は機能していないようです。私が解決策に最も近いのは次のとおりです。

ここでの問題は、たとえばデータが次のようになることです。

マトリックスに変換する場合、セル内のすべての文字列は同じサイズである必要があります。そうでない場合、「vertcat」を使用したエラーが発生します。他に選択肢がない場合は、メモ帳などのヘッダーを削除することもできますが、多くのファイルがある場合、これは面倒な作業になります。

次の形式で記述されたレコードを含む .csv ファイルがあります。

これらのデータからクラスターを作成したいと思います-時間を示す数字の列を追加したいので、最初の行の場合、値15を新しい行に追加する必要があります.

最初の問題は、関数を呼び出すことです

空の行列 numData と 1 列の textData および rawData 構造を作成します。

上記のデータから yyyy、MM、dd、hh、mm、ss の値を認識するテンプレートを作成することは可能ですか?

これらのデータで基本的にやりたいことは、値を時間ごとに分類することです。入力の例の行から：

更新 1: Matlab では、上記の行は文字列として認識されます。

'2010-04-26 13:00:00,"1.0428104753e+00","2.3456394130e+00"'

これを出力にしたい：

更新 1: 文字列を解析する必要があります

文字列を解析してタイムスタンプ ('2010-04-20 15:15:00')、value1 (1.0428104753e+00)、および value2 (2.3456394130e+00) を個別の値として取得する方法を知っている人はいますか?

タブで区切られたCSV形式の2つのデータファイルがあります。ファイルは次の形式です。

EPコードは一意です。私がやりたいのは、EPコードに関して2つのファイルを比較し、異なる行を判別して、それらを新しいファイルに書き込むことです。

たとえば、file1.csvには800行、file2.csvには850行があります。file2は、file1と50行を完全に含むファイルである可能性があります。またはそれは可能性がありますfile1 - 10 rows + 60 rows。2つのデータセットの違いを確認したいと思います。相互の行には興味がありません。

どうすればRでそれを行うことができますか？

R の read.table および read.csv 関数は、区切りデータを含むファイルまたは URL を解析し、R データ フレームを生成するために使用されます。ただし、CSV で区切られたデータ (列とレコードの区切り記号としてコンマと \n を使用) を含む文字ベクトルが既にあるので、ファイルまたは URL から読み取る必要はありません。この文字ベクトルを最初にディスク上のファイルに書き込んで読み戻さずにread.table、 、read.csv、またはに渡すにはどうすればよいですか? scan()ディスクへの書き込みは可能ですが、この不要なラウンドトリップを必要とせず、文字ベクトルから直接データを読み取ることができるソリューションを探しています。

私は最近 Visual C# で遊んでいて、現在プロジェクトのアイデアを策定しています。.csv ファイルを読み込んで、そこに含まれるデータに基づいて読みやすいレポートを表示できるようにしたいと考えています。

私は C# と実際のプログラミングにまったく慣れていないので、大量のデータを処理するための最良の方法または推奨される方法 (データ レポート生成のための簡単で柔軟な操作) を考えていました。

CSVファイルを読み取るスクリプトがあります。

このスクリプトは、データを取得してhtmlテーブルに出力するだけです。テーブルを並べ替えたいだけです。たとえば、csvにはこれらのコンテンツが含まれている場合があります

0 1 2 3 4 5 6 7

0 1 2 3 4 5 6 7

0 1 2 3 4 5 6 7

0 1 2 3 4 5 6 7

私はアウトがなることを望みます：

0 0 0 0

1 1 1 1

2 2 2 2

3 3 3 3

4 4 4 4

続けてください...私はいくつかの追加のループを配置する必要があります..どうすればそれを行うことができますか？

非常に大きな CSV ファイル (150 MB) があります。それを MySQL にインポートする最良の方法は何ですか? MySQL テーブルに挿入する前に、PHP で何らかの操作を行う必要があります。

次の3列形式のデータセット（CSVファイル）があります。

そして、私は次のような3分割分割表を取得する必要があります:(申し訳ありませんが、これは完全に良く見えません）

優れた「ピボットテーブル」、OpenOfficeデータパイロット、またはR「テーブル（x、y、z）」と同様に

問題は、私のデータセットが巨大であるということです（合計500,000行を超え、AとBに約400の異なる要素があります（OOo、MSO、およびRの制限によりこれを達成できません）

Pythonスクリプトを使用して、このようなテーブルを作成できると確信しています。AとBはどちらも数値です（ただし、文字列として扱うことができます）。

誰かがこれに対処しましたか？（擬似コードまたはCまたはJavaのコードも歓迎されます...しかし、実装が高速であるため、Pythonの方が好きです:)

編集： ジョン・マチンのおかげで、ほとんどそれを持っています。次のPythonスクリプトは、私が探しているものをほぼ提供しますが、出力ファイルを書き込むと、（最初の行から取得した）「ヘッダー」の値が他の行に対応していないことがわかります。

ディスクに保存されている CSV ファイルからデータを読み取り、CSV 内のすべてのデータを .Net DataTable に入れる必要があるという要件があります。

どうすればいいですか？

次の形式の日付を持つCSVファイルがあります：2004年8月25日

quantmodパッケージの関数「periodReturn」を使用するために、これを「xts」オブジェクトとして読み取りたいと思います。

次のファイルを関数に使用できますか？

同じように私を導いてください。