問題タブ [data-dump]

現在、Vim を使用してSO のデータ ダンプを読み取ります。ただし、数行だけロールダウンすると、Macbook の速度が低下します。これは、データを読み取るためのより効率的な方法が必要であることを示唆しています。

私はMySQLをほとんど知りません。ファイルは .xml 形式です。現時点では、.xml でデータを読み取るのはかなり困難です。xml ファイルを MySQL に変換してからファイルを読み取る方が効率的かもしれません。そのようなアクションについては、MS db -tool しか知りません。ただし、別のツールも知りたいです。

問題

1. MySQL が理解できるように .xml を SQL クエリに解析します。データのデータ構造を知る必要があります。
2. MySQL でデータを実行するには
3. データを効果的に読み取ることができる MS db -tool に似たツールを見つける

SO のデータ ダンプを効果的に読み取る方法を教えてください。

--

[編集]

1. ターミナルでデータベースを作成するために523 の SQL クエリを実行するにはどうすればよいでしょうか? 現時点では、テキストファイルにコマンドがあります。
2. データベースで [リカバリ モード] を単純なリカバリ モードに切り替えるにはどうすればよいですか?

最近、SO Data Dumpをダウンロードし、それをXMLから.NETアプリケーションで使用できるDBに変換する方法を考えていました。

私はかなり興味深いデータセットを操作しようとしています。残念ながら、それを開いて有用な形式に変換するのに問題があります。アーカイブされた txt ファイルのコレクションです。それらを解凍してtxtファイルを開こうとすると、「バイナリファイルです。保存するとファイルが破損する可能性があります」と表示され、読み取れません-「奇妙な文字」だけがあり、手動で読み取ることはできません。grep を使用しようとしましたが、バイナリであるとも不平を言っています。それをmysqlデータベースにインポートしようとしましたが、実行しようとする LOAD DATA LOCAL INFILE ‘/path/to/file.txt’ INTO TABLE tablenameとERROR 1064 (42000). 開くために何をすればよいかわかりません。

Stackoverflowデータ ダンプを手に入れたところですが、投稿の Body フィールドが Markdown ではなく HTML になっていることにがっかりしています。回答を編集しようとすると表示されるので、元のデータベースに Markdown があると思われます。

大量の回答から Markdown を回復したい。コマンド ライン ツールまたはある種の Lua または C ライブラリを使用して、バッチ モードで何百ものエントリを処理するので、wmd Markdown エディタのような対話型ツールは適していません。Stackoverflow のデータ ダンプから Markdown を復元するのに役立つツールを教えてください。

(関連する質問、重複ではありません: wmd 内で HTML を Markdown に戻します。)

データベース (Microsoft SQL Server) 内のいくつかのテーブルの SQL Server ダンプを実行しようとしています。DBへの書き込みアクセス権がないため、当初考えていたことができません（一時データベースを作成し、テーブルをコピーします（一時データベースに不要な列を差し引いて、そのデータベースをダンプします））。これを行う方法が本当にわかりません。

csv エクスポートが機能しません (データを正しいフィールド b/c 改行に入れることはほとんど不可能です)。

任意のヒント？

フィクスチャをロードしようとしていますが、myproject が CLI でエラーになり、インデクサー プロセスを開始しています。

私が試してみました：

• スキーマとモデルの再構築
• データベースを空にして再起動する
• キャッシュのクリア
• YML ファイルの検証と、より単純なデータ ダンプの試行

私のプラットフォームは Windows 上の Symfony 1.0 です

また、過去に同じ問題が発生したようです。

doctrine:data-dump でデータベースをエクスポートすると、2 つの問題が発生します: * 主キーがエクスポートされない * 外部キー列の正しい名前の代わりに、外部テーブルの名前が使用されます。

たとえば、ここに私のテーブルがあります：

ダンプすると、data.yml に次のようなものが見つかります。

それをデータロードすると、機能しません (指定された無効な行キー: (solarsystem) _1、(planet) Planet_1 で参照)。次のように手動で修正する必要があります。

とりあえず、手動でdata.ymlを修正しているのですが、どんどんレコードが溜まっていくのが面倒くさい…。

注: Symfony 1.4、Doctrine、postgreSQL、NetBeans、Windows を使用しています。役に立つと判断した情報を気軽に尋ねてください。

ご協力いただきありがとうございます

現在、センサー データをデータベースにダンプしています。これは生データであり、エンド ユーザーにとって意味のあるものにするためには、方程式を適用する必要があります。私が抱えている問題は、まだ式のほとんどを知らないことです。また、新しいセンサーがシステムに追加されたときに、ユーザーがキャリブレーション方程式を入力できるように、プログラムを十分に柔軟にしたいと考えています。生データを有用なものに変換できます。

ユーザーが数式を入力してデータを操作できるようにしたことはありません。役立つ情報をいただければ幸いです。ラムダ式ツリーを試したり、方程式を評価して CodeDom を使用してコンパイルしたり、別の方向を見たりする必要がありますか? 私はラムダ式ツリーまたは CodeDom のどちらもあまり使用したことがなく、いつものようにかなりタイトなスケジュールで作業しているため、学習曲線は重要です。後で戻って改善する機会があります。彼らは今のところ稼働する必要があるだけです.

ご意見ありがとうございます。

.sql ファイルがあります。これは 4 年前のデータベースのバックアップです。この .sql ファイルには、テーブルの作成だけでなく、データ ダンプも含まれています。私は実際にはデータを必要とせず、欲しくないので、.sql ファイルからすべてのデータ ダンプを抽出する方法を探しています。そのため、テーブル アーキテクチャのみを復元しています。

.sql ファイルは cPanel バックアップ サービスによって生成されたと思います。

これを行う自動化された方法はありますか？.sql ファイルには膨大な行数があるため、手動では実行できません。

予約語（read、write）を含む2列のテーブルがありますが、はい、教育目的でそのまま行う方法があるかどうかを確認したい列名を変更できます:-)

これらのテーブルをロードしてモデルを構築しても問題はありません。Symfony は YAML ファイルからテーブルを読み取ることに問題はありません。適切にreadダニに入れますが、それでも愛はありません。

だから私の質問は、エスケープ文字を使用するオプションですか、またはこれらの特殊文字を考慮してデータダンプを提供する他のオプションですか、またはデータダンプからテーブルを除外する方法はありますか?

どんな助けでも大歓迎です！