問題タブ [aggregation]

アグリゲーション、コンポジション、依存関係など、さまざまなタイプのアソシエーションの違いは何ですか? コード例 (Java、C++、または疑似コード) を使用して説明します。

データベーステーブルの1つに10列（pile_1からpile_10）があるRubyonRailsアプリを開発しています。モデル内のこれらの列に10要素の配列としてアクセスすると便利です。

composed_of自分のやりたいことを強要できるはずなのに、どうしたらいいのかわからない。誰かが私を啓発したり、より良い戦術を提案したりできますか？

Google Analytics、Twitter、YouTube、Facebookなどの統計を含む特定の統計を追跡したいビデオブログがあります。

問題は、さまざまな統計情報がさまざまなWebサイトにあり、さまざまなログインが必要になることなどです。実際にすべてを表示するには長い時間がかかります。このすべての情報を1か所に集約できる方法を探しています。

Google、Mashable、Deliciousなどでかなり検索しましたが、自分がやりたいことを実行するWebサイトは見つかりませんでした。私の検索スキルは悪いですか、それともこれは本当に存在しませんか？

私が興味を持っているデータは、簡単に解析できる形式で入手できるようです（以下を参照）が、すでにフルワークロードを超えているため、これを行うためのアプリを自分で作成することを躊躇しています。

集計したいデータ：

• GoogleAnalytics-私のウェブサイトで追跡

  • 訪問者数
  • トラフィックソース
  • データエクスポートAPIを使用する-http://code.google.com/apis/analytics/docs/gdata/gdataDeveloperGuide.html

• ツイッター

  • フォロワー数
  • リツイート数
  • 新しい@メッセージ
  • 新しいダイレクトメッセージ
  • Twitter API-（申し訳ありませんが、私は新しいため、ハイパーリンクを1つしか投稿できません）

• Facebookのファンページ

  • ファンの数
  • 壁に新しい投稿
  • Facebook API-（申し訳ありませんが、私は新しいため、ハイパーリンクを1つしか投稿できません）

• タンブラー

  • フォロワー数

• ビデオ

  • ビューの数
  • 場所を表示
  • コメント数
  • チャネルサブスクライバーの数
  • のためにこれを行う
    • YouTube-CSVレポートはで入手できます（申し訳ありませんが、私は新しいため、ハイパーリンクを1つしか投稿できません）
    • MetaCritic

• フィードバーナー（RSS）

  • 加入者数
  • CSVレポートはで入手できます（申し訳ありませんが、私は新しいため、ハイパーリンクを1つしか投稿できません）

• SEOのもの

  • Google PageRank
  • Alexaランキング

それで、これをすでに実行しているアプリはありますか、それとも私はこれを自分で実行する必要がありますか？これを行うための迅速で汚い方法が欲しいのですが、Yahooパイプのようなものを考えていましたが、それはうまくいかないようです。私はおそらくGrailsでそれを成し遂げることができたでしょう、しかしそれはそれが価値があるよりもっと厄介かもしれません。他のアイデア？

(私は C# を使用していますが、これは必ずしもプラットフォーム固有ではありません)

キーのトリプレット（A、B、C）によってインデックス付けされた値のテーブルがあるとします。表の値は、散発的な間隔で外部ソースからストリーミングされています。たとえば、B = b1 のすべての値の合計を計算します。

毎回テーブル全体を反復処理するだけであれば、これは簡単ですが、明らかに効率的ではありません。私が疑問に思っているのは、sum(B = b1)この合計に影響するテーブルの値が変更されたときにのみ更新するように設計する特に良い方法はありますか? その集約に含まれるすべての値のリストを保持する何らかのAggregationオブジェクトを作成する必要があるようですが、私を逃れているもっとエレガントな方法があるかもしれないと感じています. 「リアルタイム」LINQクエリのようなもの...

OK、YQL、Yahoo Pipes などについては知っています。しかし、jQueryとjavascriptとJSONをよく知っている人にとっての「ショートカット」は何だろうと思っています。これらのツールを使用して複数の RSS フィードを集約し、結果を照会する一般的なソリューションのアーキテクチャはどのようなものでしょうか?

これらのクエリを保存して、URL として特定のユーザーに送信できるようにしたいと考えています。はい、私はYahooの「コンソール」のこの「スマック」を知っていますが、それはGUIなどを作るためだけに、あまりにも多くのコードビハインドです.

それとも、すでに「魔法の弾丸」がありますか？いくつかのjQueryプラグインまたは同様の「もの」? 少なくともタスクの一部については？

ありがとう --DBJ

私は（議論のために）個人、電子メール、属性の3つのテーブルを持っています。個人_個人を電子メールおよび属性にリンクする外部キーを参照します。

特定の個人が属性テーブルに表示される必要はありません。属性が追加されたことがない可能性があり、複数の属性がある場合は複数回表示される可能性があるためです。

個々の参照のリストとそれらの特定の属性の数を取得したいと思います。ただし、個人がメールアドレスを共有することは許可されているため、メールアドレスで検索する必要があります（始めないでください）...

私の最初の刺し傷は

左結合を使用して、電子メールに個別の参照が存在する場合はそれを取得し、電子メールに個別の参照が存在するが属性にはない場合に結果を取得するようにします。または、これは行を返さないので、私は思ったが...

個人_Refとカウントが0の1行を返します

私の理解よりもSQLが壊れていることを示唆しているわけではないので、「私の混乱は何ですか？」と思います。質問です。

2 つの一般的な API に接続するシステムがあります。それぞれのデータを集約して、ページ付けできる統一された結果にする必要があります。プロジェクトの範囲は、システムが数十の API をサポートすることになる可能性があることを意味します。

各 API では、リクエストごとに最大 50 件の結果に制限されています。

このデータを集計して信頼できるようにする最善の方法は何ですか。つまり、順序付けられている、重複がないなど

LAMP 環境で CakePHP フレームワークを使用していますが、この質問はすべてのプログラミング言語に関係すると思います。

これまでの私のアプローチは、各プロバイダーの検索 API を照会してから、MySQL テーブルに入力することです。これから、結果は順序付けられ、ページ分割されます。ただし、私の懸念はパフォーマンスです。API 通信、解析、挿入、およびすべてを 1 回の実行で読み取ることです。

私は何かが欠けていますか、誰か他にアイデアはありますか? これは、多くの代替ソリューションに共通の問題であると確信しています。

どんな助けでも大歓迎です。

RSS フィードからの更新をチェックするポーリング サービスを Java で構築しようとしています。

新しいアイテムを検出すると、システム内の新しいアイテムのみを送信する必要があります。

これを行う API はありますか、それとも比較チェックを自分で行う必要がありますか?

現時点では、私のポーラーは、システムで重複を引き起こしていると現在認識しているものを返すだけです。

各グループの概要を記載したレポートを作成しようとしています。例えば：

TOTAL列以外のすべてを実行できるクエリがあります。

グループの概要を取得する方法がわかりません。この場合、IDのグループごとにCOUNTの合計を取得しようとしています。

アップデート：

グループはタイプ別です。元の投稿でそれを忘れました。

TOTALは、各グループのSUM（COUNT）です。

複数のノードのログ ファイル (私の場合は apache アクセスとエラー ログ) からエクスポートし、そのデータをスケジュールされたジョブとしてバッチで集計したいと考えています。私は、ストリーミング データで動作する複数のソリューションを見てきました (つまり、スクライブを考えてください)。目的地を柔軟に定義できるツールが欲しい。この要件は、宛先として HDFS を使用したいという事実から来ています。

これをバッチでサポートするツールを見つけることができませんでした。ホイールを再作成する前に、StackOverflow コミュニティに意見を求めたいと思いました。

解決策が既に Python に存在する場合は、さらに良いでしょう。