c++ - 10億以上のレコードをメモリにロードするC++プログラム?

Question

データベースに 1 年分のオプション価格があり (権利行使価格、ボラティリティなどの他の情報と共に)、それをメモリにロードしてプログラムで処理できるようにしたいと考えています (ハッシュ マップ、プログラムは C++ で記述されています)。 . 問題は、起動時に (ローカル データベースから) メモリにロードするのに 10 時間以上かかることです。

誰かがこの問題を克服する方法を提案できますか? 必要な部分だけをロードする回避策がありますが、人々が問題に対するアイデアを共有できれば素晴らしいと思います. 各起動後に共有メモリからデータをロードすることは役に立ちますか?

これまでのコードは次のとおりです。つまり、データベースにクエリを実行し、データをコンテナにロードします

    const std::string m_url = "mysql://localhost/test2?user=root&password=";
    URL_T optionURL = URL_new(m_url.c_str());
    ConnectionPool_T optionPool = ConnectionPool_new(optionURL);
    ConnectionPool_setInitialConnections(optionPool,1);
    ConnectionPool_setMaxConnections(optionPool,1);
    ConnectionPool_start(optionPool);
    Connection_T con = ConnectionPool_getConnection(optionPool);
    ResultSet_T result = Connection_executeQuery(con,
                                                 "SELECT DISTINCT(underlying) FROM  Options");
    PreparedStatement_T prepareStatement = Connection_prepareStatement(con,"SELECT  underlying,underlyingPrice,expiry,strike,issueDate,type,delta,volatility FROM Options  o,RiskFreeRate r WHERE underlying = ? AND o.issueDate = r.date");

    while(ResultSet_next(result))
    {
        const std::string symbol = ResultSet_getString(result,1);
        PreparedStatement_setString(prepareStatement,1,symbol.c_str());
        ResultSet_T resultDetail  = PreparedStatement_executeQuery(prepareStatement);
        while(ResultSet_next(resultDetail))
        {
            float strike = ResultSet_getDouble(resultDetail,4);
            date expiry = from_string(ResultSet_getString(resultDetail,3));
            std::string issueDate = ResultSet_getString(resultDetail,5);
            float underlyingPrice = ResultSet_getDouble(resultDetail,2);
            float riskFreeRate = 4; //tmp hack
            float volatility = ResultSet_getDouble(resultDetail,8);
            OptionDateMap optionMap = m_optionMap[symbol];
            OptionVec optionVec = optionMap[issueDate];
            optionVec.push_back(boost::shared_ptr<WallStreet::FixedIncome::Option::Option> (new WallStreet::FixedIncome::Option::Option(strike,expiry,underlyingPrice, riskFreeRate,volatility)));
            optionMap[issueDate] = optionVec;
            m_optionMap[symbol] = optionMap;

    }
}