0

指定した Google 検索に関連付けられた結果の数を並べ替えることができるプログラムを作成しようとしています。大きなテーブルが非常に速く必要なので、ループの使用を考えました。ただし、試すたびに、「System.Windows.Markup.XamlParseException」が原因でデバッガーがクラッシュします。

public long resultStat(string a)
    {
        var req = (HttpWebRequest)WebRequest.Create("https://www.google.ca/search?hl=fr&output=search&sclient=psy-ab&q=a" + a + "&btnK=");
        using (req as IDisposable)
        {
            WebResponse rep = req.GetResponse();
            Stream str = rep.GetResponseStream();
            StreamReader rdr = new StreamReader(str);
            string res = rdr.ReadToEnd();
            rdr.Close();
            //This is my code to get the number results (it works perfectly)
            int index = res.IndexOf(">Environ");
            int cond = 0;
            string final = "";
            try
            {
                while (res[++index] != '<')
                {
                    if (cond-- == 0 && res[index] != '&')
                    { final += res[index]; cond = 0; }
                    else if (res[index] == '&') cond = 5;
                }
            }
            catch { return 0; }
            string temp = "";
            foreach (char i in final) if (i < 48 && i > 58) temp += i;
            return Int64.Parse(temp);
        }
    }

このメソッド全体は、次のような for ループのメインで単純に使用されます。

public void main()
{
    //Other code
    for (int i = 0; i < 3; i++) resultStat(i.ToString()); // For example
    //Other code
}

ループをコメントするか、1 担当者に下げるとすぐに、何も問題が発生しないため、それが問題であることはわかっています。私はもう試した：

HttpWebRequest().Abort(); キープアライブ = false;

うまくいきませんでした

4

1 に答える 1

0

あなたがやっているアウェイがこれを行う正しい方法だとは思いません。私が言える簡単なことは、Lib curl c# を使用することです。URL の配列を送信して、配列として応答を取得できます。ここで必要なものに最適です。以下は、マルチタスク自体を実行するサンプル クラス コードです。URLを送るだけです。

 public class MultiHttp
{
    public static string UserAgent = "Mozilla 5.0";
    public static string Header = "Content-Type: application/x-www-form-urlencoded; charset=UTF-8";
    private static string[] Result;

    public static string[] MultiPost(string[] Url, string post, int timeOut)
    {
        Result = new string[post.Length];           
        try
        {
            Curl.GlobalInit((int)CURLinitFlag.CURL_GLOBAL_ALL);

            Easy.WriteFunction wf = new Easy.WriteFunction(OnWriteData);
            //Easy.HeaderFunction hf = new Easy.HeaderFunction(OnHeaderData);

            Easy[] easy = new Easy[Url.Length];
            Multi multi = new Multi();
            for (int i = 0; i < Url.Length; i++)
            {
                if (Url[i] != null)
                {
                    easy[i] = new Easy();
                    easy[i].SetOpt(CURLoption.CURLOPT_URL, Url[i]);
                    easy[i].SetOpt(CURLoption.CURLOPT_WRITEFUNCTION, wf);
                    easy[i].SetOpt(CURLoption.CURLOPT_WRITEDATA, i);
                    //easy[i].SetOpt(CURLoption.CURLOPT_HEADERFUNCTION, hf);
                    //easy[i].SetOpt(CURLoption.CURLOPT_HEADERDATA, i);
                    easy[i].SetOpt(CURLoption.CURLOPT_TIMEOUT, timeOut);
                    easy[i].SetOpt(CURLoption.CURLOPT_USERAGENT, UserAgent);
                    Slist sl = new Slist();
                    sl.Append(Header);
                    easy[i].SetOpt(CURLoption.CURLOPT_HTTPHEADER, sl);
                    easy[i].SetOpt(CURLoption.CURLOPT_POSTFIELDS, post);
                    easy[i].SetOpt(CURLoption.CURLOPT_FOLLOWLOCATION, true);
                    easy[i].SetOpt(CURLoption.CURLOPT_POST, true);
                    //easy[i].SetOpt(CURLoption.CURLOPT_NOBODY, true);

                    if (Url[i].Contains("https"))
                    {
                        easy[i].SetOpt(CURLoption.CURLOPT_SSL_VERIFYHOST, 1);
                        easy[i].SetOpt(CURLoption.CURLOPT_SSL_VERIFYPEER, 0);
                    }
                    multi.AddHandle(easy[i]);
                }
            }

            int stillRunning = 1;

            while (multi.Perform(ref stillRunning) == CURLMcode.CURLM_CALL_MULTI_PERFORM) ;

            while (stillRunning != 0)
            {
                multi.FDSet();
                int rc = multi.Select(1000); // one second
                switch (rc)
                {
                    case -1:
                        stillRunning = 0;
                        break;

                    case 0:
                    default:
                        {
                            while (multi.Perform(ref stillRunning) == CURLMcode.CURLM_CALL_MULTI_PERFORM) ;
                            break;
                        }
                }
            }

            // various cleanups
            multi.Cleanup();
            for (int i = 0; i < easy.Length; i++)
            {
                easy[i].Cleanup();
            }
            Curl.GlobalCleanup();
        }
        catch (Exception)
        {
            //r = ex+"";
        }
        return Result;
    }

    public static Int32 OnWriteData(Byte[] buf, Int32 size, Int32 nmemb,
        Object extraData)
    {
        int tmp = Convert.ToInt32(extraData.ToString()); ;
        Result[tmp] += System.Text.Encoding.UTF8.GetString(buf);
        return size * nmemb;
    }       
}

次のように呼び出します。

String[] url= new String[2];
url[1]="https://www.google.ca/search?hl=fr&output=search&sclient=psy-ab&q=a1&btnK=";
url[2]="https://www.google.ca/search?hl=fr&output=search&sclient=psy-ab&q=a2&btnK=";

string postString=""; // IF YOU DO NOT WANT TO POST ANYTHING YOU CAN DO THE SAME     THING KEEP URL THE SAME SEND POST ARRAY AND CHANGE THE CLASS IT WORKS BOTH WAYS
String[] result = MultiHttp.MultiPost(url, postString, timeOut);

これは単なるサンプルですが、問題を解決するための実用的なアイデアが得られます。

于 2013-08-24T19:28:37.777 に答える