none
如何Request會自動轉頁的URL呢 RRS feed

  • 問題

  •             try
                {
                    HttpWebRequest request = (HttpWebRequest)WebRequest.Create(url);
                    request.Timeout = 2000;
                    HttpWebResponse response = (HttpWebResponse)request.GetResponse();
                    ConnectCorrect++;
                    return url;
                }
                catch (Exception ex)
                {
                    ConnectInCorrect++;
                    return "Timeout";
                }
    

    針對我需要parser的網站中,有幾個網頁是會自動跳頁的(原因是因為該條列頁中若只有一筆資料就會直接連進那筆資料),

    由於我需要取得跳頁後的網址,但發現只要遇到該類型的網頁就會有timeout的exception

    請問是否有lib是有提供類似的服務的 ?

    2018年6月13日 上午 06:23

所有回覆