Парс через Html Agility Pack

220

26 июля 2017, 20:19

Требуется спарсить города(сайт и xPath указаны в коде), но парсятся пустые строки(есть только outerhtml = " option value="spb> < /option" " - для питера, но нужен именно полное название - Санкт-Петербург ), как предполагаю, города загружаются через JS, поэтому их при парсе нет. вопрос очевиден: как все-таки спарсить города?

var web = new HtmlWeb();
        var document = web.Load("https://finance.rambler.ru/currencies/exchange-{city.Value}");
        var nodes = document.DocumentNode.SelectNodes("/html/body/div/main/section/section/section/section/table/tbody/tr/td/div");

ПЫ на сайте outerhtml = "option value="spb">Санкт-Петербург< /option"

Answer 1

HtmlWeb web = new HtmlWeb();
HtmlDocument doc = web.Load("https://finance.rambler.ru/currencies/exchange/");
foreach (HtmlNode node in doc.DocumentNode.SelectNodes("//select[@class='towns standart-selector']//option"))
{
    string cityValue = node.Attributes["value"].Value;
    string cityName = node.NextSibling.InnerText;    
}