Sånt är inte så svårt. Har du kollar
HÄR?
Frågan är, egentligen, om du vill gömma dig eller inte (besöka 2k sidor är GANSKA ovanligt för användare).
Finns Awesomium och Selenium (plus HttpWebRequest / WebClient / HttpClient /WebBrowserControl i .NET)
Lite inspiration:
Swedish Real Estate Prices | rvest, RSelenium, ggplot2