HttpWebRequest 下载网页Html代码 下载文件（Remote和FTP）Get方式
摘要：
在.net中可以使用XmlHttp，WebClient,HttpWebRequest等方式下载网页html源码。使用XmlHttp需要引用Microsoft.Xml，在使用HttpWebRequest时，如果网站使用了反爬虫技术时，则需要为此模拟一个浏览器的环境访问，才能返回相应的html源码，否则将会是空，如下所示：例如：某电子商务网站中有站内搜索查看源码或浏览器上的URL这样就可以使用GET直接请求。public class WebPageUtil { //部分网站做了反爬虫技术时，需要模拟浏览器进行返回才能获取到相应的数据，否则获取不了 private static CookieCont 阅读全文
posted @ 2011-05-28 21:42 blackcore 阅读(3779) 评论(0) 推荐(0) 编辑