巧用WebBrowser实现代码操作网页
回顾一下上一个随笔,给出了两种方法自动化操作网页
- 篡改HTML代码,加载到WebBrowser运行
- 使用Fiddle截获POST给服务器的URL和数据,使用HttpRequest类代码POST到服务器
今天给出另外一种方法,就是利用WinForm控件中的WebBrowser控件来操作页面。
这里我们会模拟一个搜索过程,打开百度网站,输入搜索关键字,在搜索结果中打开连接。
首先,我们建立一个Windows Form Application Project,并在界面上拉一个WebBrowser控件。
WebBrowser1的URL我们写成百度的地址
并设置WebBrowser加载网页完成后的事件
需要注意在这个项目中由于会用到一些操作HTML结点的类,需要引用一下的两个DLL。
然后,在后台编写WebBrowser1切换地址后的完成事件
public Form1() { InitializeComponent(); (webBrowser1.ActiveXInstance as SHDocVw.WebBrowser).NavigateComplete2 += new SHDocVw.DWebBrowserEvents2_NavigateComplete2EventHandler(Form1_NavigateComplete2); } void Form1_NavigateComplete2(object pDisp, ref object URL) { IHTMLDocument2 doc = (webBrowser1.ActiveXInstance as SHDocVw.WebBrowser).Document as IHTMLDocument2; doc.parentWindow.execScript("window.alert=null", "javascript"); doc.parentWindow.execScript("window.confirm=null", "javascript"); doc.parentWindow.execScript("window.open=null", "javascript"); doc.parentWindow.execScript("window.showModalDialog=null", "javascript"); doc.parentWindow.execScript("window.close=null", "javascript"); }
当然,还有文档加载完的事件,这里需要知道百度首页搜索框的ID和搜索按钮的ID,以方便填写关键字和执行搜索。我们查看了百度首页的源代码发现了一个用于提交搜索的Form
于是在代码中我们获取到kw并输入关键字”翁玉礼”,然后点击按钮su
private void webBrowser1_DocumentCompleted(object sender, WebBrowserDocumentCompletedEventArgs e) { HtmlDocument doc = this.webBrowser1.Document; doc.GetElementById("kw").InnerText = "翁玉礼"; doc.GetElementById("su").InvokeMember("click"); }
代码写到这里已经提交搜索了,WebBrowser也会接收这次提交后的记过,下面我们需要在结果中打开一个连接做实验。
先查看一下搜索结果的HTML源代码
private void webBrowser1_DocumentCompleted(object sender, WebBrowserDocumentCompletedEventArgs e) { HtmlDocument doc = this.webBrowser1.Document; if(doc.Url.AbsoluteUri=="http://www.baidu.com/") { doc.GetElementById("kw").InnerText = "翁玉礼"; doc.GetElementById("su").InvokeMember("click"); } if(doc.Url.AbsoluteUri.Contains("wd"))//根据URL中的 { HtmlElement table = doc.GetElementById("1");//根据搜索结果的HTML表,找到第一个搜索结果的URL,这里模拟 var html = table.Children[0].Children[0].InnerHtml; var url = html.Substring(html.IndexOf("href") + 6, html.IndexOf(" target")); this.webBrowser1.Navigate(url); } }
这样您即可自动的定时运行这个APP来操作页面了。比起使用HttpRequest来POST数据到服务端是不是更好一些呢,没有cookie的烦恼,没有脚本加密算法的烦恼。