java端模拟http的get、post请求（转）

Servlet是SUN指定的Java服务器端编程规范，用以处理来自客户端的请求，处理并做出响应的一套基础API。Servlet是运行在Servlet容器中的Java小程序，容器运行在服务器端，服务器侦听特定端口的请求，并解析请求地址，将请求对象送给容器中的Servlet来执行，这个原理非常简单，平时我们多以在浏览器中输入URL地址，提交表单方式来实现，现在我们用Java语言来模拟常用的GET和POST请求，来更底层的看看Servlet，这就是C/S模型了，其实Java Web不拘泥于B/S模型，想做C/S程序也是可以的。 
    要模拟请求这就用到了Java网络编程中的一些知识，创建一个URL对象，获得URL连接对象，设置请求参数；有了连接还要处理和传递信息，那么还需要I/O方面的知识；GET/POST是HTTP协议中定义的方法，那么我们还应该了解HTTP协议请求报文的相关内容，这里不细说它们，只根据代码实例来看看基本原理。 
    创建一个Client类，定义两个基本方法。 

Java代码   收藏代码
  1. /** 
  2.  * 用于模拟HTTP请求中GET/POST方式 
  3.  *  
  4.  * @author Sarin 
  5.  *  
  6.  */  
  7. public class Client {  
  8.     /** 
  9.      * 发送GET请求 
  10.      *  
  11.      * @param url 
  12.      *            目的地址 
  13.      * @param parameters 
  14.      *            请求参数，Map类型。 
  15.      * @return 远程响应结果 
  16.      */  
  17.     public static String sendGet(String url, Map<String, String> parameters) {  
  18.     }  
  19.   
  20.     /** 
  21.      * 发送POST请求 
  22.      *  
  23.      * @param url 
  24.      *            目的地址 
  25.      * @param parameters 
  26.      *            请求参数，Map类型。 
  27.      * @return 远程响应结果 
  28.      */  
  29.     public static String sendPost(String url, Map<String, String> parameters) {  
  30.     }  
  31.   
  32.     /** 
  33.      * 主函数，测试请求 
  34.      *  
  35.      * @param args 
  36.      */  
  37.     public static void main(String[] args) {  
  38.   
  39.     }  
  40. }  


    下面，我们来实现这两个方法，先看看GET，比较简单： 

Java代码   收藏代码
  1. /** 
  2.      * 发送GET请求 
  3.      *  
  4.      * @param url 
  5.      *            目的地址 
  6.      * @param parameters 
  7.      *            请求参数，Map类型。 
  8.      * @return 远程响应结果 
  9.      */  
  10.     public static String sendGet(String url, Map<String, String> parameters) {  
  11.         String result = "";// 返回的结果  
  12.         BufferedReader in = null;// 读取响应输入流  
  13.         StringBuffer sb = new StringBuffer();// 存储参数  
  14.         String params = "";// 编码之后的参数  
  15.         try {  
  16.             // 编码请求参数  
  17.             if (parameters.size() == 1) {  
  18.                 for (String name : parameters.keySet()) {  
  19.                     sb.append(name).append("=").append(  
  20.                             java.net.URLEncoder.encode(parameters.get(name),  
  21.                                     "UTF-8"));  
  22.                 }  
  23.                 params = sb.toString();  
  24.             } else {  
  25.                 for (String name : parameters.keySet()) {  
  26.                     sb.append(name).append("=").append(  
  27.                             java.net.URLEncoder.encode(parameters.get(name),  
  28.                                     "UTF-8")).append("&");  
  29.                 }  
  30.                 String temp_params = sb.toString();  
  31.                 params = temp_params.substring(0, temp_params.length() - 1);  
  32.             }  
  33.             String full_url = url + "?" + params;  
  34.             System.out.println(full_url);  
  35.             // 创建URL对象  
  36.             java.net.URL connURL = new java.net.URL(full_url);  
  37.             // 打开URL连接  
  38.             java.net.HttpURLConnection httpConn = (java.net.HttpURLConnection) connURL  
  39.                     .openConnection();  
  40.             // 设置通用属性  
  41.             httpConn.setRequestProperty("Accept", "*/*");  
  42.             httpConn.setRequestProperty("Connection", "Keep-Alive");  
  43.             httpConn.setRequestProperty("User-Agent",  
  44.                     "Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 6.1)");  
  45.             // 建立实际的连接  
  46.             httpConn.connect();  
  47.             // 响应头部获取  
  48.             Map<String, List<String>> headers = httpConn.getHeaderFields();  
  49.             // 遍历所有的响应头字段  
  50.             for (String key : headers.keySet()) {  
  51.                 System.out.println(key + "\t：\t" + headers.get(key));  
  52.             }  
  53.             // 定义BufferedReader输入流来读取URL的响应,并设置编码方式  
  54.             in = new BufferedReader(new InputStreamReader(httpConn  
  55.                     .getInputStream(), "UTF-8"));  
  56.             String line;  
  57.             // 读取返回的内容  
  58.             while ((line = in.readLine()) != null) {  
  59.                 result += line;  
  60.             }  
  61.         } catch (Exception e) {  
  62.             e.printStackTrace();  
  63.         } finally {  
  64.             try {  
  65.                 if (in != null) {  
  66.                     in.close();  
  67.                 }  
  68.             } catch (IOException ex) {  
  69.                 ex.printStackTrace();  
  70.             }  
  71.         }  
  72.         return result;  
  73.     }  


    注释都很详细了，只是要说一点，GET方式提交的参数是绑定在URL中的，所以这部分要单独处理，进行转码，参数是Map类型，那么我们遍历这个Map获取参数，并拼装成?,&的格式就行了。 
    下面来看POST，这个复杂一点： 

Java代码   收藏代码
  1. /** 
  2.      * 发送POST请求 
  3.      *  
  4.      * @param url 
  5.      *            目的地址 
  6.      * @param parameters 
  7.      *            请求参数，Map类型。 
  8.      * @return 远程响应结果 
  9.      */  
  10.     public static String sendPost(String url, Map<String, String> parameters) {  
  11.         String result = "";// 返回的结果  
  12.         BufferedReader in = null;// 读取响应输入流  
  13.         PrintWriter out = null;  
  14.         StringBuffer sb = new StringBuffer();// 处理请求参数  
  15.         String params = "";// 编码之后的参数  
  16.         try {  
  17.             // 编码请求参数  
  18.             if (parameters.size() == 1) {  
  19.                 for (String name : parameters.keySet()) {  
  20.                     sb.append(name).append("=").append(  
  21.                             java.net.URLEncoder.encode(parameters.get(name),  
  22.                                     "UTF-8"));  
  23.                 }  
  24.                 params = sb.toString();  
  25.             } else {  
  26.                 for (String name : parameters.keySet()) {  
  27.                     sb.append(name).append("=").append(  
  28.                             java.net.URLEncoder.encode(parameters.get(name),  
  29.                                     "UTF-8")).append("&");  
  30.                 }  
  31.                 String temp_params = sb.toString();  
  32.                 params = temp_params.substring(0, temp_params.length() - 1);  
  33.             }  
  34.             // 创建URL对象  
  35.             java.net.URL connURL = new java.net.URL(url);  
  36.             // 打开URL连接  
  37.             java.net.HttpURLConnection httpConn = (java.net.HttpURLConnection) connURL  
  38.                     .openConnection();  
  39.             // 设置通用属性  
  40.             httpConn.setRequestProperty("Accept", "*/*");  
  41.             httpConn.setRequestProperty("Connection", "Keep-Alive");  
  42.             httpConn.setRequestProperty("User-Agent",  
  43.                     "Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 6.1)");  
  44.             // 设置POST方式  
  45.             httpConn.setDoInput(true);  
  46.             httpConn.setDoOutput(true);  
  47.             // 获取HttpURLConnection对象对应的输出流  
  48.             out = new PrintWriter(httpConn.getOutputStream());  
  49.             // 发送请求参数  
  50.             out.write(params);  
  51.             // flush输出流的缓冲  
  52.             out.flush();  
  53.             // 定义BufferedReader输入流来读取URL的响应，设置编码方式  
  54.             in = new BufferedReader(new InputStreamReader(httpConn  
  55.                     .getInputStream(), "UTF-8"));  
  56.             String line;  
  57.             // 读取返回的内容  
  58.             while ((line = in.readLine()) != null) {  
  59.                 result += line;  
  60.             }  
  61.         } catch (Exception e) {  
  62.             e.printStackTrace();  
  63.         } finally {  
  64.             try {  
  65.                 if (out != null) {  
  66.                     out.close();  
  67.                 }  
  68.                 if (in != null) {  
  69.                     in.close();  
  70.                 }  
  71.             } catch (IOException ex) {  
  72.                 ex.printStackTrace();  
  73.             }  
  74.         }  
  75.         return result;  
  76.     }  


    这中间就是设置POST方式时要开启两个选项，不能忘了。而且POST方式提交参数，参数是在请求体中发送的，就是和GET的区别。模拟好了两个方法，下面我们来写Servlet，这就很简单了，我们使用Servlet 3： 

Java代码   收藏代码
  1. package servlet;  
  2.   
  3. import java.io.IOException;  
  4. import java.io.PrintWriter;  
  5. import javax.servlet.ServletException;  
  6. import javax.servlet.annotation.WebServlet;  
  7. import javax.servlet.http.HttpServlet;  
  8. import javax.servlet.http.HttpServletRequest;  
  9. import javax.servlet.http.HttpServletResponse;  
  10.   
  11. @WebServlet(name = "HelloWorld", urlPatterns = { "/HelloWorld" })  
  12. public class HelloWorld extends HttpServlet {  
  13.   
  14.     @Override  
  15.     protected void doGet(HttpServletRequest request,  
  16.             HttpServletResponse response) throws ServletException, IOException {  
  17.         request.setCharacterEncoding("UTF-8");  
  18.         response.setCharacterEncoding("UTF-8");  
  19.         PrintWriter out = response.getWriter();  
  20.         response.setContentType("text/html;charset=UTF-8");  
  21.         String name = request.getParameter("name");  
  22.         out.println("Hello " + name);  
  23.         out.println("This is the output from doGet method!");  
  24.     }  
  25.   
  26.     @Override  
  27.     protected void doPost(HttpServletRequest request,  
  28.             HttpServletResponse response) throws ServletException, IOException {  
  29.         request.setCharacterEncoding("UTF-8");  
  30.         response.setCharacterEncoding("UTF-8");  
  31.         PrintWriter out = response.getWriter();  
  32.         response.setContentType("text/html;charset=UTF-8");  
  33.         String name = request.getParameter("name");  
  34.         out.println("Hello " + name);  
  35.         out.println("This is the output from doPost method!");  
  36.     }  
  37. }  


    下面就是测试了，用GET方式测试时，参数是英文没有问题，可是出现中文时，也转码了，但没有配置的Tomcat依然读取的是乱码，不要忘了配置Tomcat的server.xml： 

Xml代码   收藏代码
  1. <Connector port="8080" protocol="HTTP/1.1"   
  2.            connectionTimeout="20000"   
  3.            redirectPort="8443" URIEncoding="UTF-8"/>  


    加一个URIEncodeing选项就可以了，这样走GET请求编码就正常了，这也是Ajax走GET提交时不设置依然是中文乱码的一个原因，这一般情况想不到。 
    好了，我们来测试GET请求，写主函数： 

Java代码   收藏代码
  1. /** 
  2.      * 主函数，测试请求 
  3.      *  
  4.      * @param args 
  5.      */  
  6.     public static void main(String[] args) {  
  7.         Map<String, String> parameters = new HashMap<String, String>();  
  8.         parameters.put("name", "sarin");  
  9.         String result = sendGet("http://localhost:8080/servlets/HelloWorld",  
  10.                 parameters);  
  11.         System.out.println(result);  
  12.     }  


    在控制台，我们就得到了如下的输出： 

Java代码   收藏代码
  1. http://localhost:8080/servlets/HelloWorld?name=sarin  
  2. null    ：   [HTTP/1.1 200 OK]  
  3. Date    ：   [Sun, 29 Aug 2010 02:31:26 GMT]  
  4. Content-Length  ：   [54]  
  5. Content-Type    ：   [text/html;charset=UTF-8]  
  6. Server  ：   [Apache-Coyote/1.1]  
  7. Hello sarinThis is the output from doGet method!  


    因为我们打印了还原出的参数形式，这里没有用中文，所以看不出编码效果，中文效果大家可以自行测试。 
    POST方式就是修改主函数中调用的方法，这里不再测试了。 
    至此我们已经可以脱离浏览器进行GET/POST请求了，基本上网络传输的方式我们都可以来看看服务器返回的原始数据了，设置好URL和所需参数，直接运行就行了。 
    Servlet的原理很简单，这是比较直观的实现，要比直接上来就B\S清楚很多。 
    下面看个小实例，就是CET查分。对于CET不说什么了，相信大多数人都经历过，而查分网站也是非常…不说了，一个CET批量查分器的实现，就是发送POST请求，看看它网站的源码，Ajax而已。那么我们用上面的POST方法来模拟请求，批量获取数据，要注意大多数网站是防止来自外部的请求的，很简单，设置referer就可以了，这里不贴源码了，大家自己去写，我们来看一下： 
 

posted on 2017-05-12 20:47  祷_程序流浪人  阅读(572)  评论(0)  编辑  收藏  举报

导航