本文涉及3个基本点:
1、因为很多公司的内网都设有代理,浏览器通过ip与port上网,而java代码模拟http get方式同样需要外网代理;
2、Java实现http的Get/Post请求代码;
3、主要是设置HttpURLConnection请求头里面的属性
比如Cookie、User-Agent(浏览器类型)等等。
比如:http请求中添加Header
conn.setRequestProperty("Authorization", authorization);
注:我就在网上找的一段Get/Post模拟请求代码,添加了下代理的配置,整合完成的。
1 package com.pasier.quanzi.web.controller; 2 3 import java.io.BufferedReader; 4 import java.io.IOException; 5 import java.io.InputStreamReader; 6 import java.io.PrintWriter; 7 import java.net.URL; 8 import java.net.URLConnection; 9 import java.util.List; 10 import java.util.Map; 11 12 public class HttpRequest { 13 14 public static void main(String[] args) { 15 // 如果不设置,只要代理IP和代理端口正确,此项不设置也可以 16 System.getProperties().setProperty("http.proxyHost", "10.22.40.32"); 17 System.getProperties().setProperty("http.proxyPort", "8080"); 18 // 判断代理是否设置成功 19 // 发送 GET 请求 20 System.out.println(sendGet( 21 "http://www.baidu.com", 22 "param1=xxx¶m2=yyy")); 23 // 发送 POST 请求 24 } 25 26 /** 27 * 向指定URL发送GET方法的请求 28 * 29 * @param url 30 * 发送请求的URL 31 * @param param 32 * 请求参数,请求参数应该是 name1=value1&name2=value2 的形式。 33 * @return URL 所代表远程资源的响应结果 34 */ 35 public static String sendGet(String url, String param) { 36 String result = ""; 37 BufferedReader in = null; 38 try { 39 String urlNameString = url + "?" + param; 40 URL realUrl = new URL(urlNameString); 41 // 打开和URL之间的连接 42 URLConnection connection = realUrl.openConnection(); 43 // 设置通用的请求属性 44 connection.setRequestProperty("accept", "*/*"); 45 connection.setRequestProperty("connection", "Keep-Alive"); 46 connection.setRequestProperty("user-agent", 47 "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1;SV1)"); 48 // 建立实际的连接 49 connection.connect(); 50 // 获取所有响应头字段 51 Map<String, List<String>> map = connection.getHeaderFields(); 52 // 遍历所有的响应头字段 53 for (String key : map.keySet()) { 54 System.out.println(key + "--->" + map.get(key)); 55 } 56 // 定义 BufferedReader输入流来读取URL的响应 57 in = new BufferedReader(new InputStreamReader( 58 connection.getInputStream())); 59 String line; 60 while ((line = in.readLine()) != null) { 61 result += line; 62 } 63 } catch (Exception e) { 64 System.out.println("发送GET请求出现异常!" + e); 65 e.printStackTrace(); 66 } 67 // 使用finally块来关闭输入流 68 finally { 69 try { 70 if (in != null) { 71 in.close(); 72 } 73 } catch (Exception e2) { 74 e2.printStackTrace(); 75 } 76 } 77 return result; 78 } 79 80 /** 81 * 向指定 URL 发送POST方法的请求 82 * 83 * @param url 84 * 发送请求的 URL 85 * @param param 86 * 请求参数,请求参数应该是 name1=value1&name2=value2 的形式。 87 * @return 所代表远程资源的响应结果 88 */ 89 public static String sendPost(String url, String param) { 90 PrintWriter out = null; 91 BufferedReader in = null; 92 String result = ""; 93 try { 94 URL realUrl = new URL(url); 95 // 打开和URL之间的连接 96 URLConnection conn = realUrl.openConnection(); 97 // 设置通用的请求属性 98 conn.setRequestProperty("accept", "*/*"); 99 conn.setRequestProperty("connection", "Keep-Alive"); 100 conn.setRequestProperty("user-agent", 101 "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1;SV1)"); 102 // 发送POST请求必须设置如下两行 103 conn.setDoOutput(true); 104 conn.setDoInput(true); 105 // 获取URLConnection对象对应的输出流 106 out = new PrintWriter(conn.getOutputStream()); 107 // 发送请求参数 108 out.print(param); 109 // flush输出流的缓冲 110 out.flush(); 111 // 定义BufferedReader输入流来读取URL的响应 112 in = new BufferedReader( 113 new InputStreamReader(conn.getInputStream())); 114 String line; 115 while ((line = in.readLine()) != null) { 116 result += line; 117 } 118 } catch (Exception e) { 119 System.out.println("发送 POST 请求出现异常!" + e); 120 e.printStackTrace(); 121 } 122 // 使用finally块来关闭输出流、输入流 123 finally { 124 try { 125 if (out != null) { 126 out.close(); 127 } 128 if (in != null) { 129 in.close(); 130 } 131 } catch (IOException ex) { 132 ex.printStackTrace(); 133 } 134 } 135 return result; 136 } 137 }