importjava.io.BufferedReader;
importjava.io.InputStreamReader;
importjava.net.Authenticator;
importjava.net.HttpURLConnection;
importjava.net.InetSocketAddress;
importjava.net.PasswordAuthentication;
importjava.net.Proxy;
importjava.net.URL;
publicclassProxyDemo2{
publicstaticvoidmain(String[]args)throwsException{
URLurl=newURL("http://www.3lai8.com");
///創建代理伺服器
InetSocketAddressaddr=newInetSocketAddress("192.168.0.254",8080);
//Proxyproxy=newProxy(Proxy.Type.SOCKS,addr);//Socket代理
Proxyproxy=newProxy(Proxy.Type.HTTP,addr);//http代理
Authenticator.setDefault(newMyAuthenticator("username","password"));//設置代理的用戶和密碼
HttpURLConnectionconnection=(HttpURLConnection)url.openConnection(proxy);//設置代理訪問
InputStreamReaderin=newInputStreamReader(connection.getInputStream());
BufferedReaderreader=newBufferedReader(in);
while(true){
Strings=reader.readLine();
if(s!=null){
System.out.println(s);
}
}
}
{
privateStringuser="";
privateStringpassword="";
publicMyAuthenticator(Stringuser,Stringpassword){
this.user=user;
this.password=password;
}
(){
(user,password.toCharArray());
}
}
}
B. 如何用JAVA實現HTTPS客戶端
import java.io.*;
import java.net.*;
import java.security.cert.CertificateException;
import java.security.cert.X509Certificate;
import javax.net.ssl.*;
public class TrustSSL {
private static class TrustAnyTrustManager implements X509TrustManager {
public void checkClientTrusted(X509Certificate[] chain, String authType)
throws CertificateException {
}
public void checkServerTrusted(X509Certificate[] chain, String authType)
throws CertificateException {
}
public X509Certificate[] getAcceptedIssuers() {
return new X509Certificate[] {};
}
}
private static class TrustAnyHostnameVerifier implements HostnameVerifier {
public boolean verify(String hostname, SSLSession session) {
return true;
}
}
public static void main(String[] args) throws Exception {
InputStream in = null;
OutputStream out = null;
byte[] buffer = new byte[4096];
String str_return = "";
try {
SSLContext sc = SSLContext.getInstance("SSL");
sc.init(null, new TrustManager[] { new TrustAnyTrustManager() },
new java.security.SecureRandom());
URL console = new URL(
"https://192.168.1.188/test.php?username=測試");
HttpsURLConnection conn = (HttpsURLConnection) console
.openConnection();
conn.setSSLSocketFactory(sc.getSocketFactory());
conn.setHostnameVerifier(new TrustAnyHostnameVerifier());
conn.connect();
InputStream is = conn.getInputStream();
DataInputStream indata = new DataInputStream(is);
String ret = "";
while (ret != null) {
ret = indata.readLine();
if (ret != null && !ret.trim().equals("")) {
str_return = str_return
+ new String(ret.getBytes("ISO-8859-1"), "GBK");
}
}
conn.disconnect();
} catch (ConnectException e) {
System.out.println("ConnectException");
System.out.println(e);
throw e;
} catch (IOException e) {
System.out.println("IOException");
System.out.println(e);
throw e;
} finally {
try {
in.close();
} catch (Exception e) {
}
try {
out.close();
} catch (Exception e) {
}
}
System.out.println(str_return);
}
}
C. 如何用JAVA實現一個代理伺服器
代理伺服器的應用非常廣泛。比如，在企業網內部，它可以用來控制員工在工作時瀏覽的Internet內容，阻止員工訪問某些類型的內容或某些指定的網站。代理伺服器實際上扮演著瀏覽器和Web伺服器之間的中間人的角色，能夠對瀏覽器請求進行各種各樣的處理，能夠過濾廣告和Cookie，能夠預先提取Web頁面，使得瀏覽器訪問頁面的速度更快，等等。
一、基礎知識
不管以哪種方式應用代理伺服器，其監控HTTP傳輸的過程總是如下：
步驟一：內部的瀏覽器發送請求給代理伺服器。請求的第一行包含了目標URL。
步驟二：代理伺服器讀取該URL，並把請求轉發給合適的目標伺服器。
步驟三：代理伺服器接收來自Internet目標機器的應答，把應答轉發給合適的內部瀏覽器。
例如，假設有一個企業的雇員試圖訪問www.cn.ibm.com網站。如果沒有代理伺服器，雇員的瀏覽器打開的Socket通向運行這個網站的Web伺服器，從Web伺服器返回的數據也直接傳遞給雇員的瀏覽器。如果瀏覽器被配置成使用代理伺服器，則請求首先到達代理伺服器；隨後，代理伺服器從請求的第一行提取目標URL，打開一個通向www.cn.ibm.com的Socket。當www.cn.ibm.com返回應答時，代理伺服器把應答轉發給雇員的瀏覽器。
當然，代理伺服器並非只適用於企業環境。作為一個開發者，擁有一個自己的代理伺服器是一件很不錯的事情。例如，我們可以用代理伺服器來分析瀏覽器和Web伺服器的交互過程。測試和解決Web應用中存在的問題時，這種功能是很有用的。我們甚至還可以同時使用多個代理伺服器（大多數代理伺服器允許多個伺服器鏈接在一起使用）。例如，我們可以有一個企業的代理伺服器，再加上一個用java編寫的代理伺服器，用來調試應用程序。但應該注意的是，代理伺服器鏈上的每一個伺服器都會對性能產生一定的影響。
二、設計規劃
正如其名字所示，代理伺服器只不過是一種特殊的伺服器。和大多數伺服器一樣，如果要處理多個請求，代理伺服器應該使用線程。下面是一個代理伺服器的基本規劃：
等待來自客戶（Web瀏覽器）的請求。
啟動一個新的線程，以處理客戶連接請求。
讀取瀏覽器請求的第一行（該行內容包含了請求的目標URL）。
分析請求的第一行內容，得到目標伺服器的名字和埠。
打開一個通向目標伺服器（或下一個代理伺服器，如合適的話）的Socket。
把請求的第一行發送到輸出Socket。
把請求的剩餘部分發送到輸出Socket。
把目標Web伺服器返回的數據發送給發出請求的瀏覽器。
當然，如果考慮細節的話，情況會更復雜一些。實際上，這里主要有兩個問題要考慮：第一，從Socket按行讀取數據最適合進一步處理，但這會產生性能瓶頸；第二，兩個Socket之間的連接必需高效。有幾種方法可以實現這兩個目標，但每一種方法都有各自的代價。例如，如果要在數據進入的時候進行過濾，這些數據最好按行讀取；然而，大多數時候，當數據到達代理伺服器時，立即把它轉發出去更適合高效這一要求。另外，數據的發送和接收也可以使用多個獨立的線程，但大量地創建和拆除線程也會帶來性能問題。因此，對於每一個請求，我們將用一個線程處理數據的接收和發送，同時在數據到達代理伺服器時，盡可能快速地把它轉發出去。
三、實例
在用java編寫這個代理伺服器的過程中，注意可重用性是很重要的。因為這樣的話，當我們想要在另一個工程中以不同的方式處理瀏覽器請求時，可以方便地重用該代理伺服器。當然，我們必須注意靈活性和效率之間的平衡。
圖一顯示了本文代理伺服器實例（HttpProxy.java）的輸出界面，當瀏覽器訪問http://www-900.ibm.com/cn/時，代理伺服器向默認日誌設備（即標准輸出設備屏幕）輸出瀏覽器請求的URL。圖二顯示了SubHttpProxy的輸出。SubHttpProxy是HttpProxy的一個簡單擴展。
圖一
圖二
為了構造代理伺服器，我從Thread基類派生出了HttpProxy類（文章正文中出現的代碼是該類的一些片斷，完整的代碼請從本文最後下載）。HttpProxy類包含了一些用來定製代理伺服器行為的屬性，參見Listing 1和表一。
【Listing 1】
/*************************************
* 一個基礎的代理伺服器類
*************************************
*/
import java.net.*;
import java.io.*;
public class HttpProxy extends Thread {
static public int CONNECT_RETRIES=5;
static public int CONNECT_PAUSE=5;
static public int TIME-OUT=50;
static public int BUFSIZ=1024;
static public boolean logging = false;
static public OutputStream log=null;
// 傳入數據用的Socket
protected Socket socket;
// 上級代理伺服器，可選
static private String parent=null;
static private int parentPort=-1;
static public void setParentProxy(String name, int pport) {
parent=name;
parentPort=pport;
}
// 在給定Socket上創建一個代理線程。
public HttpProxy(Socket s) { socket=s; start(); }
public void writeLog(int c, boolean browser) throws IOException {
log.write(c);
}
public void writeLog(byte[] bytes,int offset,
int len, boolean browser) throws IOException {
for (int i=0;i<len;i++) writeLog((int)bytes[offset+i],browser);
}
// 默認情況下，日誌信息輸出到
// 標准輸出設備，
// 派生類可以覆蓋它
public String processHostName(String url, String host, int port, Socket sock) {
java.text.DateFormat cal=java.text.DateFormat.getDateTimeInstance();
System.out.println(cal.format(new java.util.Date()) + " - " +
url + " " + sock.getInetAddress()+"<BR>");
return host;
}
表一
變數/方法 說明
CONNECT_RETRIES 在放棄之前嘗試連接遠程主機的次數。
CONNECT_PAUSE 在兩次連接嘗試之間的暫停時間。
TIME-OUT 等待Socket輸入的等待時間。
BUFSIZ Socket輸入的緩沖大小。
logging 是否要求代理伺服器在日誌中記錄所有已傳輸的數據（true表示「是」）。
log 一個OutputStream對象，默認日誌常式將向該OutputStream對象輸出日誌信息。
setParentProxy 用來把一個代理伺服器鏈接到另一個代理伺服器（需要指定另一個伺服器的名稱和埠）。
當代理伺服器連接到Web伺服器之後，我用一個簡單的循環在兩個Socket之間傳遞數據。這里可能出現一個問題，即如果沒有可操作的數據，調用read方法可能導致程序阻塞，從而掛起程序。為防止出現這個問題，我用setSoTimeout方法設置了Socket的超時時間（參見Listing 2）。這樣，如果某個Socket不可用，另一個仍舊有機會進行處理，我不必創建一個新的線程。
【Listing 2】
// 執行操作的線程
public void run() {
String line;
String host;
int port=80;
Socket outbound=null;
try {
socket.setSoTimeout(TIMEOUT);
InputStream is=socket.getInputStream();
OutputStream os=null;
try {
// 獲取請求行的內容
line="";
host="";
int state=0;
boolean space;
while (true) {
int c=is.read();
if (c==-1) break;
if (logging) writeLog(c,true);
space=Character.isWhitespace((char)c);
switch (state) {
case 0:
if (space) continue;
state=1;
case 1:
if (space) {
state=2;
continue;
}
line=line+(char)c;
break;
case 2:
if (space) continue; // 跳過多個空白字元
state=3;
case 3:
if (space) {
state=4;
// 只分析主機名稱部分
String host0=host;
int n;
n=host.indexOf("//");
if (n!=-1) host=host.substring(n+2);
n=host.indexOf('/');
if (n!=-1) host=host.substring(0,n);
// 分析可能存在的埠號
n=host.indexOf(":");
if (n!=-1) {
port=Integer.parseInt(host.substring(n+1));
host=host.substring(0,n);
}
host=processHostName(host0,host,port,socket);
if (parent!=null) {
host=parent;
port=parentPort;
}
int retry=CONNECT_RETRIES;
while (retry--!=0) {
try {
outbound=new Socket(host,port);
break;
} catch (Exception e) { }
// 等待
Thread.sleep(CONNECT_PAUSE);
}
if (outbound==null) break;
outbound.setSoTimeout(TIMEOUT);
os=outbound.getOutputStream();
os.write(line.getBytes());
os.write(' ');
os.write(host0.getBytes());
os.write(' ');
pipe(is,outbound.getInputStream(),os,socket.getOutputStream());
break;
}
host=host+(char)c;
break;
}
}
}
catch (IOException e) { }
} catch (Exception e) { }
finally {
try { socket.close();} catch (Exception e1) {}
try { outbound.close();} catch (Exception e2) {}
}
}
和所有線程對象一樣，HttpProxy類的主要工作在run方法內完成（見Listing 2）。run方法實現了一個簡單的狀態機，從Web瀏覽器每次一個讀取字元，持續這個過程直至有足夠的信息找出目標Web伺服器。然後，run打開一個通向該Web伺服器的Socket（如果有多個代理伺服器被鏈接在一起，則run方法打開一個通向鏈裡面下一個代理伺服器的Socket）。打開Socket之後，run先把部分的請求寫入Socket，然後調用pipe方法。pipe方法直接在兩個Socket之間以最快的速度執行讀寫操作。
如果數據規模很大，另外創建一個線程可能具有更高的效率；然而，當數據規模較小時，創建新線程所需要的開銷會抵消它帶來的好處。
Listing 3顯示了一個很簡單的main方法，可以用來測試HttpProxy類。大部分的工作由一個靜態的startProxy方法完成（見Listing 4）。這個方法用到了一種特殊的技術，允許一個靜態成員創建HttpProxy類（或HttpProxy類的子類）的實例。它的基本思想是：把一個Class對象傳遞給startProxy類；然後，startProxy方法利用映像API（Reflection API）和getDeclaredConstructor方法確定該Class對象的哪一個構造函數接受一個Socket參數；最後，startProxy方法調用newInstance方法創建該Class對象。
【Listing 3】
// 測試用的簡單main方法
static public void main(String args[]) {
System.out.println("在埠808啟動代理伺服器\n");
HttpProxy.log=System.out;
HttpProxy.logging=false;
HttpProxy.startProxy(808,HttpProxy.class);
}
}
【Listing 4】
static public void startProxy(int port,Class clobj) {
ServerSocket ssock;
Socket sock;
try {
ssock=new ServerSocket(port);
while (true) {
Class [] sarg = new Class[1];
Object [] arg= new Object[1];
sarg[0]=Socket.class;
try {
java.lang.reflect.Constructor cons = clobj.getDeclaredConstructor(sarg);
arg[0]=ssock.accept();
cons.newInstance(arg); // 創建HttpProxy或其派生類的實例
} catch (Exception e) {
Socket esock = (Socket)arg[0];
try { esock.close(); } catch (Exception ec) {}
}
}
} catch (IOException e) {
}
}
利用這種技術，我們可以在不創建startProxy方法定製版本的情況下，擴展HttpProxy類。要得到給定類的Class對象，只需在正常的名字後面加上.class（如果有某個對象的一個實例，則代之以調用getClass方法）。由於我們把Class對象傳遞給了startProxy方法，所以創建HttpProxy的派生類時，就不必再特意去修改startProxy。（下載代碼中包含了一個派生得到的簡單代理伺服器）。
結束語
利用派生類定製或調整代理伺服器的行為有兩種途徑：修改主機的名字，或者捕獲所有通過代理伺服器的數據。processHostName方法允許代理伺服器分析和修改主機名字。如果啟用了日誌記錄，代理伺服器為每一個通過伺服器的字元調用writeLog方法。如何處理這些信息完全由我們自己決定——可以把它寫入日誌文件，可以把它輸出到控制台，或進行任何其他滿足我們要求的處理。writeLog輸出中的一個Boolean標記指示出數據是來自瀏覽器還是Web主機。
和許多工具一樣，代理伺服器本身並不存在好或者壞的問題，關鍵在於如何使用它們。代理伺服器可能被用於侵犯隱私，但也可以阻隔偷窺者和保護網路。即使代理伺服器和瀏覽器不在同一台機器上，我也樂意把代理伺服器看成是一種擴展瀏覽器功能的途徑。例如，在把數據發送給瀏覽器之前，可以用代理伺服器壓縮數據；未來的代理伺服器甚至還可能把頁面從一種語言翻譯成另一種語言……可能性永無止境。
D. java http可以websocket不行
解決方案如下：
因為HTTPS是基於SSL依靠證書來驗證伺服器的身份，並為瀏覽器和伺服器之間的通信加密，所以在HTTPS站點調用某些非SSL驗證的資源時瀏覽器可能會阻止。
方案一:假設HTTPS站點使用Nginx伺服器，其他伺服器也是類似的思路，可以用伺服器代理ws服務，可以用nginx的WebSocket proxying。
這樣客戶端請求的是wss://伺服器，通過nginx的WebSocket proxying代理到實際不支持ssl的websocket伺服器。
方案二：直接為WebSocket伺服器增加ssl證書，這樣就可以直接通過wss://來請求伺服器了，以swoole為例，其他伺服器也是類似的思路。
E. java HttpClient設置代理的話，用戶名和密碼怎麼設置
使用代理需要導入：commons-logging-1.1.jar，httpclient-4.0-beta2.jar ，httpcore-4.1-alpha1.jar 和 commons-codec-1.4.jar架包。
在連接代理時需要使用用戶名和密碼構造UsernamePasswordCredentials對象並作為參數傳遞給HttpClient對象。
具體用法如下：
publicstaticvoidmain(Stringargs[])
{
StringBuffersb=newStringBuffer();
//創建HttpClient實例
HttpClientclient=getHttpClient();
//創建httpGet
HttpGethttpGet=newHttpGet("http://www.csdn.net");
//執行
try{
HttpResponseresponse=client.execute(httpGet);
HttpEntityentry=response.getEntity();
if(entry!=null)
{
InputStreamReaderis=newInputStreamReader(entry.getContent());
BufferedReaderbr=newBufferedReader(is);
Stringstr=null;
while((str=br.readLine())!=null)
{
sb.append(str.trim());
}
br.close();
}
}catch(ClientProtocolExceptione){
//TODOAuto-generatedcatchblock
e.printStackTrace();
}catch(IOExceptione){
//TODOAuto-generatedcatchblock
e.printStackTrace();
}
System.out.println(sb.toString());
}
//設置代理
(){
DefaultHttpClienthttpClient=newDefaultHttpClient();
StringproxyHost="proxycn2.huawei.com";
intproxyPort=8080;
StringuserName="china\******";
Stringpassword="*******「
httpClient.getCredentialsProvider().setCredentials(
newAuthScope(proxyHost,proxyPort),
(userName,password));
HttpHostproxy=newHttpHost(proxyHost,proxyPort);
httpClient.getParams().setParameter(ConnRouteParams.DEFAULT_PROXY,proxy);
returnhttpClient;
}
F. java HTTP代理伺服器開發 求助帖
說實話，你的問題很那個。。
不過應該也能實現。
現在問題主要是由於b不能訪問c，所以c只能使用TimerTask定時去訪問b。
b有2個listener,一個負責偵聽來自a的請求，一個負責偵聽來自b的。
b中應該會使用到多線程。
下面定義a的Request為x，c的Request為y
由於b會有多個來自a轉發的請求，可能會有x1\x2\x3等很多並發的請求，所以b在初始化的時候就需要建立一個等待池.
等待池應該是單例且線程同步的，x一來就new object(request,response)，然後放入list。
c的定時器一到，就訪問b開放給c的listener，request y。y首先遍歷等待池，取出x的request，然後用取出x的response的返回給a。直到等待池為空為止，然後y response給c。
不過要注意的是
1)你會發現，由於c給b的數據應該是放到request y裡面作為參數來傳的。
2)a的請求如果需要c不同數據介面的數據，那c-->b的request y里就應該包含所有的數據，然後在遍歷等待池的時候根據a-->b的request x的id（可以使用sessionid）來區分取哪個。
3)最差的情況，
1，a源源不斷的發出x請求，c的request遍歷就死循環。
2，如果c的定時時間太短，y1還沒完，y2就來了。
3，a源源不斷的發出x請求，但是某一請求Xn就無法搶到資源，Xn就掛掉。
這裡面很多處理你還要多加控制。
這個想法沒實驗過，其實如果b可以訪問c，其實什麼問題都沒有了
最後問一句，誰給你這樣的需求的？打他
G. JAVA中如何設置代理伺服器，取消代理伺服器
在JAVA中怎麼設置代理伺服器呢，非常簡單
publicvoidsetServiceProxy(Configconfig){
this.config=config;
System.setProperty("http.proxyHost",config.getProxyHost());
System.setProperty("http.proxyPort",config.getProxyPort());
System.setProperty("https.proxyHost",config.getProxyHost());
System.setProperty("https.proxyPort",config.getProxyPort());
}
然後在每一個HttpUrlConnection請求中，設置代理伺服器用戶名和密碼，並進行Base64加密（看你代理伺服器的要求，可能因代理伺服器不同而不同），代碼如下
()throwsIOException{
Stringauthorization=config.getProxyUser()+":"
+config.getProxyPassword();
URLurl=newURL(config.getRequestUrl());
HttpURLConnectionconn=(HttpURLConnection)url.openConnection();
conn.setRequestProperty("Proxy-Authorization",
"Basic"+Base64.encodeBase64String(authorization.getBytes()));
returnconn;
}
H. JAVA配置億牛雲爬蟲代理有幾種方式
如果開通的HTTP\HTTPS代理，系統返回429 Too Many Requests；如果開通的Socket5代理，系統會主動對TCP延遲降速，或者直接拒絕超出部分的TCP請求。這兩種處理方式都不會對爬蟲的運行產生影響，爬蟲會根據返回結果自動重新發起請求，這是HTTP\HTTPS和Socket5的標准應答模式。
I. java後台程序怎麼用https協議
嗨 你好
據網上了解到：
在JSP里，獲取客戶端的IP地址的方法是：request.getRemoteAddr（），這種方法在大部分情況下都是有效的。但是在通過了Apache，Squid等反向代理軟體就不能獲取到客戶端的真實IP地址了。
如果使用了反向代理軟體，將：2046/ 的URL反向代理為 / 的URL時，用request.getRemoteAddr（）方法獲取的IP地址是：127.0.0.1或192.168.1.110，而並不是客戶端的真實IP。
經過代理以後，由於在客戶端和服務之間增加了中間層，因此伺服器無法直接拿到客戶端的IP，伺服器端應用也無法直接通過轉發請求的地址返回給客戶端。但是在轉發請求的HTTP頭信息中，增加了X－FORWARDED－FOR信息。用以跟蹤原有的客戶端IP地址和原來客戶端請求的伺服器地址。當我們訪問 /index.jsp/ 時，其實並不是我們瀏覽器真正訪問到了伺服器上的index.jsp文件，而是先由代理伺服器去訪問：2046/index.jsp ，代理伺服器再將訪問到的結果返回給我們的瀏覽器，因為是代理伺服器去訪問index.jsp的，所以index.jsp中通過request.getRemoteAddr（）的方法獲取的IP實際上是代理伺服器的地址，並不是客戶端的IP地址。
於是可得出獲得客戶端真實IP地址的方法一：
public String getRemortIP(HttpServletRequest request) { if (request.getHeader("x-forwarded-for") == null) { return request.getRemoteAddr(); } return request.getHeader("x-forwarded-for"); }
可是當我訪問 /index.jsp/ 時，返回的IP地址始終是unknown，也並不是如上所示的127.0.0.1或192.168.1.110了，而我訪問：2046/index.jsp 時，則能返回客戶端的真實IP地址，寫了個方法去驗證。原因出在了Squid上。squid.conf 的配製文件forwarded_for 項默認是為on，如果 forwarded_for 設成了 off 則：X-Forwarded-For： unknown
於是可得出獲得客戶端真實IP地址的方法二：
public String getIpAddr(HttpServletRequest request) { String ip = request.getHeader("x-forwarded-for"); if(ip == null || ip.length() == 0 || "unknown".equalsIgnoreCase(ip)) { ip = request.getHeader("Proxy-Client-IP"); } if(ip == null || ip.length() == 0 || "unknown".equalsIgnoreCase(ip)) { ip = request.getHeader("WL-Proxy-Client-IP"); } if(ip == null || ip.length() == 0 || "unknown".equalsIgnoreCase(ip)) { ip = request.getRemoteAddr(); } return ip; }
可是，如果通過了多級反向代理的話，X-Forwarded-For的值並不止一個，而是一串Ip值，究竟哪個才是真正的用戶端的真實IP呢？
答案是取X-Forwarded-For中第一個非unknown的有效IP字元串。
如：X-Forwarded-For：192.168.1.110， 192.168.1.120， 192.168.1.130， 192.168.1.100用戶真實IP為： 192.168.1.110
希望可以幫到你的忙
祝你學習愉快
-
J. java httpclient4.1.2 怎麼使用免費的https代理
DefaultHttpClient httpclient = new DefaultHttpClient();
String proxyIp=xxx.xxx.xxx.xxx;
int port=xxxx;
httpclient.getParams().setParameter(ConnRoutePNames.DEFAULT_PROXY,new HttpHost(proxyIp,port));
這樣設置就可以了