知识大全 java读取网站内容的两种方法

Posted 2022-07-19 内容

篇首语：赚钱之道很多，但是找不到赚钱的种子，便成不了事业家。本文由小常识网(cha138.com)小编为大家整理，主要介绍了知识大全 java读取网站内容的两种方法相关的知识，希望对你有一定的参考价值。

　　 HttpClient

　　利用apache的虚拟客户端包获取某个地址的内容 import java io UnsupportedEncodingException;

　　 import java util HashSet;

　　 import java util Iterator;

　　 import java util Set;

　　 import java util regex Matcher;

　　 import java util regex Pattern;

　　 import mons ;

　　 public class catchMain

　　 /** *//**

　　 * @param args

　　 public static void main(String[] args)

　　 String url = ;

　　 String keyword= 食 ;

　　 String response=createClient(url keyword);

　　 public static String createClient(String url String param)

　　 HttpClient client = new HttpClient();

　　 String response=null;

　　 String keyword=null;

　　 PostMethod postMethod = new PostMethod(url);

　　 try

　　 if(param!=null)

　　 keyword = new String(param getBytes( gb ) ISO );

　　 catch (UnsupportedEncodingException e )

　　 // TODO Auto generated catch block

　　 e printStackTrace();

　　 NameValuePair[] data = new NameValuePair( keyword keyword) ;

　　 // 将表单的值放入postMethod中

　　 postMethod setRequestBody(data);

　　 try

　　 int statusCode = client executeMethod(postMethod);

　　 response = new String(postMethod getResponseBodyAsString()

　　 getBytes( ISO ) GBK );

　　 catch (Exception e)

　　 e printStackTrace();

　　 return response;

　　 java自带的HttpURLConnection

　　 public static String getPageContent(String strUrl String strPostRequest

　　 int maxLength)

　　 //读取结果网页

　　 StringBuffer buffer = new StringBuffer();

　　 System setProperty( client defaultConnectTimeout );

　　 System setProperty( client defaultReadTimeout );

　　 try

　　 URL newUrl = new URL(strUrl);

　　 HttpURLConnection hConnect = (HttpURLConnection) newUrl

　　 openConnection();

　　 //POST方式的额外数据

　　 if (strPostRequest length() > )

　　 hConnect setDoOutput(true);

　　 OutputStreamWriter out = new OutputStreamWriter(hConnect

　　 getOutputStream());

　　 out write(strPostRequest);

　　 out flush();

　　 out close();

　　 //读取内容

　　 BufferedReader rd = new BufferedReader(new InputStreamReader(

　　 hConnect getInputStream()));

　　 int ch;

　　 for (int length = ; (ch = rd read()) >

　　 && (maxLength <= || length < maxLength); length++)

　　 buffer append((char) ch);

　　 rd close();

　　 hConnect disconnect();

　　 return buffer toString() trim();

　　 catch (Exception e)

　　 // return 错误:读取网页失败！ ;

　　 return null;

cha138/Article/program/Java/hx/201311/26339