当前位置:首页 > Java技术 > 正文内容

java 取WEB资源的内容

canca18年前 (2008-05-13)Java技术466

作者:独钓寒江月

有时候需要取得网页内容,再分析处理。
会话管理、post方法等见代码注释。

<code>

import java.io.BufferedReader;
import java.io.InputStream;
import java.io.InputStreamReader;
import java.net.HttpURLConnection;
import java.net.URL;

public class GetHttp
{
    public String getValue(String url)
    {
        long stime = System.currentTimeMillis();
        String r = null;
      try{ 
         
          HttpURLConnection huc;
         
        InputStream  in;
        URL url1 = new URL(url);
        huc = (HttpURLConnection) url1.openConnection();

//      设置允许output
        if (!huc.getDoOutput())
        {
            huc.setDoOutput(true);
        }
//      设置为post/get方式
        huc.setRequestMethod("GET");
        /*
//      设置为cookie
        if(sessionId != null)
        {
            huc.setRequestProperty("Cookie", sessionId);
        }
        */
        //模拟浏览器
        huc.setRequestProperty("User-Agent","Mozilla/4.7 [en] (Win98; I)");
        //设置超时 3秒
        huc.setConnectTimeout(3000);
       
        /*
        ///////////////// 如果使用post方式,参数的传递
//        StringBuffer sb = new StringBuffer();
        sb.append("op=4117");
        sb.append("&i=17");
        sb.append("&o=0");
        sb.append("&l=110");
        sb.append("&t=WANGLUOGUIJI");
        sb.append("&u=4");
        sb.append("&d=1");
//        sb.append(pars);
//        sb.append("&spid=" + Const.FEE_SPID);
//        sb.append("&spv=" + Const.FEE_SP_VALIDATE);
       
//      post信息
//       OutputStream os = huc.getOutputStream();
//       os.write(sb.toString().getBytes("utf8"));
//       os.close();
       //huc.setDoOutput(false);
        */

       /////////////////////开始读 服务器的返回
       
       /*
//cookie       
        String cookieVal = huc.getHeaderField("Set-Cookie");
        if(cookieVal != null)
        {
            sessionId = cookieVal.substring(0, cookieVal.indexOf(";"));
        }
        */
      
        in = huc.getInputStream();
//        BufferedReader breader = new BufferedReader(new InputStreamReader(in , "utf8"));
        BufferedReader breader = new BufferedReader(new InputStreamReader(in , "gb2312"));
        String str=breader.readLine();
        while(str != null)
        {
          if(r != null)
              r += str;
          else
              r = str;
          str = breader.readLine();
        }
       
        //断开连接
        huc.disconnect();
       
        long etime = System.currentTimeMillis();
        System.out.println(".########################### web connect time : " + (etime-stime));
        return r;
      }
      catch(Exception e)
      {
          e.printStackTrace();
          return "";
      }
    }

    public static void main(String[] args ) throws Exception
    {
        String url = "http://www.baidu.com/";
        GetHttp gh = new GetHttp();
        String http = gh.getValue(url);
        gh = null;
       
        System.out.println(http);
    }

}


</code>

扫描二维码推送至手机访问。

版权声明:本文由Ant.Master's Blog发布,如需转载请注明出处。

本文链接:https://iant.work/post/448.html

标签: Java技术
分享给朋友:

“java 取WEB资源的内容” 的相关文章

Socket与ServerSocket的问题

//服务器端:import java.io.BufferedReader;import java.io.IOException;import java.io.InputStreamReader;import java.io.PrintStream;import java.net.ServerSock...

Java语言的反射机制

    由于项目的需要,在项目中要实现即插即用的方式,也就是说可以动态地加载包,不用设置CLASSPATH路径。当项目发布时,不可能要用户来设置环境变量吧!因此,就要用到JAVA的反射机制了。昨天,我是在研究JAVA的JNI技术。由于没有时间,所以过几天才写JNI。今天...

JAVA获得一个文件夹大小

在JAVA里没有现成的方法获取一个文件夹的大小,那么我们可以用递归的方法,获取文件夹的大小。    import  java.util.*;  import  java.io.*;  class  GetFileSi...

JAVA内部类终极实例

最近心情不好,不想说太多东西了!电脑坏了,我现在又病了. class ClassFactory{ private final static String userName = "Hello,My name is CAnca."; public static Thread in =...

过滤网页HTML标记

JAVA过滤HTML中的所有标记。非常好用!! package canca.regex; import java.util.regex.Matcher;import java.util.regex.Pattern; public class HtmlFilter {  priva...

字符,字节和编码

字符,字节和编码

转自:http://www.regexlab.com/zh/encoding.htm------------------------------------------------------------- 级别:中级 摘要:本文介绍了字符与编码的发展过程,相关概念的正确理解。举例说明了一些实际应...

发表评论

访客

◎欢迎参与讨论,请在这里发表您的看法和观点。