java取网页源码（java 获取网页）

今天给各位分享java取网页源码的知识，其中也会对java 获取网页进行解释，如果能碰巧解决你现在面临的问题，别忘了关注本站，现在开始吧！

本文目录一览：

• 1、为什么用JAVA获取不了这个网页的源代码
• 2、怎么用java代码爬取网页中视频的源地址，不
• 3、VB或JAVA抓取网页源代码
• 4、JAVA WEB怎样抓取一个HTML源代码
• 5、java如何获取带有css js 执行完后的网页源代码

为什么用JAVA获取不了这个网页的源代码

好诡异.....................试了很多次才弄好!!!!!!!!!!!!!

import java.io.BufferedReader;

import java.io.IOException;

import java.io.InputStreamReader;

import java.net.HttpURLConnection;

import java.net.URL;

public class test1 {

public static void main(String[] a) throws IOException {

String url = "";

System.out.println(getHTML(url, "utf-8")); //使用原网页里声明的gb2312反而会出现乱码

}

public static String getHTML(String pageURL, String encoding) {

StringBuilder pageHTML = new StringBuilder();

try {

URL url = new URL(pageURL);

HttpURLConnection connection = (HttpURLConnection) url

.openConnection();

connection.setRequestProperty("User-Agent", "MSIE 7.0");

BufferedReader br = new BufferedReader(new InputStreamReader(

connection.getInputStream(), encoding));

String line = null;

while ((line = br.readLine()) != null) {

pageHTML.append(line);

pageHTML.append("\r\n");

}

connection.disconnect();

} catch (Exception e) {

e.printStackTrace();

}

return pageHTML.toString();

}

}

怎么用java代码爬取网页中视频的源地址，不

第一种方式：1、用HttpClient模拟请求html 获取html源码；2、用jsoup方法抓取解析网页数据

第二种方式：1、用HttpClient模拟请求html 获取html源码；2、用正则抓取解析网页数据

有很多种方式能够获取html源码，源码获取到了数据解析就很容易了。你可以百度一下有很多

VB或JAVA抓取网页源代码

乱码问题，可以设置编码解决。。Java一般支持UTF-8 如果不是，你可以多改几个编码看看哪个是中文。你也可以把读取到的字节码显示成二进制看看到底是哪种编码，不同编码很好辨认的。。。比如英文的UTF-8 它是高八位全一样。而GBK中英文只有一个字节

JAVA WEB怎样抓取一个HTML源代码

import java.io.BufferedInputStream;

import java.io.InputStream;

import java.net.MalformedURLException;

import java.net.URL;

public class Test {

public static void main(String argv[]) {

//Test t = new Test();

//t.first();

//Test.TSR();

//Test.testDouPrase();

try {

Test.testNetStream();

} catch (Exception e) {

e.printStackTrace();

}

}

public static void testNetStream() throws Exception{

URL url = null;

url = new URL("");

InputStream in = url.openStream();

byte[] b = new byte[100000];

InputStream ins = url.openStream();

ins.read(b);

ins.close();

String s = new String(b);

System.out.println(s);

}

}

java如何获取带有css js 执行完后的网页源代码

只能抓取静态的页面源代码，因为很多事件和样式是动态绑定和执行的，所以不可能获取到执行完后的代码的。

public

String

getHtmlContent(String

htmlurl)

{

URL

url;

String

temp;

StringBuffer

sb

=

new

StringBuffer();

try

{

url

=

new

URL(htmlurl);

BufferedReader

in

=

new

BufferedReader(new

InputStreamReader(url.openStream(),

"gbk"));

while

((temp

=

in.readLine())

!=

null)

{

sb.append(temp);

}

in.close();

}

catch

(final

MalformedURLException

me)

{

me.getMessage();

}

catch

(final

IOException

e)

{

e.printStackTrace();

}

return

sb.toString();

}

关于java取网页源码和java 获取网页的介绍到此就结束了，不知道你从中找到你需要的信息了吗 ？如果你还想了解更多这方面的信息，记得收藏关注本站。