java 编写的爬虫 获取HTML源文件 - Java / Java SE
public class ResultHTML {
public static void main(String[] args) throws MalformedURLException, IOException {
URLConnection uc = new URL("http://10.50.128.145").openConnection();
uc.setConnectTimeout(10000);
uc.setDoOutput(true);
InputStream in = new BufferedInputStream(uc.getInputStream());
Reader rd = new InputStreamReader(in);
int c = 0;
StringBuffer temp = new StringBuffer();
while ((c = rd.read()) != -1) {
temp.append((char) c);
}
in.close();
System.out.println(temp.toString());
}
很简单的代码 就是想获取HTML的源代码 但是发现 如果HTML中加入了CSS ,JS 或者是用了框架。根本就得到里面的东西。只是你所点击的这个页面最外面的一个框子。实质显示的数据 全部都在其他的CSS,或是JS中。
鼠标右键这个网页 得到的源文件跟解析出来的不一样。
问 怎么才能得到 包括CSS.JS或是框架的HTML源文件。要那种鼠标右键后得到的源文件。带数据的。
所有的分 25分
你测试这个试下 我以前用的是这个public static void main() {
try {
StringBuffer html = new StringBuffer();
java.net.URL url = new java.net.URL("http://www.baidu.com");
java.net.HttpURLConnection conn = (java.net.HttpURLConnection) url.open
相关问答：
我在 java核心技术上 看了一个 利用 Java socket email的例子 可是怎么也 不成功 为什么？
源码
Java code:
package cn.com.test.email;
import java.awt.GridBagLayout;
import java.awt.event.Action ......
要求：
1、具有2年以上的java开发工作经验，精通java；
2、熟悉Eclipse开发工具，熟悉WEB开发，具有两年以上Java开发经验，掌握面向对象的软件设计方法，
有Spring、Hibernate以及 ......
各位老大好。。。小弟有一个乱码问题急需帮忙解决
我在本页中用request.getParameter("name")取变量。。变量的赋值为汉字。我在页面的开头加了<%@ page language = "java" contentType=&quo ......
请问各位哥哥姐姐，如何运用现成的模板来制作漂亮的JSP网页呀,回者有分!
自己顶下，总有高手吧,期待中......
如果直接引用进去
可以直接用jsp的指令，也可以用freemark引用，记得给分
谢谢各位了，看来� ......
