java 采集网页信息
想做一个采集网站信息的工具,就是采集网页的源代码,然后把订单信息分离出来。
获取网页源文件的代码我已经找到了,还有一个问题:
我要采集的网页是需要登录的,所以应该是需要在Frame中有一个类似浏览器的东西,登录进网页,然后定时刷新网页。
这个类似浏览器的东西怎么写呢?
谢谢
httpclient连吧
httpclient
麻烦稍微具体一点 我不是专业的java人
给你个地址自己看下http://www.javayou.com/diary/471
httpclient发送参数抓取网页
htmlparser来解析html中的节点
两者的用法网上搜下,具体不好展开
已经实现显示网页了 用的eclipse 的swt 但是不会刷新
你的意思是订单会实时刷新,而你要定期取得订单列表?
如果这样的话,你定期发送一次请求就可以了。
另外,需要登录跟浏览器没关系,在浏览器输入的参数可以预置在文件或者程序中。
有人做过类似的吗? 还是没头绪
相关问答:
我在eclipse中写了一个播放音乐的类,并把音乐文件和类文件放在了一起,结果运行时,出现错误,说是音乐文件那个是空的,但是在jcreator用同样的方法结果是可以运行的,请求高说指教,告诉为什么?急
你若是在Windo ......
用RandomAccessFile写入TXT文件查看时是乱码,请问有什么方法可以写成可读的文件,不是用其他的文件操作,就是只用RandomAccessFile的方法是否可以实现?
Java code:
import java.io.*;
public class RandomAcce ......
我想用Java写一个程序,就是我想在运行代码后,在指定的时间打开某程序,例如我运行代码后,讲在12:00打开"D:\Program Files\Tencent\QQ2009\Bin\QQ.exe"这个程序,求高人指点。还有可能的话在指定的时间 ......
当知道一个日期,如何把这个日期所在旬的前后两个日期取出
比如输入20090905,就输入20090901 20090910
输出20090901 20090910
取得天数后作一下判断再把这个方法用下void set(int field, int value)
......
在安装Java编译器的Eclipse的时候,对环境变量进行了配置,在安装MySQl的时候也要对环境变量进行配置;那么后面的配置会影响前面的Eclipse的配置吗?
请大家多指教~!谢谢!
不会把,我这都装了的 我系统里 还装了 ......