如何直接抓取网页上的数据

winland · 发表于 2009-5-28 17:59

这种表我还是喜欢用Web查询来做，速度来说主要还是网速的关系。
先用httpRequest获得网页路径，然后用Web查询下载，保留所有的Web格式。多余的数据你可以稍稍添加几行代码将没有用的几行删除。

downloadopenfund.zip (12.54 KB, 下载次数: 668)

HHAAMM · 发表于 2009-5-28 18:23

俺来EH，最早知道的两个人就是“shuiyuan”、“来生缘”，顶一下！！
http://club.excelhome.net/viewth ... t=%2Bham&page=1

[ 本帖最后由 HHAAMM 于 2009-5-28 18:27 编辑 ]

gqy7979948 · 发表于 2009-5-28 20:00

请教Winland版主，你是怎么得到那两个网址的？能教一下方法吗？另外，我这里有一个网址， http://221.231.135.186/dzh.swf 我想实现的目的就是把这个网页里面的数据弄到EXCEL里，但无法实现。这个网址是否也是一个假的？能不能用你的方法找到真正的网址？

jymao · 发表于 2009-5-28 20:09

谢谢，学习了!

winland · 发表于 2009-5-28 20:59

原帖由 gqy7979948 于 2009-5-28 20:00 发表
请教Winland版主，你是怎么得到那两个网址的？能教一下方法吗？另外，我这里有一个网址， http://221.231.135.186/dzh.swf 我想实现的目的就是把这个网页里面的数据弄到EXCEL里，但无法实现。这个网址是否也是一个 ...

那两个网址也是根据分析源代码得到的，你将鼠标移到那两个按钮上去就可以看到状态栏显示这两个网址。
你的这个网址是一个Flash文件，并不是什么HTML内容，所以没有办法将里面的数据下载下来。
不过对于这种股票数据，如果不需要实时，你可以将股票软件的数据导出就可以了。或者去搜狐和雅虎。建议搜狐，可以以Javascript格式下载股票数据，速度挺快的，也利于处理。
另外搜狐也可以下载实时数据的。

gqy7979948 · 发表于 2009-5-28 21:20

非常感谢Winland版主的指教。

ty101 · 发表于 2009-5-28 21:43

winland有没有抓股票的程序呀

来生缘 · 发表于 2009-5-28 21:56

谢谢楼上几位，虽然我看不太明白，也很难理解，但解决了我的问题。谢谢。

PS：HHAAMM你好，不好意思，当时未能解决到你的问题。不过你现在已经当上版主啦，技术日见纯熟啦。

！

winland · 发表于 2009-5-28 22:01

原帖由 ty101 于 2009-5-28 21:43 发表
winland有没有抓股票的程序呀

我自己写一些代码每天下载股票数据，不一定通用。你需要什么样的股票数据？

gqy7979948 · 发表于 2009-5-28 22:08

这个方法导入数据速度确实非常快，可是我不懂里面的代码，我刚才把另外一个网址加到代码里，结果运行不了。就是下面这个网址：http://q.stock.sohu.com/cn/mystock.shtml#
我以前用过“数据-导入外部数据-新建WEB查询”这个方法实时导入网站的股票行情，但现在很多网站的数据用这个方法不能导入了（好像是网站采取了某种防止下载的措施），而且即使有的网站能导入，速度也非常慢。我想可能是我那个方法不合适。
不知Winland版主有没有办法让我的这个网址里的数据也能像你这个网址那样快速导入EXCEL中？我现在最大的问题就是基础太差，要是有点基础的人可能把你的代码稍微改一下就能实现，但我确实不会。

		自动登录	找回密码
密码			免费注册

[求助] 如何直接抓取网页上的数据

回复 3楼 winland 的帖子

回复 15楼 winland 的帖子

回复 11楼 winland 的帖子