Foxtable(狐表)用户栏目专家坐堂 → 请教下数据抓取的问题


  共有4599人关注过本帖树形打印复制链接

主题:请教下数据抓取的问题

帅哥哟,离线,有人找我吗?
rjh4078
  1楼 | 信息 | 搜索 | 邮箱 | 主页 | UC


加好友 发短信
等级:狐精 帖子:3370 积分:24858 威望:0 精华:0 注册:2012/3/26 21:47:00
请教下数据抓取的问题  发帖心情 Post By:2017/8/15 10:41:00 [只看该作者]

http://money.finance.sina.com.cn/corp/go.php/vMS_MarketHistory/stockid/600460.phtml?year=2013&jidu=1

如何自动从这个页面抓取每个股piao的交易数据?

http://www.cnblogs.com/seacryfly/articles/stock.html
这位大神给了一些方法但是不知道怎么转成ft的

 回到顶部
帅哥哟,离线,有人找我吗?
有点甜
  2楼 | 信息 | 搜索 | 邮箱 | 主页 | UC


加好友 发短信
等级:版主 帖子:85326 积分:427815 威望:0 精华:5 注册:2012/10/18 22:13:00
  发帖心情 Post By:2017/8/15 11:00:00 [只看该作者]


 回到顶部
帅哥哟,离线,有人找我吗?
rjh4078
  3楼 | 信息 | 搜索 | 邮箱 | 主页 | UC


加好友 发短信
等级:狐精 帖子:3370 积分:24858 威望:0 精华:0 注册:2012/3/26 21:47:00
  发帖心情 Post By:2017/8/15 11:22:00 [只看该作者]

如何获取历史的呢  

 回到顶部
帅哥哟,离线,有人找我吗?
有点甜
  4楼 | 信息 | 搜索 | 邮箱 | 主页 | UC


加好友 发短信
等级:版主 帖子:85326 积分:427815 威望:0 精华:5 注册:2012/10/18 22:13:00
  发帖心情 Post By:2017/8/15 11:38:00 [只看该作者]

Dim web As New System.Windows.Forms.WebBrowser()
web.Navigate("http://money.finance.sina.com.cn/corp/go.php/vMS_MarketHistory/stockid/600460.phtml?year=2013&jidu=1")
Do Until web.ReadyState = 4
    Application.DoEvents
Loop

Dim tb = web.Document.GetElementById("FundHoldSharesTable")
Dim trs = tb.GetElementsByTagName("tr")   '根据标签得到数据集合
For i As Integer = 1 To trs.count-1
    output.show(trs(i).InnerText)
    Dim tds = trs(i).GetElementsByTagName("td")
    For j As Integer = 0 To tds.count-1
        output.show(tds(j).InnerText)
    Next
Next

 


 回到顶部
帅哥哟,离线,有人找我吗?
rjh4078
  5楼 | 信息 | 搜索 | 邮箱 | 主页 | UC


加好友 发短信
等级:狐精 帖子:3370 积分:24858 威望:0 精华:0 注册:2012/3/26 21:47:00
  发帖心情 Post By:2017/8/15 19:17:00 [只看该作者]

以下是引用有点甜在2017/8/15 11:38:00的发言:

Dim web As New System.Windows.Forms.WebBrowser()
web.Navigate("http://money.finance.sina.com.cn/corp/go.php/vMS_MarketHistory/stockid/600460.phtml?year=2013&jidu=1")
Do Until web.ReadyState = 4
    Application.DoEvents
Loop

Dim tb = web.Document.GetElementById("FundHoldSharesTable")
Dim trs = tb.GetElementsByTagName("tr")   '根据标签得到数据集合
For i As Integer = 1 To trs.count-1
    output.show(trs(i).InnerText)
    Dim tds = trs(i).GetElementsByTagName("td")
    For j As Integer = 0 To tds.count-1
        output.show(tds(j).InnerText)
    Next
Next

 

甜版 谢谢  这个代码能否通用呢 其他网页里的表格采集 怎么弄呢

比如http://www.askci.com/news/finance/2016/03/28/10712p1mg.shtml 我改了地址 抓不出来


 回到顶部
帅哥,在线噢!
有点蓝
  6楼 | 信息 | 搜索 | 邮箱 | 主页 | UC


加好友 发短信
等级:超级版主 帖子:110763 积分:563747 威望:0 精华:9 注册:2015/6/24 9:21:00
  发帖心情 Post By:2017/8/15 20:07:00 [只看该作者]

学一下html的基础,然后分析网页源代码,都是一些基础性的东西

Dim web As New System.Windows.Forms.WebBrowser()
web.Navigate("http://www.askci.com/news/finance/2016/03/28/10712p1mg.shtml")
web.ScriptErrorsSuppressed = True
Do Until web.ReadyState = 4
    Application.DoEvents
Loop
Dim tb = web.Document.GetElementsByTagName("table")
Dim trs = tb(0).GetElementsByTagName("tr")   '根据标签得到数据集合
For i As Integer = 1 To trs.count-1
    output.show(trs(i).InnerText)
    Dim tds = trs(i).GetElementsByTagName("td")
    For j As Integer = 0 To tds.count-1
        output.show(tds(j).InnerText)
    Next
Next

 回到顶部
帅哥哟,离线,有人找我吗?
rjh4078
  7楼 | 信息 | 搜索 | 邮箱 | 主页 | UC


加好友 发短信
等级:狐精 帖子:3370 积分:24858 威望:0 精华:0 注册:2012/3/26 21:47:00
  发帖心情 Post By:2017/8/16 7:27:00 [只看该作者]

以下是引用有点蓝在2017/8/15 20:07:00的发言:
学一下html的基础,然后分析网页源代码,都是一些基础性的东西

Dim web As New System.Windows.Forms.WebBrowser()
web.Navigate("http://www.askci.com/news/finance/2016/03/28/10712p1mg.shtml")
web.ScriptErrorsSuppressed = True
Do Until web.ReadyState = 4
    Application.DoEvents
Loop
Dim tb = web.Document.GetElementsByTagName("table")
Dim trs = tb(0).GetElementsByTagName("tr")   '根据标签得到数据集合
For i As Integer = 1 To trs.count-1
    output.show(trs(i).InnerText)
    Dim tds = trs(i).GetElementsByTagName("td")
    For j As Integer = 0 To tds.count-1
        output.show(tds(j).InnerText)
    Next
Next

谢谢蓝版

1.代码没有任何反应

2.跟这个相关的有哪些学习资料参考的


 回到顶部
帅哥哟,离线,有人找我吗?
有点甜
  8楼 | 信息 | 搜索 | 邮箱 | 主页 | UC


加好友 发短信
等级:版主 帖子:85326 积分:427815 威望:0 精华:5 注册:2012/10/18 22:13:00
  发帖心情 Post By:2017/8/16 8:40:00 [只看该作者]


 回到顶部
帅哥哟,离线,有人找我吗?
rjh4078
  9楼 | 信息 | 搜索 | 邮箱 | 主页 | UC


加好友 发短信
等级:狐精 帖子:3370 积分:24858 威望:0 精华:0 注册:2012/3/26 21:47:00
  发帖心情 Post By:2017/8/16 10:20:00 [只看该作者]

代码我测试了没有任何反应

 回到顶部
帅哥哟,离线,有人找我吗?
有点甜
  10楼 | 信息 | 搜索 | 邮箱 | 主页 | UC


加好友 发短信
等级:版主 帖子:85326 积分:427815 威望:0 精华:5 注册:2012/10/18 22:13:00
  发帖心情 Post By:2017/8/16 11:22:00 [只看该作者]

代码没问题。请单独在浏览器测试网址看能否正常访问 http://www.askci.com/news/finance/2016/03/28/10712p1mg.shtml

 


 回到顶部
总数 13 1 2 下一页