【发布时间】:2016-03-31 13:07:30
【问题描述】:
我正在尝试从这个网站http://www.whoscored.com/regions/252/tournaments/2/england-premier-league抓取数据
当我使用检查元素时,我看到数据是表格格式,如下图所示。
源代码有这种格式的数据。
DataStore.prime('stagefixtures', $.extend({ stageId: 12496, isAggregate: false }, calendar.parameter()), [[959688,1,'Monday, Dec 21 2015','20:00 ',13,'阿森纳',0,167,'曼城',0,'2 : 1','2 : 0',1,1,'FT','1',0,1,112,0] ,[959683,4,'2015 年 12 月 26 日星期六','12:45',96,'斯托克',0,32,'曼联',0,'vs',,0,1,,'-1 ',0,1,13,0] ,[959615,4,'Saturday, Dec 26 2015','15:00',24,'阿斯顿维拉',0,29,'西汉姆',0,'vs',,0,1,,'- 1',0,1,6,0] ,[959625,4,'Saturday, Dec 26 2015','15:00',183,'伯恩茅斯',0,162,'水晶宫',0,'vs',,0,1,,'-1', 0,1,10,0] ,[959635,4,'2015 年 12 月 26 日星期六','15:00',15,'切尔西',0,27,'沃特福德',0,'vs',,0,1,,'-1' ,0,1,15,0] ,[959645,4,'2015 年 12 月 26 日星期六','15:00',26,'利物浦',0,14,'莱斯特',0,'vs',,0,1,,'-1' ,0,1,15,0] ,[959655,4,'Saturday, Dec 26 2015','15:00',167,'曼城',0,16,'桑德兰',0,'vs',,0,1,,'-1 ',0,1,4,0] ,[959691,4,'Saturday, Dec 26 2015','15:00',259,'Swansea',0,175,'West Bromwich Albion',0,'vs',,0,1,,'-1' ,0,1,5,0] ,[959698,4,'Saturday, Dec 26 2015','15:00',30,'Tottenham',0,168,'Norwich',0,'vs',,0,1,,'-1',0 ,1,8,0] ,[959665,4,'2015 年 12 月 26 日星期六','17:30',23,'纽卡斯尔联队',0,31,'埃弗顿',0,'vs',,0,1,,'-1 ',0,1,7,0] ,[959674,4,'2015 年 12 月 26 日星期六','19:45',18,'南安普顿',0,13,'阿森纳',0,'vs',,0,1,,'-1' ,0,1,11,0] ]);
此代码应该从表格格式中抓取数据,但在这种情况下我不知道该怎么做。
Option Explicit
Sub WeeklyFixtures()
Dim IE As Object, obj As Object
Dim r As Integer, c As Integer, t As Integer
Dim elemCollection As Object
Set IE = CreateObject("InternetExplorer.Application")
With IE
.Visible = True
.navigate ("http://www.whoscored.com/regions/252/tournaments/2/england-premier-league")
While IE.ReadyState <> 4
DoEvents
Wend
Do While IE.busy: DoEvents: Loop
ThisWorkbook.Sheet1.Clear
Set elemCollection = IE.Document.getElementsByTagName("TABLE")
For t = 0 To (elemCollection.Length - 1)
For r = 0 To (elemCollection(t).Rows.Length - 1)
For c = 0 To (elemCollection(t).Rows(r).Cells.Length - 1)
ThisWorkbook.Worksheets(1).Cells(r + 1, c + 1) = elemCollection(t).Rows(r).Cells(c).innerText
Next c
Next r
Next t
End With
Set IE = Nothing
End Sub
【问题讨论】:
-
为什么要使用 VBA 来检索数据?一个简单的
web query在我的电脑上工作得很好。只需在Data菜单上转到Get External Data并选择From Web。您可以在此处输入您提供给我们的 URL,然后选择您要检索的表格。您甚至可以将查询设置为每xx秒刷新一次。 -
@Ralph 我在桌子附近找不到
next ->符号 -
当我尝试在 IE 11 中打开站点时,它没有完成加载,表是空的。在 Firefox 中它运行良好。该网站在 IE 中是否适合您?在您使用 Firefox 的屏幕截图中,您是否尝试在 IE 中手动打开页面?
-
@dee 在 IE 中我得到了所有的表格,但是在 excel 中查询时我没有下一个标志以及表格。
-
表
id="tournament-fixture"正在动态创建。从服务器下载的网页HTML代码不包含它。
标签: javascript vba excel web-scraping