我正在尝试将来自纽约证券交易所网站（http://www1.nyse.com/about/listed/IPO_Index.html）的表格抓取到熊猫数据框中。为了做到这一点，我有一个像这样的设置：

def htmltodf(url):
page = requests.get(url)
soup = BeautifulSoup(page.text)

tables = soup.findAll('table')
test = pandas.io.html.read_html(str(tables))

return(test)            #return dataframe type object

但是，当我在页面上运行此命令时，列表中返回的所有表实际上都是空的。当我进一步调查时，我发现该表是由javascript生成的。在我的Web浏览器中使用开发人员工具时，我看到该表看起来与带有标签等的任何其他HTML表一样。但是，在源代码视图中却显示了类似以下内容：

<script language="JavaScript">

.
.
.

<script>
var year = [["ICC","21st Century Oncology Holdings, Inc.","22 May  2014","/about/listed/icc.html" ],
... more entries here ...
,["ZOES","Zoe's Kitchen, Inc.","11 Apr 2014","/about/listed/zoes.html" ]] ;

    if(year.length != 0) 
    {

    document.write ("<table width='619' border='0' cellspacing='0' cellpadding='0'><tr><td><span class='fontbold'>");
    document.write ('2014' + " IPO Showcase"); 
    document.write ("</span></td></tr></table>"); 
    }  
</script>

因此，当我的HTML解析器去寻找table标记时，它只能找到if条件，而下面没有合适的标记会指示内容。我怎么刮这张桌子？是否可以搜索标签而不是显示内容的表格？因为代码不是传统的html表形式，所以我如何用熊猫读入代码-
我必须手动解析数据吗？