web-scraping - 抓取 Google 公共数据

Question

我有兴趣从 Google 公共数据中抓取此数据集：

https://www.google.com/publicdata/explore?ds=gb66jodhlsaab_#!ctype=l&strail=false&bcs=d&nselm=h&met_y=Capital_St&scale_y=lin&ind_y=false&rdim=state&idim=state:AL:AK:AZ:AR:CO:CA :CT:DE:DC:FL:GA:HI:IL:ID:IN:KS:KY:LA:IA:ME:MD:MA:MI:MS:MO:MN:MT:NV:NH:NE:NJ :NM:NY:NC:ND:OK:OH:OR:PA:RI:SC:SD:TX:UT:TN:VT:WA:VA:WV:WI:WY&ifdim=state&hl=en_US&dl=en_US&ind=false

有没有办法做到这一点，因为当我点击页面底部的链接时，数据存储在哪里并不明显？（而且 Google 公共数据不允许下载？）

标签： web-scraping

Answer 1

页面底部有一个链接指向数据集的来源。他们在 Excel 中有可用的数据，因此它可能就是您要查找的数据。

https://www.fhwa.dot.gov/policyinformation/index.cfm