第一步:确定目标地址
国家统计统计局网址:http://data.stats.gov.cn/easyquery.htm?cn=C01
1.1 找的国内生产总值,即需要爬取的数据
1.2 鼠标右击--->检查网页源代码--->在网页源代码中查找是否存在我们需要的数据(Ctrl+F,在查找框中输入要查找的数据)
由此可以判断,我们需要的数据并不是直接在HTML页面中(数据是动态加载的,即url并不是地址栏中的地址),所以我们需要去判断谁是真正的url
1.3 按F12
选中Network---->XHR(动态数据都会在这里面)---->重新刷新页面---->在开发者界面中找到我们的数据包
在数据包中的Headers部分找到Request URL (这就是我们所需要的URL)
网友评论