zl程序教程

您现在的位置是:首页 >  后端

当前栏目

requests爬虫实战:某基金信息爬取

爬虫 实战 信息 requests 爬取 基金
2023-09-14 09:14:35 时间

一、请求探索

网页分析:
在这里插入图片描述
页码分析:
1.第一页:https://gs.amac.org.cn/amac-infodisc/api/pof/fund?rand=0.652806594661254&page=0&size=20
2. 第二页: https://gs.amac.org.cn/amac-infodisc/api/pof/fund?rand=0.652806594661254&page=1&size=20
3. https://gs.amac.org.cn/amac-infodisc/api/pof/fund?rand=0.652806594661254&page=2&size=20

单数刷新一下rand发生变化:似乎就是是一个随机数
https://gs.amac.org.cn/amac-infodisc/api/pof/fund?rand=0.16767992415199218&page=0&size=20

规律变化:页码部分需要调整,rand部分随机的。

https://gs.amac.org.cn/amac-infodisc/api/pof/fund?rand={}&page={}&size=20

也可以通过JS查看确定一下就是用的一个随机函数: