python爬虫关于动态url的匹配的问题 - Python论坛

编程论坛 → 开发语言 → 『 Python论坛』 → python爬虫关于动态url的匹配的问题

标题：python爬虫关于动态url的匹配的问题

只看楼主

xingshuyin

等　级：新手上路
帖　子：2
专家分：0
注　册：2020-11-17
结帖率：0

楼主

已结贴√ 问题点数：20 回复次数：3

python爬虫关于动态url的匹配的问题

今天想要帮学校爬取学生处后台的企业信息，因为后台是用JavaScript写的动态页面，没法直接find ，我就想用requests获取，json数据，当输入url时发现他的末尾的数字是根据time.time()写的而且精确到了毫秒，

有没有大佬能够知道如何匹配这样的url吗

搜索更多相关主题的帖子: python　动态　爬虫　 url　匹配　

2020-11-17 18:31

fall_bernana

等　级：贵宾
威　望：17
帖　子：240
专家分：2086
注　册：2019-8-16

第 2 楼

得分:20

以下是引用xingshuyin在2020-11-17 18:31:44的发言：

今天想要帮学校爬取学生处后台的企业信息，因为后台是用JavaScript写的动态页面，没法直接find ，我就想用requests获取，json数据，当输入url时发现他的末尾的数字是根据time.time()写的而且精确到了毫秒，

有没有大佬能够知道如何匹配这样的url吗

这个毫秒的参数应该不会影响你获取数据。如果你获取不到数据应该用selenium 来获取动态js的页面，而不是requests

2020-11-18 13:22

xingshuyin

等　级：新手上路
帖　子：2
专家分：0
注　册：2020-11-17

第 3 楼

得分:0

回复 2楼 fall_bernana

request是不是只能获取静态的页面?

2021-03-30 16:17

sssooosss