Python爬虫实战:应用宝APP数据信息采集
发布网友
发布时间:2022-12-06 07:59
我来回答
共1个回答
热心网友
时间:2024-11-08 21:48
数据来源: 应用宝
开发环境:win10、python3.7
开发工具:pycharm、Chrome
明确需要采集的数据:
提取到页面的分类标签
获取到a标签的href属性
用于之后拼接动态地址
找到动态加载的app数据加载地址
url的值是每个分类标签的值
https://sj.qq.com/myapp/cate/appList.htm?orgame=1&categoryId=-10&pageSize=20&pageContext=undefined
拼接新的url值发送请求