前言
本文是该专栏的第9篇,后面会持续分享python爬虫案例干货,记得关注。
地址:aHR0cHM6Ly9jaGVqaWFoYW8uYXV0b2hvbWUuY29tLmNuL0F1dGhvcnMjcHZhcmVhaWQ9MjgwODEwNA==
需求:获取汽车之家车家号数据
笔者将在正文中介绍详细的思路以及采集方法,废话不多说,跟着笔者直接往下看正文详细内容。(附带完整代码)
正文
1. 请求方式和参数分析
使用base64方法获取上述地址的url信息,直接通过浏览器打开目标url,会看到车家号的首页信息。多余的话不说,直接按F12或者Ctrl+Shift+I组合键启动控制台。
接下来要做的就是,通过鼠标将页面滑动到底部的“加载更多”按钮处,如下所示: