Python爬虫做到一定阶段一定会遇到动态页面网页源码里全是空壳你要的数据根本不在HTML里而是靠JavaScript在浏览器里临时请求回来的。前几节我们已经用Playwright打开过这类页面能抓到数据但每次都要启动一个浏览器慢、吃内存还容易因为页面样式变化而崩。这一节换一个思路先打开Network面板把页面背后的API接口找出来再用Requests直接请求这些接口。这个思路解决的是动态页面爬取中最核心的“数据到底在哪个请求里”的问题也适合所有被动态加载、翻页、局部刷新折磨过的零基础爬虫读者。下面我会按实际操作顺序来讲包括怎么判断要不要上Playwright、怎么用Network找接口、怎么用Requests把接口变成能反复跑的脚本以及我在真实项目里碰到过的各种状态码和各种坑。整个流程跑通一遍你对动态页面的理解会上一个台阶。1. 动态页面的数据到底藏在哪里先弄懂原理再动手1.1 页面源码里没有数据不代表网上没数据很多刚入门的朋友第一次碰到动态页面都会懵。网页源码打开CtrlF搜一个想在页面上看到的数字比如销量、粉丝数、价格结果什么都搜不到整页全是