大家好,我是南枫~~~
先问大家一个问题,你们有没有遇到过想爬一个网站,想用老方法,直接右键打开抓包工具,此时,突然!整个页面都变得空白,什么数据都没有了的情况……
如果你没遇到过那你去看看这个网站:
https://talent.baidu.com/jobs/social-list?search=Python
(百度招聘网站)
打开这个页面之后,右键检查,打开抓包工具,然后你就会发现一片空白:
这样一幕。对于我们爬虫来说,连抓包工具都打不开了,何谈“爬”数据呢?
所以我想需要抓包工具和数据重见天日!如此巨大工程如何实现?今天这篇文章就来教大家如何让抓包工具重现江湖!
首先先把about:blank复制一下:
点击源代码:
点击“事件监听器断点”:
在“事件监听器断点”里面找到“脚本”并勾选:
点击返回上一页
可以发现,我们现在已经进入到调试阶段中:
在文件中按“唱跳rap篮球键”也就是ctrl键+f键进行搜索,搜索内容就是我们前面所复制的“about:blank”,可以发现在这个文件中并没有,那么我们选择“继续执行脚本”
再出现的每一个文件都需要进行搜索,直到找到有“about:blank”内容的文件:
找到之后直接把包含“about:blank”的这行代码给注释:
看好接下来的“十步走”操作:
此方法需多练习,才能做到熟能生巧,千万不要看了文章就觉得没用了,等下次你遇到此类问题,就能大大节省时间。