人海茫茫
相识真好

推荐几款爬虫分析神器

Toggle JavaScript

这款工具之前推荐过,这里就再推荐一次,凑个数吧。这是一款禁止异步加载的 Chrome 工具。就拿 QQ 音乐为例子,打开 Toggle JavaScript 之后,其数据一直无法加载,进度条一直打转。如下图,关闭之后,页面显示正常。

推荐几款爬虫分析神器


推荐几款爬虫分析神器
使用后

推荐几款爬虫分析神器
未使用

JSONView

这是一款 JSON 数据可视化工具,有些网页数据是异步加载的,还是拿 QQ 音乐举例,其歌词是异步加载的 JSON 数据,若你复制 JSON 链接打开如下图,安装 JSONView 之后,如下下图。数据格式化,井然有序,看起来舒服,可以多些几百行代码。

推荐几款爬虫分析神器


推荐几款爬虫分析神器


推荐几款爬虫分析神器

User-Agent Switcher for Chrome

这款工具可以随意修改 Chrome 浏览器的 user-agent ,用法很简单,这里就不再具体介绍了。只要点击不同的按钮,就会切换到相应的请求头。

推荐几款爬虫分析神器


推荐几款爬虫分析神器


XPath Helper

分析 HTML 源码的时候,很管用。单击图标开启,开启之后,在黑色框中输入 xpath 即可即时验证。快捷键为:command + shift + x(maxOS)ctrl + shift + x(Windows)


推荐几款爬虫分析神器




推荐几款爬虫分析神器



往期推荐:

爬虫利器初体验(1)

听说你的爬虫又被封了?(2)

爬取数据不保存,就是耍流氓(3)

抖音小姐姐属于你的四种姿势






公众号「zone7」


推荐几款爬虫分析神器

赞(0) 打赏
未经允许不得转载:老康的学习空间 » 推荐几款爬虫分析神器

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

微信扫一扫打赏