
有很多工具,例如八爪鱼、影刀等,不用会编程也能用来进行数据采集,当然如果网站反爬比较严格,或者想高效获取大量数据,那就不好使了,只是偶尔采集少量数据可以,如果今后从事爬虫工作或者时不时就需要采集不少数据的话,还是建议好好学习一下爬虫,关于 python 爬虫的学习我可以给到以下推荐:
你在网上看到的,95%以上的都是爬虫基础,特别是各种营销号,有很多视频,没有更“高级”的东西,包括知乎上你看到的回答,95%以上都是回答一些基础(可能回答的人自己都没进阶搞过爬虫,只是道听途说),基础你随便找资料学就行了,B站视频也很多,大同小异。进阶主要是逆向,你会发现基本上没有教程,也很少有人讲这方面的东西,爬虫入门简单,深入很难,我推荐你看以下书籍(我认为是必看的):
视频方面,我只推荐进阶,也就是逆向相关的视频:免费:
收费:
推荐多逛一下各大论坛:
PS:很多搞易语言的对于逆向很拿手,可以逛逛易语言的一些论坛,重要的是思路,实现的语言无所谓,也可以关注 K 哥公众号,我会分享一些 JS 逆向知识,比较适合新手。
爬虫工具推荐:spidertools
爬虫代理推荐:快代理(国内HTTP代理)、bright data(海外HTTP代理)
爬虫工程师的尽头是逆向安全工程师!
