看到爬虫两个字,你可能会问爬虫是什么?
爬虫就是会爬的虫子
学习爬虫可以干什么?
可以当一名爬虫工程师
可以快速下载带颜色的视频和图片
可以抢票、抢茅台;可以兼职接单等
在学习爬虫之前,你需要先有python语言的基础
不会python的可以去B站大学里学习
你可能会问,为什么爬虫非得python呢!
C/C++、Java、PHP等不可以做爬虫吗?
可以,但是都没有python语言效率高
并且python学习起来很简单
爬虫的原理是什么?
就是把你要爬取网站的URL丢给爬虫客户端
然后爬虫客户端向目标服务器发起HTTP请求
之后服务器会返回给你结果
之后再把得到的结果进行解析、存储等
闲话不多说
接下来我用一个例子来演示如何利用爬虫快速爬取3G壁纸里面的动漫壁纸
由于爬取的是高质量图片
所以速度稍微有点慢
03:37这里我没有用框架去爬这个网站的图片
如果用了框架去爬
那速度比吃印度神药还猛