python爬虫是什么

本文操作环境：Windows7系统、Dell G3电脑、python3.6.4版。

python爬虫是什么意思？python为什么叫爬虫？相信很多人对python爬虫并不是很了解，下面我们来讲一下python爬虫是什么？

什么是爬虫？

我们把互联网有价值的信息都比喻成大的蜘蛛网，而各个节点就是存放的数据，而蜘蛛网的上蜘蛛比喻成爬虫，而爬虫是可以自动抓取互联网信息的程序，从互联网上抓取一切有价值的信息，并且把站点的html和js返回的图片爬到本地，并且存储方便使用。

立即学习“Python免费学习笔记（深入）”；

python为什么叫爬虫？

很多人不知道python为什么叫爬虫，这可能是根据python的脚步特点，python很容易进行配置，对字符的处理也是非常灵活的，在加上python有很多的抓取模块，所以说python也叫爬虫。

爬虫的组成？

Python爬虫的结构主要是有调度器，网页解析器，网页选择器，url管理器，和程序五个部分组成。

爬虫的流程？

首先是发送请求，然后获取响应的内容，并且解析内容，最后是保存数据，就完成了一次的抓取。