爬虫的全称为网络爬虫，简称爬虫，别名有网络机器人，网络蜘蛛等等。
网络爬虫是一种自动获取网页内容的程序，为搜索引擎提供了重要的数据支撑。搜索引擎通过网络爬虫技术，将互联网中丰富的网页信息保存到本地，形成镜像备份。我们熟悉的谷歌、百度本质上也可理解为一种爬虫。
如果形象地理解，爬虫就如同一只机器蜘蛛，它的基本操作就是模拟人的行为去各个网站抓取数据或返回数据。
博主断断续续学习练习了两三年python爬虫，从网上看了无数教程，跟大神们学习了各种神奇的操作，现在虽然没成为大神，但是想通过这篇教程来分享自己学习的爬虫实战案例。
不多废话，下面将这份教程展示给大家。
第一章：工具准备
第二章：从一个简单的HTTP请求开始
第三章：简单的HTML解析--爬取腾讯新闻
第四章：使用cookie模拟登录--获取电子书下载链接
第五章：获取JS动态内容一爬取今日头条
第六章：提高爬电效率一并发爬取智联招聘
第七章：使用Selenium--以抓取QQ空间好友说说为例
第八章：数据储存--MongoDB与MySQL
第九章：下一步
在实际的网络数据采集中,可能面对的网站部署了非常多非常复杂的反爬虫手段来限制爬虫的爬取行为，所以大家可以更加深入地了解如何使用代理 IP 池来避免频繁采集下的 IP被封。
这些都是深入学习爬虫所必须经过的路、踩下的坑。