2022 年 Python3 网络爬虫教程
大家好，我是崔庆才，由于爬虫技术不断迭代升级，一些旧的教程已经过时、案例已经过期，最前沿的爬虫技术比如异步、JavaScript 逆向、安卓逆向、智能解析、WebAssembly、大规模分布式、Kubernetes 等技术层出不穷，我最近新出了一套最新最全面的 Python3 网络爬虫系列教程。
博主自荐：截止 2022 年，可以将最前沿最全面的爬虫技术都涵盖的教程，如异步、JavaScript 逆向、安卓逆向、智能解析、WebAssembly、大规模分布式、Kubernetes 等，市面上目前就这一套了。
最新教程对旧的爬虫技术文章进行了全面更新，搭建了全新的案例平台进行全面讲解，保证案例稳定有效不过期。
教程请移步：
2018 年 Python3 网络爬虫视频课程链接
以下为 2018 年 Python3 网络爬虫视频课程
天善智能：自己动手，丰衣足食！Python3 网络爬虫实战案例 网易云课堂：自己动手，丰衣足食！Python3 网络爬虫实战案例
课程简介
大家好哈，现在呢静觅博客已经两年多啦，可能大家过来更多看到的是爬虫方面的博文，首先非常感谢大家的支持，希望我的博文对大家有帮助！ 之前我写了一些 Python 爬虫方面的文章，Python 爬虫学习系列教程，涉及到了基础和进阶的一些内容，当时更多用到的是 Urllib 还有正则，后来又陆续增加了一些文章，在学习过程中慢慢积累慢慢成型了一套算不上教程的教程，后来有越来越多的小伙伴学习和支持我感到非常开心，再次感谢大家！ 不过其实这些教程总的来说有一些问题：
- 当时用的 Python2 写的，刚写的时候 Scrapy 这个框架也没有支持 Python3，一些 Python3 爬虫库也不怎么成熟，所以当时选择了 Python2。但到现在，Python3 发展迅速，爬虫库也越来越成熟，而且 Python2 在不久的将来就会停止维护了，所以慢慢地，我的语言重心也慢慢转向了 Python3，我也相信 Python3 会成为主流。所以说之前的一套课程算是有点过时了，相信大家肯定还在寻找 Python3 的一些教程。
- 当时学习的时候主要用的 urllib，正则，所以这些文章的较大篇幅也都是 urllib 和正则的一些东西，后来的一些高级库都是在后面慢慢加的，而且一些高级的框架用法也没有做深入讲解，所以感觉整个内容有点头重脚轻，安排不合理。而且现在分布式越来越火，那么分布式爬虫的应用相必也是越来越广泛，之前的课程也没有做系统讲解。
- 在介绍一些操作的时候可能介绍不全面，环境的配置也没有兼顾各个平台，所以可能有些小伙伴摸不着头脑，可能卡在某一步不知道接下来是怎么做的了。
那么综合上面的问题呢，最近我花了前前后后将近一个月的时间录制了一套新的 Pyhthon3 爬虫视频教程，将我之前做爬虫的一些经验重新梳理和整合，利用 Python3 编写，从环境配置、基础库讲解到案例实战、框架使用，最后再到分布式爬虫进行了比较系统的讲解。 课程内容是这个样子的：
一、环境篇
- Python3+Pip 环境配置
- MongoDB 环境配置
- Redis 环境配置
- MySQL 环境配置
- Python 多版本共存配置
- Python 爬虫常用库的安装
二、基础篇
- 爬虫基本原理
- Urllib 库基本使用
- Requests 库基本使用
- 正则表达式基础
- BeautifulSoup 详解
- PyQuery 详解
- Selenium 详解
三、实战篇
- 使用 Requests+正则表达式爬取猫眼电影
- 分析 Ajax 请求并抓取今日头条街拍美图
- 使用 Selenium 模拟浏览器抓取淘宝商品美食信息
- 使用 Redis+Flask 维护动态代理池
- 使用代理处理反爬抓取微信文章
- 使用 Redis+Flask 维护动态 Cookies 池
四、框架篇
- PySpider 框架基本使用及抓取 TripAdvisor 实战
- PySpider 架构概述及用法详解
- Scrapy 框架的安装
- Scrapy 框架基本使用
- Scrapy 命令行详解
- Scrapy 中选择器的用法
- Scrapy 中 Spiders 的用法
- Scrapy 中 Item Pipeline 的用法
- Scrapy 中 Download Middleware 的用法
- Scrapy 爬取知乎用户信息实战
- Scrapy+Cookies 池抓取新浪微博
- Scrapy+Tushare 爬取微博股票数据
五、分布式篇
- Scrapy 分布式原理及 Scrapy-Redis 源码解析
- Scrapy 分布式架构搭建抓取知乎
- Scrapy 分布式的部署详解
整个课程是从小白起点的，从环境配置和基础开始讲起，环境安装部分三大平台都有介绍，实战的部分我是一边写一边讲解，还有一些分布式爬虫的搭建流程也做了介绍。 不过这个课程是收费的，其实里面也包含了我学习爬虫以来的经验和汗水，我在做讲解的时候也会把我学习爬虫的一些思路和想法讲解出来，避免大家走一些弯路，希望大家可以支持一下！ 不过在这里有免费的视频，是属于整个课程的一部分，大家可以直接观看 Python3 爬虫三大案例实战分享 整套视频课程放在天善智能这边了，大家如果感兴趣的话可以直接在这里购买，499 元。 课程链接如下： 天善智能：自己动手，丰衣足食！Python3 网络爬虫实战案例 网易云课堂：自己动手，丰衣足食！Python3 网络爬虫实战案例 
最后的最后希望大家可以多多支持！非常感谢！知识就是力量！也希望我的课程能为您创造更大的财富！
