從輕量級爬蟲的實踐入手，掌握常用利器如Requests、Xpath和Pandas等的使用技巧·通過爬取百度、豆瓣、知乎、拉勾、淘寶、京東等實戰項目，掌握靜態網頁和動態網頁的爬取，給你一個從數據獲取到網頁解析再到數據入庫的清晰地爬蟲無痛學習流程·進一步講解Scrapy框架，實現高效的分布式爬蟲，工程化你的爬蟲，并分享各種反爬與反反爬的博弈攻略·從頭到尾貫穿老師在爬蟲道路上踩過各種坑后的經驗，讓你少走彎路。
【課程內容】
第一章 : Python爬蟲入門
什么是爬蟲
初識Python爬蟲
使用Requests爬取豆瓣短評
使用Xpath解析豆瓣短評
使用pandas保存豆瓣短評數據
瀏覽器抓包及headers設置（案例一：抓取知乎）
數據入庫及MongoDB（案例二：爬取拉勾）
使用自動化神器Selenium爬取動態網頁（案例三：爬取淘寶）
第二章 : Python爬蟲之Scrapy框架
爬蟲工程化及Scrapy框架初窺
Scrapy安裝及基本使用
Scrapy選擇器的用法
Scrapy的項目管道
Scrapy的中間件
Scrapy的Request和Response詳解
第三章 : Python爬蟲進階操作
網絡進階之谷歌瀏覽器抓包分析
數據入庫之去重與數據庫
第四章 : 分布式爬蟲及實訓項目
大規模并發采集——分布式爬蟲
實訓項目（一）——58同城出租信息抓取
實訓項目（二）——去哪兒網模擬登陸
實訓項目（三）——京東商品數據抓取
