本書由七個項目組成，分為初識網絡爬蟲、基于Python庫實現(xiàn)靜態(tài)數據采集、基于urllib實現(xiàn)客戶端數據采集、基于Requests-HTML實現(xiàn)動態(tài)數據采集、基于Scrapy框架實現(xiàn)網頁數據采集、基于Scrapy-redis分布式實現(xiàn)網頁數據采集以及基于自動化測試工具實現(xiàn)網頁數據采集。