之前零散的学过一些爬虫，并且最近自己用的也比较频繁，借此机会整理一篇大体的爬虫框架笔记。一个基本的爬虫通常分为网页下载、网页解析和数据存储三个部分的内容。