最初版本的爬虫因为解析规则当时考虑不足，导致后续统计分析困难。 于是开始设计新爬虫。 新爬虫计划采用 阅读更多…
项目本来打算继承scrapy.Spider写一个基类爬虫，然后其他爬虫继承这个爬虫，仅修改配置及基本 阅读更多…
当在后台采用request.POST.dict()时，获取的dict如下： 当在后台采 阅读更多…
单文件版本回退： 在左下角 version control框中，local changes 中， 查 阅读更多…
开启redis服务， 终端输入 redis-server。 使用Python操作redis，利用re 阅读更多…
scrapy是著名的爬虫开源框架。这里是我的学习记录。 爬虫写在spider目录下的文件，item作 阅读更多…
载入已有工程 打开Pycharm，点击 file – open, 选中一个目录即可。 随 阅读更多…