苏南大叔准备写个水一点的文章，说说python相关的一系列版本号的查看问题。这包括python,pip，pip的package等等的版本号。比较基础的小应用知识点，但是可能会比较容易混淆，所以这里做个总结。python版本号pyt...

苏南大叔在本篇文章中，继续讲述scrapy如何处理item数据，如何把抓取到的item数据，持久化到mysql数据库之中。本文的主要战场是：piplines.py这个文件。在python中，配合mysql的库文件也有好多个。本文中...

pipline是scrapy系列处理数据的地方，在pipline里面，可以把采集到的数据持久化。而scrapy就是item就是数据的标准格式，有点像以前c#时代的model，定义数据属性的地方。那么，通常意义上的，抓取到的数据要经...

scrapy获取到response对象后，需要对response对象进行解析，才能取到后续数据。本文中，苏南大叔将对scrapy解析数据的几种方式，进行总结说明。这其中包括官方推荐的.css，.xpath方式，当然还包括有广大we...

本文描述如何利用pycharm单步调试 scrapy的项目代码，方式主要有两种，适用的途径是不一样的。但对于调试这件事情来说，这两种方案效果都是一致的，有效。不过对于通过pycharm运行scrapy项目来说，这两种方式是有较大差...