scrapy爬虫爬取应用宝上的内容并写入数据库

本人学了1个月python 然后写出了这个demo ，新手可以参考一下，核心代码不超过50行

# -*- coding: utf-8 -*-

# Define here the models for your scraped items
#
# See documentation in:
# http://doc.scrapy.org/en/latest/topics/items.html

import scrapy


class TxyybdemoItem（scrapy.Item）:
    # define the fields for your item here like:
    # name = scrapy.Field（）
    category=scrapy.Field（）
    rate=scrapy.Field（）
    version=scrapy.Field（）
    intro=scrapy.Field（）
    title=scrapy.Field（）

 属性            大小     日期    时间   名称
----------- ---------  ---------- -----  ----
     目录           0  2017-12-15 09:49  txyybDemo\
     文件        6148  2017-12-15 09:49  txyybDemo\.DS_Store
     目录           0  2017-12-22 10:47  __MACOSX\
     目录           0  2017-12-22 10:47  __MACOSX\txyybDemo\
     文件         120  2017-12-15 09:49  __MACOSX\txyybDemo\._.DS_Store
     目录           0  2017-12-19 09:45  txyybDemo\.idea\
     目录           0  2017-12-14 15:47  txyybDemo\.idea\inspectionProfiles\
     文件         185  2017-12-14 15:46  txyybDemo\.idea\misc.xml
     文件         270  2017-12-14 15:46  txyybDemo\.idea\modules.xml
     文件         467  2017-12-14 15:47  txyybDemo\.idea\txyybDemo.iml
     文件       22179  2017-12-19 09:45  txyybDemo\.idea\workspace.xml
     文件         262  2017-12-14 15:43  txyybDemo\scrapy.cfg
     目录           0  2017-12-15 09:49  txyybDemo\txyybDemo\
     文件        6148  2017-12-15 09:49  txyybDemo\txyybDemo\.DS_Store
     目录           0  2017-12-22 10:47  __MACOSX\txyybDemo\txyybDemo\
     文件         120  2017-12-15 09:49  __MACOSX\txyybDemo\txyybDemo\._.DS_Store
     文件           0  2017-12-06 15:39  txyybDemo\txyybDemo\__init__.py
     文件         173  2017-12-14 15:44  txyybDemo\txyybDemo\__init__.pyc
     文件         409  2017-12-14 17:06  txyybDemo\txyybDemo\items.py
     文件        1907  2017-12-14 15:43  txyybDemo\txyybDemo\middlewares.py
     文件        1047  2017-12-14 17:21  txyybDemo\txyybDemo\pipelines.py
     文件        1731  2017-12-14 17:23  txyybDemo\txyybDemo\pipelines.pyc
     文件        3154  2017-12-14 16:47  txyybDemo\txyybDemo\settings.py
     文件         406  2017-12-14 16:49  txyybDemo\txyybDemo\settings.pyc
     目录           0  2017-12-14 17:38  txyybDemo\txyybDemo\spiders\
     文件         161  2017-12-06 15:39  txyybDemo\txyybDemo\spiders\__init__.py
     文件         181  2017-12-14 15:44  txyybDemo\txyybDemo\spiders\__init__.pyc
     文件       58910  2017-12-14 16:27  txyybDemo\txyybDemo\spiders\app_list.json
     文件        1041  2017-12-14 16:26  txyybDemo\txyybDemo\spiders\yybspider.py
     文件        1693  2017-12-14 16:26  txyybDemo\txyybDemo\spiders\yybspider.pyc
     文件        1652  2017-12-14 17:38  txyybDemo\txyybDemo\spiders\yybspider_detail.py
............此处省略1个文件信息