spash对京东商品爬取

使用工具spash

# -*- coding: utf-8 -*-

# Define here the models for your scraped items
#
# See documentation in:
# http://doc.scrapy.org/en/latest/topics/items.html

import scrapy


class SplashTestItem（scrapy.Item）:
    #单价
    price = scrapy.Field（）
    # description = Field（）
    #促销
    promotion = scrapy.Field（）
    #增值业务
    value_add = scrapy.Field（）
    #重量
    quality = scrapy.Field（）
    #选择颜色
    color = scrapy.Field（）
    #选择版本
    version = scrapy.Field（）
    #购买方式
    buy_style=scrapy.Field（）
    #套装
    suit =scrapy.Field（）
    #增值保障
    value_add_protection = scrapy.Field（）
    #白天分期
    staging = scrapy.Field（）
    # post_view_count = scrapy.Field（）
    # post_comment_count = scrapy.Field（）
    # url = scrapy.Field（）

 属性            大小     日期    时间   名称
----------- ---------  ---------- -----  ----

     文件        467  2018-06-10 15:54  spash对京东商品爬取\.idea\finalexp_jingdong.iml

     文件        286  2018-06-10 15:54  spash对京东商品爬取\.idea\modules.xml

     文件      20784  2018-06-10 19:27  spash对京东商品爬取\.idea\workspace.xml

     文件        793  2018-06-10 16:00  spash对京东商品爬取\jingdong\jingdong\items.py

     文件       3601  2018-06-10 15:57  spash对京东商品爬取\jingdong\jingdong\middlewares.py

     文件        713  2018-06-10 16:00  spash对京东商品爬取\jingdong\jingdong\pipelines.py

     文件       3739  2018-06-10 19:27  spash对京东商品爬取\jingdong\jingdong\settings.py

     文件       4253  2018-06-10 16:46  spash对京东商品爬取\jingdong\jingdong\spiders\SplashSpider.py

     文件        161  2017-12-30 05:28  spash对京东商品爬取\jingdong\jingdong\spiders\__init__.py

     文件       3022  2018-06-10 16:48  spash对京东商品爬取\jingdong\jingdong\spiders\__pycache__\SplashSpider.cpython-36.pyc

     文件        156  2018-06-10 16:17  spash对京东商品爬取\jingdong\jingdong\spiders\__pycache__\__init__.cpython-36.pyc

     文件          0  2017-12-30 05:28  spash对京东商品爬取\jingdong\jingdong\__init__.py

     文件        542  2018-06-10 16:17  spash对京东商品爬取\jingdong\jingdong\__pycache__\items.cpython-36.pyc

     文件        715  2018-06-10 16:31  spash对京东商品爬取\jingdong\jingdong\__pycache__\settings.cpython-36.pyc

     文件        148  2018-06-10 16:17  spash对京东商品爬取\jingdong\jingdong\__pycache__\__init__.cpython-36.pyc

     文件        218  2018-06-10 16:48  spash对京东商品爬取\jingdong\output.txt

     文件        259  2018-06-10 15:57  spash对京东商品爬取\jingdong\scrapy.cfg

     目录          0  2018-06-10 16:48  spash对京东商品爬取\jingdong\jingdong\spiders\__pycache__

     目录          0  2018-06-10 16:46  spash对京东商品爬取\jingdong\jingdong\spiders

     目录          0  2018-06-10 16:31  spash对京东商品爬取\jingdong\jingdong\__pycache__

     目录          0  2018-06-10 15:54  spash对京东商品爬取\.idea\inspectionProfiles

     目录          0  2018-06-10 19:27  spash对京东商品爬取\jingdong\jingdong

     目录          0  2018-06-10 19:27  spash对京东商品爬取\.idea

     目录          0  2018-06-10 16:21  spash对京东商品爬取\jingdong

     目录          0  2018-06-10 15:57  spash对京东商品爬取

----------- ---------  ---------- -----  ----

                39857                    25