• 大小: 61KB
    文件类型: .zip
    金币: 2
    下载: 1 次
    发布日期: 2021-06-10
  • 语言: Python
  • 标签: python  scrapy  

资源简介

python3 + scrapy 网络爬虫实战(二),—— 使用pipeline数据保存到文本和数据库(mysql) 地址:https://blog.csdn.net/finn_wft/article/details/80885048

资源截图

代码片段和文件信息

# -*- coding: utf-8 -*-

from scrapy.cmdline import execute

execute([‘scrapy‘ ‘crawl‘ ‘hotel‘])

 属性            大小     日期    时间   名称
----------- ---------  ---------- -----  ----
     目录           0  2018-07-02 16:27  qunar\
     文件      579712  2018-07-02 11:46  qunar\city_list.json
     文件         102  2018-06-29 10:38  qunar\entrypoint.py
     目录           0  2018-07-02 15:30  qunar\qunar\
     文件           0  2017-10-21 13:25  qunar\qunar\__init__.py
     目录           0  2018-07-02 16:26  qunar\qunar\__pycache__\
     文件         147  2018-07-02 10:25  qunar\qunar\__pycache__\__init__.cpython-36.pyc
     文件         499  2018-07-02 11:43  qunar\qunar\__pycache__\items.cpython-36.pyc
     文件        2492  2018-07-02 16:26  qunar\qunar\__pycache__\pipelines.cpython-36.pyc
     文件         457  2018-07-02 16:13  qunar\qunar\__pycache__\settings.cpython-36.pyc
     文件         400  2018-07-02 11:11  qunar\qunar\items.py
     文件        1903  2018-07-02 10:22  qunar\qunar\middlewares.py
     文件        2132  2018-07-02 16:26  qunar\qunar\pipelines.py
     文件        3404  2018-07-02 16:13  qunar\qunar\settings.py
     目录           0  2018-07-02 10:25  qunar\qunar\spiders\
     文件         161  2017-10-21 13:25  qunar\qunar\spiders\__init__.py
     目录           0  2018-07-02 16:13  qunar\qunar\spiders\__pycache__\
     文件         155  2018-07-02 10:25  qunar\qunar\spiders\__pycache__\__init__.cpython-36.pyc
     文件        1062  2018-07-02 16:13  qunar\qunar\spiders\__pycache__\hotel.cpython-36.pyc
     文件        2006  2018-07-02 15:37  qunar\qunar\spiders\hotel.py
     文件         254  2018-07-02 10:22  qunar\scrapy.cfg

评论

共有 条评论