• 大小: 3KB
    文件类型: .py
    金币: 2
    下载: 2 次
    发布日期: 2021-06-08
  • 语言: Python
  • 标签: 爬虫  

资源简介

非常简单的一个闲鱼爬虫,可以爬取自己要求的价格区间的商品

资源截图

代码片段和文件信息

# encoding:utf-8

import requests
import re
import time
def getitem(url):
    try:
        headers = {
        ‘User-Agent‘: ‘Mozilla/5.0 (Macintosh; Intel Mac OS X 10_11_2) AppleWebKit/537.36 (KHTML like Gecko) Chrome/47.0.2526.80 Safari/537.36‘
    }
        r = requests.get(url headers = headers timeout=30)
        r.raise_for_status()
        r.encoding = r.apparent_encoding
        # time.sleep(20)
        return r.text
    except:
        print(“出现错误!“)
def getitemdata(url):
    # print(url)
    text = getitem(url)
    price = re.findall(r‘“price“:“.*?“‘ text)
    descr = re.findall(r‘“describe“:“.*?“‘ text)
    itemurl = re.findall(r‘“itemUrl“:“.*?“‘ text)
    title = re.findall(r‘“title“:“.*?“‘ text)
    ilist = []
    # print(“ilist:“ilist)
    filter1 = [‘ps4‘ ‘Ps4‘ ‘PS4‘]
    filters = [‘只出本地‘‘psv‘‘店里‘‘只限‘‘只卖‘‘限北京面交‘‘限天津面交‘‘Ps3‘‘要求‘\
    ‘外地不出‘‘iPhone‘‘收台‘‘铁三角‘‘rc‘ ‘RC‘‘宝马‘‘游泳‘‘外地不卖‘‘空调‘‘gpd‘‘ipad‘‘电吉他‘\
    ‘猫‘‘华为‘‘小叶‘‘体感枪‘‘雷蛇‘‘专用耳机‘‘代购‘‘技嘉‘‘电玩‘‘投影‘‘汽车‘‘显卡‘‘限本地‘‘限同城‘‘3DS‘\
    ‘苹果‘‘联想‘‘wii‘‘Wii‘‘WII‘ ‘收个‘ ‘收一台‘‘笔记本‘‘典藏版‘‘apple‘‘2ds‘‘switch‘‘三星‘‘便携‘‘华硕‘‘x-rover‘\
    ‘小米‘‘PSV‘‘方向盘‘‘收PS4‘ ‘慢收‘ ‘显示屏‘‘ps3‘ ‘OPPO‘‘3ds‘‘求购‘‘全新未拆‘‘摇杆‘‘笔记本‘‘耳

评论

共有 条评论