来了!送女朋友的礼物怎能不精心准备呢?Python分析猫咪交易数据!"/>
七夕很快就要来了!送女朋友的礼物怎能不精心准备呢?Python分析猫咪交易数据!
前言
各位,七夕快到了,想好要送什么礼物了吗?
昨天有朋友私信我,问我能用Python分析下网上小猫咪的数据,是想要送一只给女朋友,当做礼物。
网上的数据太多、太杂,而且我也不知道哪个网站的数据比较好。所以,只能找到一个猫咪交易网站的数据来分析了
地址:
/
爬虫部分
请求数据
import requestsurl = f'.php?/chanpinliebiao_c_2_1--24.html' headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/92.0.4515.131 Safari/537.36' } response = requests.get(url=url, headers=headers) print(response.text)
解析数据
# 把获取到的 html 字符串数据转换成 selector 对象 这样调用 selector = parsel.Selector(response.text) # css 选择器只要是根据标签属性内容提取数据 编程永远不看过程 只要结果 href = selector.css('.content:nth-child(1) a::attr(href)').getall() areas = selector.css('.content:nth-child(1) .area .color_333::text').getall() areas = [i.strip() for i in areas] # 列表推导式
提取标签数据
for index in zip(href, areas):# .php?/chanpinxiangqing_224383.htmlindex_url = '' + index[0]response_1 = requests.get(url=index_url, headers=headers)selector_1 = parsel.Selector(response_1.text)area = index[1]# getall 取所有 get 取一个title = select
更多推荐
七夕很快就要来了!送女朋友的礼物怎能不精心准备呢?Python分析猫咪交易数据!
发布评论