【实例】python 使用beautifulSoup 抓取网页正文 以淘宝商品价格为例

news/2025/2/12 5:06:59/

参考文章:

利用BeautifulSoup抓取新浪网页新闻的内容

使用Requests库和BeautifulSoup库来爬取网页上需要的文字与图片

-------------------------------------------------------------------

>>> import requests
>>> import re

>>> from bs4 import BeautifulSoup

>>> r=requests.get("https://s.taobao.com/search?q=iphone")
>>> html=r.text
>>> j=1
>>> title =re.findall(r'\"raw_title\"\:\".*?\"', html)
>>> price= re.findall(r'\"view_price\"\:\"[\d\.]*\"', html)
>>> for i in range(len(price)): #print 一定空格,后退一步,表示程序执行先后
...      print("标题为:{:50};价格为:{}".format(eval(title[i].split(':')[1]),eval(price[i].split(':')[1])))
...
标题为:【到手价5149】Apple/苹果 iPhone 8 64G 全网通4G手机 苹果8        ;价格为:5888.00
标题为:【限时低价疯抢】Apple/苹果 iPhone 6 32G 全网通4G手机             ;价格为:2299.00
标题为:ROCK车载手机支架汽车用苹果8x无线充电器iPhone重力出风口导航架              ;价格为:128.00
标题为:XPEL隐形车衣iphone x手机膜软膜苹果x手机膜iPhone X水凝贴膜           ;价格为:558.00
标题为:Belkin/贝尔金双口车充USB车载充电器iPhone 8/X/7plus点烟器快充       ;价格为:109.00
标题为:飞利浦车载无线充电器手机快三星iphone苹果万能通用出风口支撑架                 ;价格为:269.00
标题为:防滑垫车载手机支架仪表中控台汽车用硅胶苹果手机座iPhone导航仪                 ;价格为:48.00
标题为:【限量抢】Apple/苹果 iPhone 8 Plus 全网通手机苹果8plus          ;价格为:6258.00
标题为:Apple/苹果 iPhone 8 双网通 移动联通双4G 苹果8 iphone8         ;价格为:5338.00
标题为:【限量抢】Apple/苹果 iPhone 7 32GB双网通移动联通双4G原封国行         ;价格为:3988.00
标题为:【1399疯抢!】Apple/苹果 iPhone5s 移动联通双4G手机 原封国行         ;价格为:1399.00
标题为:【限时限量抢】Apple/苹果 iPhone 7 128G 全网通4G智能手机           ;价格为:5388.00
标题为:Apple/苹果 iPhone X 苹果X 新款苹果手机 5.8英寸 苹果8x 未激活       ;价格为:7108.00


使用Requests库和BeautifulSoup库来爬取网页上需要的文字与图片

http://www.ppmy.cn/news/659220.html

相关文章

苹果7plus专用计算机,iPhone 7 Plus惨了竟用TLC内存?果粉要哭了

【PConline 资讯】随着iPhone 7和iPhone 7 Plus的开卖,各大科技媒体纷纷开始对iPhone 7进行评测,然而大家对其内部结构也是充满了好奇心,现在据iFixit的拆机报告显示,部分128GB版本的iPhone7 Plus采用的是TLC存储芯片。 iPhone 7拆…

一次线上事故,我顿悟了异步的精髓

在高并发的场景下,异步是一个极其重要的优化方向。 前段时间,生产环境发生一次事故,笔者认为事故的场景非常具备典型性 。 写这篇文章,笔者想和大家深入探讨该场景的架构优化方案。希望大家读完之后,可以对异步有更深…

redismariadb + keepalived 高可用

目录 机器准备 安装后服务 redis 安装redis mariadb 安装mariadb 启动和配置 互为主从同步配置 keepalived keepalived安装 修改主从 keepalived的配置 主从配置-mariadb监控 主从配置-redis监控 查看和使用 Keepalived Mariadb redis 机器准备 两台机器&…

店宝宝:9.9致富经

一把小小的电动牙刷还掀起了一个百亿级别的市场浪潮。 淘宝第三方监测数据显示,2017年淘宝电动牙刷销售额约18亿元;2018年翻了一倍多,达到38亿元;2019年全年销售额同比继续增长50%,约为57亿元,行业实现爆发…

亚马逊Prime会员日:销量超去年“黑五”及“网络星期一”总和

近日,亚马逊宣布2019年亚马逊Prime会员日销售在全球范围内再创新高,7月15、16日两天的销量超过去年 “黑色星期五”及“网络星期一”的总和,再度成为亚马逊全球史上最大的购物狂欢。2019亚马逊中国Prime会员日海外购销售额同比去年也实现了3倍…

机器学习优化器和SGD和SGDM实验对比(编程实现SGD和SGDM)

机器学习优化器和SGD和SGDM实验对比 博主最近在学习优化器,于是呢,就做了一个SGD和SGDM的实验对比,可谓是不做不知道,一做吓一跳,这两个算法最终对结果的影响还是挺大的,在实验中SGDM明星要比SGD效果好太多…

2022-2027年中国智能炒菜机行业发展监测及投资战略研究报告

【报告格式】电子版、纸介版 【出品单位】华经产业研究院 本报告由华经产业研究院出品,对中国智能炒菜机行业的发展现状、竞争格局及市场供需形势进行了具体分析,并从行业的政策环境、经济环境、社会环境及技术环境等方面分析行业面临的机遇及挑战。还…

高性能电工电子电拖及自动化技术实训与考核装置

ZN-800D高性能电工电子电拖及自动化技术实训与考核装置 一、概述: ZN-800D高性能电工电子电拖及自动化技术实训与考核装置是吸取国内外同类产品合理的实训方法,先进、科学的实训手段并加以消化、整合、提高而研制的针对高等院校、职业技术教育而开发的综合性实训考核装置。其…