代码拉取完成,页面将自动刷新
"""
爬取当当网的内容
"""
import requests
from lxml import html
def spider(SN, book_list=[]):
URL = 'https://search.jd.com/Search'
# 获取html内容
resp = requests.get(URL, params={
'keyword': SN
})
print(resp.encoding)
resp.encoding = 'utf-8' # 修改编码
html_data = resp.text
# xpath对象
selector = html.fromstring(html_data)
# 找到书本列表
ul_list = selector.xpath('//div[@id="J_goodsList"]/ul/li')
print(len(ul_list))
# 输出每个书籍的内容
for li in ul_list:
title = li.xpath('div[@class="gl-i-wrap"]/div[@class="p-img"]/a/@title') # 图书标题
link = li.xpath('div[@class="gl-i-wrap"]/div[@class="p-img"]/a/@href') # 图书链接
price = li.xpath('div[@class="gl-i-wrap"]/div[@class="p-price"]/strong/i/text()')
store = li.xpath('div[@class="gl-i-wrap"]/div[@class="p-shopnum"]/a/text()')
print(title[0])
print('京东网售价:¥', price[0])
print(link[0])
print('未知商家' if len(store) == 0 else store[0])
print('------------------')
book_list.append({
'title': title[0],
'price': price[0],
'link': link[0],
'store': store
})
if __name__ == '__main__':
SN = '9787115428028'
spider(SN)
此处可能存在不合适展示的内容,页面不予展示。您可通过相关编辑功能自查并修改。
如您确认内容无涉及 不当用语 / 纯广告导流 / 暴力 / 低俗色情 / 侵权 / 盗版 / 虚假 / 无价值内容或违法国家有关法律法规的内容,可点击提交进行申诉,我们将尽快为您处理。