昨天写了一篇python实现爬取某网站的内容
心血来潮想看看自己的文章有多少人看,毕竟之前有一篇文章爆火,有50k的观看
正好再试试刚学的xPath语法
按理来说是从自己的个人账号里面看比较好,不会对文章的数据产生干扰
但是我有点担心泄漏个人隐私
所以采用了浏览文章的形式,也就是各位你们现在看到的页面
这里依旧是对网页进行分析
思路整理
- 查看网站源代码的获取方式
- 得到是get请求
- 在pychram中使用requests模块
- 尝试只填写url—失败
- 尝试加上请求头headers----成功
- 导入etree模块
- 使用xPath语法获取数据
- 将数据写入文件,制作日志
为了更有观赏性,再引入datetime模块,获取当下的时间
把时间和浏览量一起写入文件
代码展示
import requests
import re
from lxml import etree
from datetime import datetime
# 获取当前的日期和时间
now = datetime.now()
url = 'https://blog.csdn.net/FZ51111/article/details/142831513'
header = {'user-agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/127.0.0.0 Safari/537.36 Edg/127.0.0.0'}
rt = requests.get(url=url,headers=header)
# print(rt.text)
html = etree.HTML(rt.text)
readers = html.xpath('//div[@class="read-count-box"]/span/text()')
data = re.findall('\\d+',str(readers))[0]
print(data,now)
with open(r'D:\Python\Python312\Lib\site-packages\PyInstaller\csdn-readers.txt',mode='a',encoding='utf-8') as f:
f.write(f'{data} {now}\n')
代码使用方式
如果你们也想看自己的某篇文章,也想制作日志,需要填写三个地方
第一个是你想看的网页网址也就是url,,替换url即可
第二个是你的请求头,,替换文章的请求头
第三个是想把日志保存在的地址,,,替换with后面的地址
这个方式有一个坏处,你每运行一次代码,你的浏览量就会+1,有一定的干扰,当然,如果你的博客足够火爆就没有影响了
这段代码还能修改,比如,把他整理成函数,再写个循环,每十分钟获取一次文章数据,也就是每十分钟执行一次函数

1495

被折叠的 条评论
为什么被折叠?



