爬虫系统学习3——chrome分析post与json

1、寻找post地址

post_data字典中的键是 input 标签下 name 属性对应的值
在这里插入图片描述

(1)找到js位置——用选择工具选择有js事件的按钮,在事件监听器中跳转到对应的 js 文件

在这里插入图片描述

(1)找到js位置——search all files

在这里插入图片描述

(2)当遇到不清楚的js操作时,都可以在console 里进行尝试

在这里插入图片描述

(3)js添加断点debug

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

(4)总结1——寻找登录的post地址

  • 在form表单中寻找action对应的url地址
    • post的数据是input标签中name的值作为键,真正的用户名密码作为值的字典,post的url地址就是action对应的url地址
  • 抓包,寻找登录的url地址
    • 勾选perserve log按钮,防止页面跳转找不到url
    • 寻找post数据,确定参数
      • 参数不会变,直接用,比如密码不是动态加密的时候参数会变
      • 参数会变
        • 参数在当前的响应中
        • 通过js生成

(5)总结2——定位想要的js

  • 选择会触发js时间的按钮,点击event listener,找到is的位置
  • 通过chrome中的search all file来搜索url中关键字
  • 添加断点的方式来查看js的操作,通过python来进行同样的操作

2、requests 小技巧

(1)cookie对象转化为字典 或 字典转化为cookie对象


                
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值